AWS

EC2 Instance Connect EndpointでパブリックIPアドレスが無いEC2にSSH接続してみる

EC2 Instance Connect EndpointとはEC2 Instance Connect Endpoint(EICエンドポイント)というサービスがリリースされました。今までプライベートサブネットのEC2インスタンスに接続するに...
AWS

CloudFormationでリソース作ってみる

前提VSCodeの拡張機能である「CloudFormation」が入っている事任意のフォルダを用意、開いて、そこにymlファイルを用意。ここではcloudformation.ymlとする。テンプレートについて全体像全体像はこれだが、Reso...
Uncategorized

Amazon MSK(Amazon Managed Streaming for Apache Kafka)概要まとめ

Amazon MSK)とはApache Kafkaというオープンソースのリアルタイム分析処理をAWSでマネージドサービスとして提供している。
AWS

Amazon EMR概要まとめ

EMRとはElastic MapReduceの略であり、ビッグデータの処理を提供する。そもそもMapReduceとは、Googleが開発したビッグデータの分散処理ビッグデータの分析を手軽に効率よく行うプログラミングモデル。MapReduce...
AWS

Kinesisシリーズまとめ

DataStreams概要サーバレスで、大量のデータをリアルテイムで収集、次のサービスへ繋ぐサービス。アーキテクチャ・データ発生源:プロデューサ 連携先:コンシューマ コンシューマはAmazon Kinesis Data Streams ア...
Uncategorized

AWS Data Analytics – Specialty (DAS-C01) に向けてのメモ

試験概要試験概要を見てみるイメージがつかないサービスや曖昧なサービスについては概要だとかをまとめていくAmazon CloudSearchAmazon EMRAWS GlueAmazon KinesisAWS Lake FormationA...
AWS

DynamoDB概要まとめ

パフォーマンスプロビジョニングモード○AutoScalingとプロビジョニングモードの違い AutoScaling:急激なトラフィックの増加には対応できない。DynamoDBストリームアイテムの変更があった場合にキャプチャする機能。しかしT...
Uncategorized

データベース移行概要まとめ

オンプレからAWSオンプレのMySQLからAWSのRDS for MySQLへ○mysqldumpを利用した移行1.mysqldumpにて、オンプレDBのスナッショットを作成。S3へコピー2.EC2でMySQLユーティリティを使用し、DBイ...
AWS

Redshift概要まとめ

特徴データ分析に利用するデータウェアハウスサービスSQLクライアントやBIツールにてデータアクセスリレーショナルデータベース列指向ストレージ構造クラスター構成は以下の通りLeader Nodeユーザーからのクエリを受け取り、クラスタ全体の調...
AWS

SecretsManagerとSystemsManagerパラメータストア概要まとめ

相違点項目Secrets ManagerSystems Manager Parameter Store統合サービスデータベース全般、EC2、ECS、Lambda等多数。データベース関連はほぼ無い。認証情報の自動ローテーション有り無しLamb...