AWS 【CloudFormation】VSCode拡張機能の構文エラー解消する設定
はじめに VSCodeの拡張機能である、CloudFormationの設定についてのメモです。デフォルトのままだと!Subだとかが構文エラーになってしまうので、yamlの構文だと認識させるものですね。 設定 歯車マークのメニュー→コマンドパ...
user
AWS 
AWS QuickSight概要まとめ
概要 ・WebベースのBIツール・フルマネージド、サーバレス・多種多様な視覚化パターンを用意・リアルタイム性は低い。リアルタイム性が必要ならOpenSerchを使うべき。 構造 全体像 各種データソースからデータを抽出し、データセットを用意...
AWS Amazon Athena概要まとめ
概要 ・S3のデータをSQLで分析するサービス・フルマネージド、サーバレス・DBにデータを取り込まず、ファイルに対してSQL操作する為、アドホックな分析に向いている。・PresoというオープンソースのSQLエンジン使用。 機能 Athena...
AWS AWS CLIでCloudFormationのスタック操作
はじめに パブリックサブネット上のEC2からawsコマンドでスタックを操作してみる 事前準備 パブリックサブネットにEC2を立てて、CLIコマンドが実行出来る状態にしておく または、ローカル環境でCLIをインストールしておく。 やってみる(...
AWS VisualStudioCode RemoteSSH拡張機能でSSHログイン
はじめに VisualStudioCodeの拡張機能でRemoteSSHというものがあり、こちらを利用すると、VisualStudioCodeからEC2インスタンスへの接続およびCLIでのコマンド実行が行える。 準備 拡張機能インストール ...
AWS EC2 Instance Connect EndpointでパブリックIPアドレスが無いEC2にSSH接続してみる
EC2 Instance Connect Endpointとは EC2 Instance Connect Endpoint(EICエンドポイント)というサービスがリリースされました。今までプライベートサブネットのEC2インスタンスに接続する...
AWS CloudFormationでリソース作ってみる
前提 VSCodeの拡張機能である「CloudFormation」が入っている事任意のフォルダを用意、開いて、そこにymlファイルを用意。ここではcloudformation.ymlとする。 テンプレートについて 全体像 全体像はこれだが、...
Uncategorized Amazon MSK（Amazon Managed Streaming for Apache Kafka）概要まとめ
Amazon MSK)とは Apache Kafkaというオープンソースのリアルタイム分析処理をAWSでマネージドサービスとして提供している。
AWS Amazon EMR概要まとめ
EMRとは Elastic MapReduceの略であり、ビッグデータの処理を提供する。そもそもMapReduceとは、Googleが開発したビッグデータの分散処理ビッグデータの分析を手軽に効率よく行うプログラミングモデル。MapReduc...
AWS Kinesisシリーズまとめ
DataStreams 概要 サーバレスで、大量のデータをリアルテイムで収集、次のサービスへ繋ぐサービス。 アーキテクチャ ・データ発生源：プロデューサ 連携先：コンシューマ コンシューマはAmazon Kinesis Data Strea...