AWS データ処理系サービス

→Amazon Web Service

→AWS その他のサービス

→データ処理関連

一般†

• AWSで完結する検索基盤作ってみた - estie inside blog 2023.3
  • OpenSearch, AWS Database Migration Service, Amazon Elastic Container Service

• Amazon AthenaとAWS Glueの料金体系をまとめてみた - サーバーワークスエンジニアブログ 2023.3

• data-science-on-aws-jp/workshop at main · oreilly-japan/data-science-on-aws-jp · GitHub 2023.2

RDS†

• Amazon RDS を使い始める際に見るべき 10 の設定 | NHN テコラス Tech Blog | AWS、機械学習、IoTなどの技術ブログ 2023.2

• 【初心者向け】RDSの自動起動時間を確認する方法 - サーバーワークスエンジニアブログ 2023.2

• RDS/Aurora バージョンアップのポイント - Speaker Deck 2023.1

• Amazon RDS Blue/Green Deployments利用時に躓いたエラーやハマりポイントなどをまとめてみた - コネヒト開発者ブログ 2023.1

• 【衝撃】AWSのRDSがデータを失わないBlue/Greenデプロイに対応しました | DevelopersIO 2022.11

• RDS、停止したままにしたすぎる問題。 - DENET 技術ブログ 2023.1
• RDS インスタンスを 7 日以上停止する方法 2021

• RDSのパフォーマンスインサイトについて調べてみる | DevelopersIO 2022.6
  • パフォーマンスインサイトを有効化する事で、RDSのパフォーマンスに関するデータが集計され、AWSコンソール上に可視化されます。
  • コンソール上で可視化されたグラフから、DBの負荷の原因となっている項目を見つけ、DBの性能改善に役立てる事が可能です。

• Amazon RDSとAuroraの違いをまとめてみた 2021.9

• RDSのIPアドレスについて
  • Amazon RDSインスタンスは、VPC内に作成される場合にはプライベートIPアドレスを使用することができます。
  • VPC内に作成される場合、RDSインスタンスはVPCのサブネットに配置され、インターネットからはアクセスできないプライベートIPアドレスを使用します。
  • 一方で、VPCの外に作成される場合、RDSインスタンスはインターネットに直接接続され、パブリックIPアドレスを使用します。
  • RDSインスタンスをVPCの外に構築して使う場合はセキュリティ面でのリスクが高いため、推奨されません。

• RDSインスタンスタイプ
• DBインスタンスクラスの選択

• 汎用最新世代
  • db.m5

• 汎用現行世代
  • db.m4

• メモリ最適化最新世代
  • db.r4

• メモリ最適化現行世代
  • db.r3

• バースト可能パフォーマンス現行世代
  • db.t2

• Amazon SimpleDB Home page
• Amazon SimpleDBの紹介(英文)

Amazon Athena†

• AWS SDK for Pandas(AWS Data Wrangler)でAthenaにクエリを投げる 2023.3

• [小ネタ]Athenaのクエリ結果の保存場所について | DevelopersIO 2023.2

• Microsoft Azure のコスト分析自動エクスポート機能を使って利用料金明細データを出力し、Amazon Athena で観察してみた | DevelopersIO 2023.1
• Amazon Athenaのワークグループとは - サーバーワークスエンジニアブログ 2023.1

AWS Glue†

→データ処理関連　＜ETL一般についてはこちら

• AWS GlueのJobでログの特定の文字だけを置換する – TechHarmony 2023.3

• GitHub - mlc-ai/web-stable-diffusion: Bringing stable diffusion models to web browsers. Everything runs inside the browser with no server support. 2023.3

• AWS Glueを使ってみた！〜環境構築・実行編〜 - 神戸のデータ活用塾！KDL Data Blog 2023.3

• AWS Glue Data Quality(プレビュー) をAWS Glueコンソールから試してみよう！ | DevelopersIO 2023.2

• AWS GlueでVantageへデータを出し入れしてみる - Qiita 2023.2

• [Glue4.0] シングルノードで動くpandas処理を1行書き換えて並列分散処理にする！ | DevelopersIO 2023.1
• 【AWS】用語を整理しながら学ぶAWS - part8 AWS Glue - Qiita 2022.9
  • Glue はAWS上でETLを定義して実行できるフルマネージドなデータ分析サービスです
• AWS ETL サービス適材適所選択のコツ AWS_ETL_services_tips_202107.pdf 2022.4

Amazon Quicksight†

• 東京都の人口統計データをAmazon QuickSightのpoints mapで可視化してみた | DevelopersIO 2022.8

Amazon Neptune†

• AWS 製のグラフ DB 可視化ツールの Graph Explorer を試してみた | DevelopersIO 2023.2

最新の50件