AWS データ処理系サービス の履歴(No.12)

• 履歴一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• AWS データ処理系サービス へ行く。
  • 1 (2023-02-02 (木) 09:10:42)
  • 2 (2023-02-02 (木) 09:21:12)
  • 3 (2023-02-04 (土) 21:53:38)
  • 4 (2023-02-08 (水) 13:19:29)
  • 5 (2023-02-09 (木) 16:18:29)
  • 6 (2023-02-10 (金) 22:06:49)
  • 7 (2023-02-12 (日) 13:01:16)
  • 8 (2023-02-13 (月) 11:02:27)
  • 9 (2023-02-13 (月) 21:31:53)
  • 10 (2023-03-01 (水) 17:22:38)
  • 11 (2023-03-03 (金) 10:55:16)
  • 12 (2023-03-03 (金) 14:58:00)
  • 13 (2023-03-13 (月) 10:24:39)
  • 14 (2023-03-17 (金) 18:40:39)
  • 15 (2023-03-29 (水) 13:26:41)
  • 16 (2023-04-10 (月) 11:00:54)
  • 17 (2023-05-02 (火) 17:17:17)
  • 18 (2023-05-06 (土) 13:58:34)
  • 19 (2023-06-21 (水) 11:25:24)
  • 20 (2023-09-28 (木) 09:25:23)
  • 21 (2023-09-29 (金) 09:43:15)
  • 22 (2023-10-23 (月) 11:47:38)
  • 23 (2023-10-28 (土) 22:54:53)
  • 24 (2023-11-04 (土) 21:41:17)
  • 25 (2024-01-13 (土) 11:31:39)
  • 26 (2024-01-17 (水) 16:58:36)
  • 27 (2024-01-17 (水) 21:36:54)
  • 28 (2024-01-29 (月) 17:41:10)
  • 29 (2024-04-07 (日) 22:31:25)
  • 30 (2024-04-12 (金) 13:30:29)
  • 31 (2024-04-22 (月) 22:10:22)

→Amazon Web Service

→AWS その他のサービス

→データ処理関連

一般†

• AWSで完結する検索基盤作ってみた - estie inside blog 2023.3
  • OpenSearch, AWS Database Migration Service, Amazon Elastic Container Service

• Amazon AthenaとAWS Glueの料金体系をまとめてみた - サーバーワークスエンジニアブログ 2023.3

• data-science-on-aws-jp/workshop at main · oreilly-japan/data-science-on-aws-jp · GitHub 2023.2

RDS†

• Amazon RDS を使い始める際に見るべき 10 の設定 | NHN テコラス Tech Blog | AWS、機械学習、IoTなどの技術ブログ 2023.2

• 【初心者向け】RDSの自動起動時間を確認する方法 - サーバーワークスエンジニアブログ 2023.2

• RDS/Aurora バージョンアップのポイント - Speaker Deck 2023.1

• Amazon RDS Blue/Green Deployments利用時に躓いたエラーやハマりポイントなどをまとめてみた - コネヒト開発者ブログ 2023.1

• 【衝撃】AWSのRDSがデータを失わないBlue/Greenデプロイに対応しました | DevelopersIO 2022.11

• RDS、停止したままにしたすぎる問題。 - DENET 技術ブログ 2023.1
• RDS インスタンスを 7 日以上停止する方法 2021

• RDSのパフォーマンスインサイトについて調べてみる | DevelopersIO 2022.6
  • パフォーマンスインサイトを有効化する事で、RDSのパフォーマンスに関するデータが集計され、AWSコンソール上に可視化されます。
  • コンソール上で可視化されたグラフから、DBの負荷の原因となっている項目を見つけ、DBの性能改善に役立てる事が可能です。

• Amazon RDSとAuroraの違いをまとめてみた 2021.9

• RDSのIPアドレスについて
  • Amazon RDSインスタンスは、VPC内に作成される場合にはプライベートIPアドレスを使用することができます。
  • VPC内に作成される場合、RDSインスタンスはVPCのサブネットに配置され、インターネットからはアクセスできないプライベートIPアドレスを使用します。
  • 一方で、VPCの外に作成される場合、RDSインスタンスはインターネットに直接接続され、パブリックIPアドレスを使用します。
  • RDSインスタンスをVPCの外に構築して使う場合はセキュリティ面でのリスクが高いため、推奨されません。

• RDSインスタンスタイプ
• DBインスタンスクラスの選択

• 汎用最新世代
  • db.m5

• 汎用現行世代
  • db.m4

• メモリ最適化最新世代
  • db.r4

• メモリ最適化現行世代
  • db.r3

• バースト可能パフォーマンス現行世代
  • db.t2

• Amazon SimpleDB Home page
• Amazon SimpleDBの紹介(英文)

Amazon Athena†

• AWS SDK for Pandas(AWS Data Wrangler)でAthenaにクエリを投げる 2023.3

• [小ネタ]Athenaのクエリ結果の保存場所について | DevelopersIO 2023.2

• Microsoft Azure のコスト分析自動エクスポート機能を使って利用料金明細データを出力し、Amazon Athena で観察してみた | DevelopersIO 2023.1
• Amazon Athenaのワークグループとは - サーバーワークスエンジニアブログ 2023.1

AWS Glue†

→データ処理関連　＜ETL一般についてはこちら

• AWS Glue Data Quality(プレビュー) をAWS Glueコンソールから試してみよう！ | DevelopersIO 2023.2

• AWS GlueでVantageへデータを出し入れしてみる - Qiita 2023.2

• [Glue4.0] シングルノードで動くpandas処理を1行書き換えて並列分散処理にする！ | DevelopersIO 2023.1
• 【AWS】用語を整理しながら学ぶAWS - part8 AWS Glue - Qiita 2022.9
  • Glue はAWS上でETLを定義して実行できるフルマネージドなデータ分析サービスです
• AWS ETL サービス適材適所選択のコツ AWS_ETL_services_tips_202107.pdf 2022.4

Amazon Quicksight†

• 東京都の人口統計データをAmazon QuickSightのpoints mapで可視化してみた | DevelopersIO 2022.8

Amazon Neptune†

• AWS 製のグラフ DB 可視化ツールの Graph Explorer を試してみた | DevelopersIO 2023.2