継続は力なり

タイトル通り定期的な更新を心掛けるブログです。

トップ > AWS > 11/4~11/10 AWSブログ

11/4~11/10 AWSブログ

AWS

タダです。

今週のAWSブログアップデートをまとめていきます。

今週は記事が大量にアップデートされているので、更新できるタイミングで更新していきます。

今週のアップデートタイトル

１、AWS DevDay Tokyo 2018 Database トラック資料公開

  • 表題の通りの資料が公開されたアナウンス記事です

２、Amazon SageMaker Jupyterノートブックを使用してAmazon Neptune グラフを分析する

  • SageMaker ノートブックを Amazon Neptune データベースに接続してクエリをして結果を視覚化する方法の紹介記事です
    • 上記の環境を作るためのCloudFormationテンプレートも紹介されています

３、地震を追跡中: Amazon Redshift によりETL処理を通じて視覚化のための非構造化データセットを準備する方法

  • Matillion ETL for Amazon Redshift を使用して、S3、Athena、Amazon Redshift の間のさまざまなデータ処理タスクの活動を編成する方法の紹介記事です

４、パフォーマンスの重要性: Amazon Redshift で実環境のワークロードが 3.5 倍の速さに

  • Redshiftのパフォーマンス改善に関する紹介記事です

５、Amazon RDS for SQL Server でデータベースメールをパワーアップ – アンダーアーマーが Amazon RDS for SQL Server でデータベースメールを運用する方法

  • アンダーアーマー社ではSQL Serverからメールを送っていたがRDSではメールの送信がサポートされてなかったため、EC2とSESを使って問題を解決するための手法紹介記事です

６、CSVデータセットのPipeモードを使って、Amazon SageMaker内蔵アルゴリズムでトレーニングがより早く

７、AWS での SQL Server のパフォーマンスベンチマーク

８、AWS Quest 2 – re:Invent への道

  • re:Invent内でのイベント紹介記事です

９、Amazon CloudWatch を使用して Performance Insights メトリックにアラームを設定する

  • RDSのパフォーマンインサイトの機能を使うとCloudWatchからアラームを飛ばせるという紹介記事です
  • 以下のメトリックスが有効化されており、それぞれの監視するステータスは以下の通りです
    • DBLoad : 同時にアクティブとなるデータベース接続数の尺度
    • DBLoadCPU : CPU 上でアクティブかつ実行可能なデータベース接続の数
    • DBLoadNonCPU : 接続が I/O、ロック、データベースバッファーなどのデータベースリソースを待機していた時間

１０、SGK が RDBMS から Amazon DynamoDB に移行することにより、高度に動的なワークロードのデータ構造を簡素化する方法

  • SGK社のDynamoDB移行に関する設計の紹介記事です

１１、Amazon Elasticsearch Service のインプレースバージョンアップグレード

  • Elasticserch Serviceでの5.1 Elasticsearch ドメインから 6.3 Elasticsearch ドメインに移行する方法紹介記事です

１２、ProxySQL と Percona Monitoring and Management で、Amazon RDS for MySQL のデプロイを強化する

  • RDS for MySQLと、ProxySQL、Percona Monitoring and Managementを組み合わせてRDS for MySQLのデプロイを強化する方法の紹介記事です

１３、AWS re:Invent 2018 で開催予定の Amazon DynamoDB セッション、ワークショップ、およびチョークトークのご案内

  • 表題のアナウンス記事です

１４、Oracle データベースでの Amazon EBS エラスティックボリュームの使用　(パート2): LVMを 使ったデータベース

  • ストレージ管理に LVM を使用する Oracle データベースであるEC2 のストレージレイアウトについて検討し、可用性に影響を与えることなくデータベースストレージを拡張する方法の紹介記事です

１５、Oracle データベースでの Amazon EBS エラスティックボリュームの使用 (パート 3): Oracle ASM を使ったデータベース

  • Oracle Automated Storage Management (Oracle ASM) を使った Oracle データベース用EC2 のストレージレイアウトについて解説記事です
  • 可用性に影響を与えずに、データベースストレージを拡張する方法とOracle データベースでエラスティックボリュームを使用する利点についても紹介しています

１６、Amazon QuickSight でメールレポートとデータラベルのサポートを開始

  • QuickSight で利用できるようになった、メールレポートとデータラベルの紹介記事です

１７、Pagely が、カスタマーサポートの分析を容易にするために AWS でサーバーレスデータレイクを実装

  • Pagely社が Beyondsoft社とどのように協力して、Beyondsoft が開発したオープンソースツールである ConvergDB を使用して DevOps 中心のデータパイプラインを構築したかについての紹介記事です
    • このパイプラインでは、Glue を使用してアプリケーションログを最適化されたテーブルに変換し、Athena を使用して迅速かつ費用対効果の高いクエリを実行できているそうです

１８、SimilarWeb が、Amazon Athena と Upsolver を使って毎月数百テラバイトのデータを分析する方法

  • SimilarWeb社がAthenaとUpsolverを使ったデータ解析事例紹介記事です

１９、Equinox フィットネスクラブで、Amazon Redshift を使用して顧客のジャーニーループを閉じる

  • Equinox社でのクリックデータストリームをS3と、Spark、AthnaRedshiftを組み合わせて分析基盤を作った事例紹介記事です

２０、一時的認証情報を使用してフェデレーティッドアイデンティティで、Amazon Athena に接続する

  • 一時的認証情報を使ってAthenaにアクセスする方法の紹介記事です

２１、Amazon Athena で CTAS ステートメントを使用して、コストを削減し、パフォーマンスを向上させる

２２、Amazon Redshift を使用して、デジタルコンテンツを収益化するプロデューサーを支援している Narrativ

  • Narrativ社のデータ分析基盤としてRedshift、Redshift Specturum、S3を使った事例の紹介記事です

２３、AWS DevDay Tokyo 2018 Severless&Mobile トラック資料公開

  • 表題の資料が公開されたアナウンス記事です

２４、新低コストAMD動力M5a および R5a EC2インスタンス

２５、RStudio を実行するために Amazon EMR のエッジノードを立ち上げる

  • リモートワークロード用に構成された RStudio Server とともに Amazon EC2 を Amazon EMR のエッジノードとして構成する方法の紹介記事です

２６、Amazon Kinesis Agent for Microsoft Windows を使用して、Windows イベント、ログ、およびメトリックを収集、解析、変換、ストリーム配信する

２７、Amazon QuickSight で表計算による高度な分析を行う

  • QuickSightで表計算機能がリリースされました
  • ブログではサンプルの販売データセットに適用する方法の紹介しています

２８、Amazon Aurora を使用してエンドユーザーの待ち時間を 3 倍に改善する方法

  • InfoScount社のAurora利用事例の記事です

２９、AWS PrivateLink エンドポイントを使用することで、Amazon VPC から Amazon SageMaker ノートブックに直接アクセスする

  • SageMakerノートブックインスタンスにVPC PrivateLinkでアクセスする方法の紹介記事です

３０、Amazon SageMaker でノートブックのボリュームサイズを最大 16 TB までカスタマイズできます

  • SageMakerノートブックインスタンスのストレージは最大16TBまでサポートされている紹介記事です

３１、Amazon SageMaker ノートブックインスタンスのためのライフサイクル設定の更新

  • SageMakerノートブックインスタンスのライフサイクル設定の紹介記事です

３２、EMR – Sqoop を使用して RDBMS またはオンプレミスデータを EMR Hive、S3、および Amazon Redshift に移行する

３３、Annalect が Amazon Redshift を使ってイベントログデータ分析ソリューションを構築した方法

  • Annalect 社広告テクノロジーパートナーからのイベントログデータを管理、強化、そして分析するために、どのように AWS でソリューションを構築したかについて紹介しています
    • S3、EC2 と AWS Batch、データのカタログ化にGlue、そして分析用にRedshift と Amazon Redshift Spectrum を使用しています

３４、Amazon EMR および IoT センサーネットワークで Apache Flink の複合イベント処理を使用したリアルタイムの山火事警告

  • IoT からリアルタイムで受信する温度イベントを通じて潜在的な山火事のパターンを検知し、E メールでアラートを送信するために、Apache Flink の複合イベント処理 (CEP) によって提供されるイベント処理パラダイムの紹介記事です

３５、AWS IoT とサーバーレスデータレイクを使用したフロントライン脳震盪モニタリングシステムの構築方法 – パート 1

  • データレイクをサポートするデータパイプラインの構築方法の紹介記事です
    • Kinesis Data Streams、Kinesis Data Analytics、Kinesis Data Firehose、およびLambda を使います

３６、AWS Glue を使用することによってオンプレミスデータストアにアクセスして分析する方法

  • Glueを使ってオンプレミスのデータにアクセスし分析する方法の紹介記事です

３７、AWS IoT とサーバーレスデータレイクを使用したフロントライン脳震盪モニタリングシステムの構築方法 – パート 2

  • データレイクをサポートするデータパイプラインの構築方法の紹介記事です
    • 主要分析を使って実用的なデータを作成するサーバーレスデータレイクを作成することによってデータを処理し、可視化する方法の紹介記事です

３８、Camp re:Invent Trivia Challengeに参加してください

  • re:InventのTrivia Challengeの紹介記事です

３９、リソースレベルの IAM アクセス許可とリソースベースのポリシーで、AWS Glue データカタログへのアクセスを制限する

  • IAMの制御でGlueのデータカタログにアクセスする手法の紹介記事です

４０、AWS について学ぶ – 11 月の AWS オンラインテックトーク

  • 表題のイベントの紹介記事です

４１、Performance Insights を使用して Amazon Aurora の MySQL のワークロードを分析する

  • Aurora MySQL互換でPerformance Insightsを使って負荷状況を確認する手法の紹介記事です

４２、OracleデータベースでのAmazon EBS調整可能な容量の使用（パート1）：紹介

４３、AWSデータベース対応プログラムの紹介

  • AWS Database Ready Programの紹介記事です

４４、Amazon Elasticsearch Service を使用して GuardDuty でセキュリティをリアルタイムで監視する

  • ES を使用して GuardDuty 調査結果の集約、検索、分析を行う方法の紹介記事です

４５、RDS SQL Serverには、ワクワクする新しい2つのバックアップ機能とリストア機能があります

  • RDS for SQL Serverは、SQL Serverのネイティブバックアップとリストアに関する2つの重要な改善点がリリースされました
    • S3バケット内の単一の.bakファイルとして、SQL Serverデータベースの完全データベースバックアップ
    • S3バケットからRDS SQL Serverにバックアップをリストアすることもできる

４６、AWS Database Migration Service を使用して PostgreSQL 10 のネイティブパーティション表に移行する

４７、Database Migration Service を使用して、リレーショナルデータベースから Amazon Kinesis に CDC データをロードする

  • RDS for SQL Server データベースへの変更をキャプチャしてKinesis Data Streams に送信する方法及び、S3とAWS Lambda をデータの初期ロードに使用する方法と、DMSを進行中のレプリケーションに使用する方法の紹介記事です

４８、Amazon DynamoDBの適応能力が不均一なデータアクセスパターンに対応する仕組み（または、なぜDynamoDBについて知っている情報が古くなっているのか）

  • 以下の紹介記事です
    • DynamoDBがどのようにしてパーティションとサーバー間でデータを分割させるのか
    • 不均一なワークロードの問題を修正する、適応能力と呼ばれる機能を紹介
    • 適応能力を実証するために、AWSアカウントで実行できるサンプルアプリケーションを紹介

４９、AWS GlueとAmazon Athenaを使用して、Amazon DynamoDBのデータ抽出と分析を簡素化

  • Glueを使用してDynamoDBテーブルをクロールし、Amazon S3にデータを抽出し、Amazon AthenaでSQLクエリを使用して分析を実行する方法の紹介記事です

５０、過去18ヶ月間で見逃した可能性のあるAmazon DynamoDBのハイライト

  • 表題のDynamoDBのアップデートまとめ記事です

５１、Apache Cassandra データベースから Amazon DynamoDB への移行を容易にする

  • Cassandra データベースから DynamoDB テーブルにデータを一括ロードする方法及び、DMSとSCT を使用して切り替える準備が整うまで、DynamoDB テーブルをソースと完全に同期した状態を維持する方法の紹介記事です

５２、Performance Insights で Amazon RDS for MySQL をチューニングする

  • RDS for MySQLにおけるPerfomance Insightsの利用方法の紹介記事です

５３、Amazon Kinesis および Amazon Athena を使用して VPC ネットワークのトラフィックを分析および視覚化する

  • VPC フローのログデータを収集、分析、視覚化する方法の紹介記事です
    • CloudFormation テンプレートも紹介されています

５４、Amazon DynamoDB ストリームを使用して、順序付けされたデータをアプリケーション間でレプリケーションする方法

  • AWS サービスを使用して DynamoDB ストリームを処理するための複数のパターンの紹介記事です
    • 他のシステムやユーザーに通知し、トランザクションをアーカイブし、順序付けされた処理を維持しながらデータを別のデータストアにレプリケートするために、ほぼリアルタイムの DynamoDB ストリーム処理を実行できる最も信頼性の高いスケーラブルなパターンにも触れています

５５、AWS Database Migration Service を使用して Amazon Aurora から Amazon S3 にデータをレプリケート

  • AuroraのデータをDMS経由でS3へレプリケートする方法の紹介記事です

５６、アプリケーションをオンプレミスの Oracle データベースから Amazon RDS for PostgreSQL に移行する方法

  • 共通の Java アプリケーションと Hibernate のレイヤーにおける変更と、Java アプリケーションを Oracle からRDS for PostgreSQL に移行した際に明らかとなった、アプリケーション層を管理するためのベストプラクティスと方針についての紹介記事です

５７、Amazon RDS for SQL Server 上で SQL Server 2008 R2 から SQL Server 2016 にアップグレードする方法に関するベストプラクティス

  • RDS for SQL Server 2008 R2 から RDS for SQL Server 2016 にアップグレードする方法の紹介記事です

５８、Elasticsearch チュートリアル: クイックスタートガイド

  • 表題の通りの記事です

５９、SQL Server エージェントのジョブを AWS Step Functions に置き換える

  • Microsoft SQL Server からAurora PostgreSQL への移行の場合に、SQL エージェントのジョブをStep Functionsを使用して SQL エージェントのジョブを置き換える方法の紹介記事です

６０、Oracle 自律型トランザクションを PostgreSQL に移行する

６１、New Innovations はいかにして研修医管理プラットフォームを Microsoft SQL Server から Amazon Aurora PostgreSQL へ移行したのか

６２、AWS Lambda、Amazon Route 53、および Amazon SNS を使用して、Redis クラスター用 Amazon ElastiCache (クラスターモードが無効) のリードレプリカエンドポイントを監視します

  • SNS をリッスンし、Redis クラスター用ElastiCache (クラスターモードが無効) のリードレプリカに使用される CNAME を更新するLambda 関数の作成手順の紹介記事です

６３、AWS Schema Conversion Tool ブログシリーズ: ビルド 617 の新機能紹介

  • SCTのアップデートの紹介記事です

６４、ソートキーを使用して、Amazon DynamoDB でデータを編成する

  • DynamoDBのソートキーを使用した、データを取得するための最適化テーブルの紹介記事です
    • ソートキーを使用すると、データをグループ化し編成するだけでなく、テーブル内の項目に対してクエリを実行する追加手段にもなります

６５、専用の AWS Glue VPC を使用して複数の VPC 間で ETL ジョブに接続し、実行する

  • VPC の 1 つのソースから消費し、別の VPC の別のソースに出力する ETL パイプラインを構築するために必要なステップの紹介記事です
    • 複数の VPC で設定し、データベースインスタンスがセキュリティ、監査、その他の目的で複数の VPC に分離されている状況を再現します

６６、Amazon SageMaker で増分学習を簡単に実行する

  • SageMaker の増分学習機能を使用して転移学習を実行する方法の紹介記事です

６７、グラフ化なら、おまかせください (パート 1 – 航空ルートの事例)

  • Amazon Naptuneのシリーズ記事です
    • グラフアプリケーションデータセットと、多数の異なるドメインおよび問題空間から取り出されたクエリを探求します

６８、今すぐ利用可能 – AWS Marketplaceの新しいRHEL for SAP with HA and US

以上が今週のアップデートまとめになります。