継続は力なり

タイトル通り定期的な更新を心掛けるブログです。

ギルド型組織「データラーニングギルド」への参加した経緯と来年の抱負

タダです. この記事は,データ分析人材のキャリア(データラーニングギルド)アドベントカレンダーの11日目の記事になります.先月からオンラインサロンの「データラーニングギルド」に参加させてもらっているのですが,今回は参加した経緯と来年の活動予定(抱…

re:Invent 2019 のアップデート情報をキャッチアップするためのリンク集

タダです. re:Invent 2019 が終わりました.今年も re:Invent の開催前から怒涛のサービスアップデートや機能アップデートアナウンスがあり,本編の Keynote でも発表が行われたりとまさにお祭りイベントを象徴する出来事ばかりだったと思います.あまりにたく…

2年間毎週ブログを書くことで変わったこととコミュニティの存在について考える

タダです. この記事は『write-blog-every-week』のアドベントカレンダー1日目の記事です. adventar.org write-blog-every-week とは 『write-blog-every-week』は毎週月曜日から日曜日までの間にブログに目標にしている記事を作っていくこととその記事作成を…

Terraform のバージョンを『v0.11』から『v 0.12 』へアップグレード!

タダです. 2019年も残すところ1ヶ月ほど...今年のやり残しは今年のうちに一つずつ片付けたい思いで自分の環境の Terraform のバージョンを v0.11 から v0.12 へアップグレードしたので対応方法を整理しておきます. www.terraform.io v0.11 から v0.12 のアッ…

データアナリストとデータサイエンティストの登竜門! 『Data Gateway Talk vol.4』初参加レポート

タダです. 11/21 開催の 「Data Gateway Talk vol.4」にブログ枠として参加させてもらったのでイベントの模様をレポートとして書きます. data-gateway-talk.connpass.com 今回の会場はレコチョクさんのオフィスでした.社内 BGM がたくさんの曲が流れており音…

AWS アカウントを跨いだプライベートホストゾーンの設定方法

タダです. 業務で Route53 プライベートホストゾーンを別アカウントの VPC でも使うことができるよう設定を行ったのでどのように設定するかを整理しておきます. 本記事で紹介する設定の概要 参考ドキュメント 予め準備しておくこと 参考ドキュメント 実際の…

AWS サービス制限の管理に役立つ『AWS Limit Monitor』の紹介

タダです. AWS にはサービスごとに制限が設けられています.EC2 でもオンデマンドインスタンスの制限として vCPU 制限が設けられたのは記憶に新しいです. AWS サービスの制限 docs.aws.amazon.com EC2 の起動制限がサーバー台数から vCPU での制限へ変更のア…

EC2 の起動制限がサーバー台数から vCPU での制限へ変更のアップデート情報を整理する

タダです. EC2 で 新しいオンデマンドインスタンスの制限が設けられ,vCPU ベース制限がアナウンスされました.これまでの考え方と異なるため,この記事では今回のアップデートについて利用者側でどんな対応が必要になるか,という観点で整理していきます. 今回…

組織内での AWS 利用のガバナンスとアジリティを向上させる『AWS Service Catalog』を使ってみる

タダです. 業務でマルチアカウントかつ多数の開発ベンダーの方々が利用する環境の運用において「AWS Service Catalog(以下,Service Catalog)」の利用場面があると思い,まずは「Service Catalog」の概要や利用方法を確認した後,マルチアカウントかつ多数の開…

RDS と Aurora の SSL/TLS 証明書のメンテナンスアナウンスについて

タダです. RDS 及び Aurora で使っている CA 証明書の入れ替えがアナウンスされています.今回はこのメンテナンスの情報をまとめ,対処や注意点に触れて関係する方の一助になればと思います. 2019/10/25更新 AWS からのメンテナンスアナウンス情報まとめ 概要 …

AWS 構成図を PlantUML で描画できる『AWS-PlantUML』

タダです. AWS 環境の構成図を書く機会で PowerPoint や Cacoo 等のサービスを使うことがあると思います.作図もコードで制御する方法もないかと思い調べてみたら,「AWS-PlantUML」というツールがありました.今回はこのツールを使って作図する方法と所感を書…

AWS 謹製のデータ分析モジュール『AWS Data Wrangler』チュートリアルの紹介

タダです. AWS 謹製の Python データ分析モジュールの「AWS Data Wrangler」がリリースされました.今回は普段 Python を使ってデータ分析の勉強をしているため,「AWS Data Wrangler」を公式ブログチュートリアルを参考に使ってみた所感を書いていきます. aws…

GUI 頼りを卒業するための AWS CLI コマンド集

タダです. みなさんは普段 AWS マネジメントコンソールをよく見ますか? GUI は直感的ですぐに状態確認もできて便利なのですが, GUI に頼っていると時間がない時や何度も見るページならすぐに確認できる術を知っておくと運用時にメリットが大きいはずです. …

Mac で Matplotlib のグラフが描画できない問題の対処方法

タダです. 現在,ベータ版である Pyhon3 エンジニア検定データ分析試験を受験するために指定書籍で勉強を進めています.自前の Mac で環境構築し勉強中に Matplotlib のグラフが描画できない問題が起こり,その問題に対処したので対応内容をまとめます. なお,環…

IAM の棚卸しで活用すべき「認証情報レポート」の紹介

タダです. アカウントの運用で IAM ユーザーのパスワードがポリシーに反して変更されてないか や MFA 有効化しなければならないのに有効化されないで放置されている等定期的に棚卸ししているかと思います. 今回はIAM ユーザーの棚卸しに役立つ, IAM の「認証…

東京リージョンの障害から設計と運用の考慮点を整理する

AWS

タダです. 先日, AWS の東京リージョンでの障害があったことは AWS 利用者のみなさんはご存知かと思います.今回の障害を踏まえ,今後の設計や運用にどう活かすかを考えたりチームで話し合ったりしていると思うのですが,僕も所属チームで振り返りをしました.そ…

Effective DevOpsオンライン輪読会 第15回開催レポートと振り返り

タダです. challenge-every-month の Slack メンバーで 「Effective DevOps」のオンライン輪読会を継続してきましたが今回が本書のラストの輪読会でした. Effective DevOps ―4本柱による持続可能な組織文化の育て方作者: Jennifer Davis,Ryn Daniels,吉羽龍…

Amazon Forecast で家庭の電力消費量を予測する

タダです. Amazon Forecast が一般利用可能になったので,サンプルデータを突っ込んで時系列データ予測を行ってみます. aws.amazon.com aws.amazon.com Amazon Forecast の概要 Amazon Forecast の仕組み 対応リージョン 料金 サンプルデータをインポートして…

特定のリージョンのみのリソース制御するための IAM ポリシー設定

タダです. IAM 権限の制御としてリージョンレベルで制御したい要件が出てきたので調べてみたところ, aws:RequestedRegionで制限できるようなので検証した結果をブログにまとめます.なお,今回東京リージョンとソウルリージョンに EC2 を起動している状況で読…

AWS CLI で振り返る AWS 障害時の各種ステータス確認方法

タダです. 先日, AWS で大規模なネットワーク障害が発生して様々な部分で影響が出ていたと各種メディアで報じられていました. aws.amazon.com 8/28追記 2019年8月28日(日本時間)更新 で記事が更新されました.更新された箇所を引用します.影響箇所として新た…

Effective DevOpsオンライン輪読会第12回開催レポート

タダです. challenge-every-month の Slack メンバーで 「Effective DevOps」のオンライン輪読会を毎週開催中です. Effective DevOps ―4本柱による持続可能な組織文化の育て方作者: Jennifer Davis,Ryn Daniels,吉羽龍太郎,長尾高弘出版社/メーカー: オライ…

GuardDuty のマルチアカウント管理機能有効化を省力化する

タダです. 先日, GuardDuty のマルチアカウント管理機能を紹介した記事を書きました.マルチアカウントで GuardDuty を運用するなら有効化すべき機能ですが,多数のアカウントを AWS マネジメントコンソールの操作で有効化するのは煩雑なため, CloudFormation …

AWS CLI のコマンド実行を補助する「aws-shell」の紹介

タダです. AWS CLI 使っていて予測変換機能やパラメータをドキュメントを都度確認せずとも実行できたら楽だなと思っていたのですが, AWS Labsを漁っていたところ「aws-shell」というツールを見つけましたので今回の記事ではこのツールについて紹介します.な…

ALB の監視の統計情報を AWS CLI で取得する

タダです. ELB を使ったシステムで日々の運用状況の確認や障害が発生した時のトラブルシュートに CloudWatch の監視情報やログを使うことがよくあると思います. GUI から確認をしてもいいのですが,例えば時系列ごとのレポーティングに使う際に AWS CLI(以下,…

GuardDuty のマルチアカウント運用で使うべきアカウント管理機能

タダです. Amazon GuardDuty(以下, GuardDuty)をマルチアカウントで有効化している場合, 各アカウントの GuardDuty のイベントを管理・運用のためにアカウント管理機能を試す機会があったので今回はその内容をまとめていきます. GuardDuty のサービス概要 そ…

「Effective DevOps」オンライン輪読会 第10回開催レポート

タダです. challenge-every-month の Slack メンバーで 「Effective DevOps」のオンライン輪読会を毎週開催中です. Effective DevOps ―4本柱による持続可能な組織文化の育て方作者: Jennifer Davis,Ryn Daniels,吉羽龍太郎,長尾高弘出版社/メーカー: オライ…

AWS CDK が GA されたのでツールのアップグレードと関連情報をまとめる

タダです。 AWS Cloud Development Kit(以下、CDK)が GA しましたね!バージョンが v1.0.0 になりました. 公式ブログ aws.amazon.com GitHubのリリース github.com 過去記事でいくつか AWS CDK の記事を扱っています.今回は GA されたことでバージョンがアッ…

CloudWatch Logs Insights で大量なログ分析も手軽に行う

タダです。 運用フェーズになるとトラブルシュートや定常運用時にログを確認することがよくあると思います.僕もそんな時に最近は CloudWatch Logs Insights をを使うようにしています.CloudWatch Logs Insightsは CloudWatch Logs に保管されたログに対して…

DevLoveX で カックさんの発表を聞いて感想と今後の技術ブログに活かすことを振り返る

タダです。 6/22,23に開催された DevLoveX に参加してきました.参加したのはブログメンタリングでお世話になっていたカックさんが登壇されるため,発表を聞いてみたいと思ったからです.ネットでメンタリングしてもらったので,リアルでお会いしたかったのもあ…

「Effective DevOps」オンライン輪読会 第6回開催レポート

タダです. challenge-every-month の Slack メンバーで 「Effective DevOps」のオンライン輪読会を毎週開催中です. Effective DevOps ―4本柱による持続可能な組織文化の育て方作者: Jennifer Davis,Ryn Daniels,吉羽龍太郎,長尾高弘出版社/メーカー: オライ…