Apache Arrow(PyArrow)を使って簡単かつ高速にParquetファイルに変換する

機械学習を用いた新機能『Amazon Redshift Automatic Workload Management (Auto WLM)』を実際に試してみました

Amazon Redshift ストアドプロシージャをプログラムから呼び出す方法

AWS Glue のジョブタイプ『Python Shell』が Python 3.6と互換性のあるスクリプトをサポートしました

Amazon Athena S3のサーバアクセスログでS3署名バージョンを確認してみた

Amazon Redshift ストアドプロシージャでカラムの中のカンマ区切りデータを複数レコードに分解する

[Tips] サクッと MySQL と PostgreSQL と Redshiftに大量データを作成する方法

Amazon Redshift ストアドプロシージャの所有者の権限で実行する『SECURITY DEFINER』の解説

Amazon Redshift 統計情報を自動更新する『Auto Analyze』の動きを確認してみました

Amazon Redshift PL/pgSQLのストアドプロシージャ開発入門

Amazon Redshift 待望の PL/pgSQL のストアドプロシージャをサポートしました

Amazon Redshift 最適な分散スタイルを自動設定する『DISTSTYLE AUTO』の動きを確認してみました

Amazon MSK（フルマネージドのKafkaクラスタ）のパブリックプレビューが東京リージョンに来たので試してみました

Amazon Redshift cronライクに自動スナップショットを取得できる『スナップショットスケジューラ』がリリースされました

Amazon Redshift 『Concurrency Scaling』の利用状況と利用費を把握する

高い同時実行性と一貫したパフォーマンスを提供する新機能『Concurrency Scaling for Amazon Redshift』を実際に試してみました

Amazon Redshift 高い同時実行性と一貫したパフォーマンスを提供する新機能『Concurrency Scaling』がリリースされました

Amazon Athena ワークロード分離やクエリの閲覧、コスト管理が可能になるWorkgroups がリリースされました

[2019年2月] AWS: カラーのアーキテクチャアイコンと re:Invent2018 の新しい製品アイコンがリリースされました

AWS Glue の新しいジョブタイプ『Python Shell』を実際に試してみました

Amazon Redshift『Auto Vacuum Delete』の動作を確認してみました

[レポート] ANT376 : AWS Glue Data Catalog のアクセスコントロール #reinvent

[レポート] ANT383 – Teradata から Amazon Redshift への移行: マクドナルドのベストプラクティス #reinvent

[レポート] ANT377 : Netezza から Amazon Redshiftへの移行: Edelman Financial Engines のベストプラクティス #reinvent

[レポート] ANT308 : AWS Glue のサーバレスアナリティクスパイプライン構築する #reinvent

[レポート] ANT202 : 最新のクラウドデータウェアハウス Amazon Redshift #reinvent

Sapporo.aws 第4回「re:Invent 2018 Analytics関連アップデート!」について発表しました #reinvent #sapporoaws

ANT396 : [NEW LAUNCH!] AWS Lake Formation の紹介 – セキュアなデータレイクを構築する #reinvent

[レポート] ANT327 : AWSにおけるセキュアなデータレイクのベストプラクティス #reinvent

[レポート] ANT326 : AWS Glue ETL Jobの Metrics-Driven パフォーマンスチューニング #reinvent

[新サービス] 安全なデータレイクを簡単に設定できる！AWS Lake Formation が発表されました！ #reinvent

Very cool らしい AthenaCLI を試してみたら、やっぱりクールだった件

Amazon Athena ユースケースで学ぶデータ分析環境のCTASクエリ活用

パスワードをスクリプトに埋め込むなんてありえない！Tableau ServerのTSMコマンド用スクリプトへ移行する方法

Amazon Redshift これでデータレイクの連携がスムーズになる！ UNLOADコマンドがヘッダー行に対応したので試してみました

Amazon Athena のPartitioningとBucketingによるパフォーマンス戦略

Amazon Athena が待望のCTAS（CREATE TABLE AS）をサポートしました！

Amazon Redshift Spectrumが新たにサポートした『ネスト化されたデータに対するクエリ』を実際に試してみました

Amazon Athena RegexSerDe を利用して ALB ログを探索する(2018年8月版)

Amazon Redshift が最新バージョントラックと1つ前の認定バージョントラックを選べるようになりました

[お知らせ]Amazon Redshift、DC1のリザーブドインスタンスをDC2への無料アップグレードを発表しました

AWS Glue がETLジョブのデバッグとプロファイリングを可能にするメトリックをサポートしました

AWS Glue の Excludeパターンによるデータストアのフィルタリング効果の違いについて

AWS Glue が DynamoDBのテーブルのクロールやETLジョブをサポートしたので試してみました

AWS Glueで多くの小さなファイルをまとめて読み込むgroupFiles/groupSize指定でパフォーマンスを改善する

AWSCLI、Python（boto3）などからS3フォルダ間のコピーしてみる

AWSCLI、Python（boto3）などからS3フォルダを削除してみる

「db analytics showcase Sapporo 2018」で玉川竜司さんのParquetの話を聞いてきました #dbts2018 #dbasSPR

Amazon Athena がついにビュー（CREATE VIEW）をサポートしました！

Amazon Redshift 新たにカラムナファイルフォーマット（Parquet、ORC）からのデータロードに対応しました

AWS Glue と SQLのみで、サクッとETL（Extract、Transform、Load）するJobを作成する

Amazon Redshiftクラスタのパフォーマンスと健全性を確認できる『データベースのパフォーマンス』とそのメトリクスが追加されました

AWS Glue の Pushdown Predicates を用いてすべてのファイルを読み込むことなく、パーティションをプレフィルタリングする

AWS Glue の Dynamicframeを使わずDataframeを用いて自在にCSV/TSVファイルを出力する

AWS Glueを用いてパフォーマンス向上やコスト最適化するカラム名ありパーティションのデータに変換するETLコードを作成する

Amazon Redshift Spectrum 利用費と課金状況を把握する

Amazon Athena Webアクセスログ、CloudFrontのログ、CloudTrailのログのパーティション設定を自動化する

Amazon Redshift Spectrum がスカラーJSONおよびIonデータ型をサポートしたので試してみました

Amazon Redshift Spectrum ダブルクォーテーションで囲まれた文字列をクエリする方法

Amazon Athena LTSV形式のログファイルを探索する