Integration

Amazon S3

Amazon S3 × Codatum

Amazon S3のデータをSnowflake / Redshift / Databricks経由で分析できます。ログ分析、データレイク探索、異常検知をSQLとAIで実現。Lambdaパイプラインなしで自動化まで完結します。

無料ではじめるドキュメントを見る

クレジットカードは不要です

他のデータソース:

Snowflake|

Amazon Redshift|

Databricks|

Google BigQuery|すべて見る →

S3とCodatumの接続でできること

DWH経由でS3データにSQLでアクセス注目

Snowflake External StageやRedshift SpectrumでS3バケットをExternal Tableとして登録すれば、CodatumからSQLで直接クエリできる。Athenaのスキャン課金や可視化の制約から解放される。

複雑なスキーマもCatalog × Agentで探索

Parquet / JSONのネスト構造をCatalogに登録すれば、AgentがSTRUCT / ARRAYを理解したSQLを自然言語から生成。UNNESTを手書きする必要がなくなる。

SQLだけで異常検知・定期集計を自動化

WorkflowでSQLクエリをスケジュール実行し、閾値超過でSlack通知。Lambda + EventBridge + SNSのインフラを構築・運用する必要がない。

SaaS・DBデータとの統合分析

S3のログデータとGA4・Salesforce等のSaaSデータが同じDWHにあれば、SQLでJOINするだけ。Athenaでは不可能だったクロスソース分析が可能になる。

対応データウェアハウス

Amazon S3のデータにアクセスできるデータウェアハウスです。

Snowflake

External Stage → External Table

Amazon Redshift

Redshift Spectrum (External Schema)

Databricks

External Location → Unity Catalog

BigQuery

BigQuery Omni / BigLake

設定方法

S3のデータはDWHのExternal Table機能で直接クエリできます。Codatum側の追加設定は不要です。

Amazon S3

→

External Table / Spectrum

→

Snowflake / Redshift / Databricks / BigQuery

→

Codatum

DWHからS3バケットへのアクセス権限を設定し、External Tableを作成します。データをDWHにコピーせず、S3上のファイルを直接クエリすることも可能です。対応するDWHに接続済みのCodatumから、追加設定なしでクエリできます。

Snowflake External Tables for S3（Snowflake公式）→Redshift Spectrum（AWS公式）→Databricks + Amazon S3（Databricks公式）→BigQuery Omni（Google Cloud公式）→Snowflake × Codatum →Redshift × Codatum →Databricks × Codatum →BigQuery × Codatum →

よくある質問

CodatumはAmazon S3に直接接続しますか？

いいえ、CodatumはSnowflake / Redshift / Databricks等のデータウェアハウスに接続します。S3のデータはDWHのExternal Table機能（Snowflake External Stage, Redshift Spectrum等）を通じてアクセスします。

S3のデータをDWHで分析するにはどうすればいいですか？

DWHからS3バケットへのIAMアクセス権限を設定し、External Tableを作成します。データをDWHにコピーせず、S3上のファイルを直接クエリすることも可能です。詳しくは各DWHの公式ドキュメントをご確認ください。

Athenaとの違いは何ですか？

Athenaはクエリのたびにスキャン量に応じた課金が発生し、キャッシュ・可視化・スケジュール実行の機能がありません。DWH + Codatumなら、キャッシュによるコスト最適化、GridPageでの可視化、Workflowでの自動化までSQLだけで完結します。

ParquetやJSONのネスト構造にも対応していますか？

はい、DWHのExternal TableはネストされたParquet / JSONスキーマを認識します。CodatumではCatalogにテーブルを登録すれば、Agentがネスト構造を理解したSQLを自然言語から生成できます。

S3のデータと他のデータソースを統合できますか？

はい、S3のデータと同じDWH上にあるGA4 / Salesforce / Stripe等のデータをSQLでJOINできます。これはS3内のデータにしかアクセスできないAthenaにはない大きな利点です。

DWHの課金は増えますか？

External Tableでクエリする場合、DWH側のコンピュートリソースで課金が発生します。Codatumはクエリ結果をキャッシュするため、同じ結果を繰り返し取得する際の再課金を抑制できます。またDryRun機能でスキャン量を事前確認してから実行できます。