Denodo MPP によるデータ一括読み込み¶

組み込み MPP に接続されている標準の JDBC データソースを使用して、Denodo からデータ一括読み込みを実行できます。

このような場合、Denodo では以下を実行します。

まず、挿入するデータを含む一時ファイルを Parquet ファイル形式または Iceberg テーブル形式で生成します (Delta Lake テーブル形式はサポートされていません)。
次に、該当のファイルを、このセクションで構成した特定のパスにアップロードします。
最後に、指定したパスからデータベーステーブルがデータを取り込むために必要な操作を行います。

Denodo でデータ一括読み込みを設定する前に、Denodo が作成するファイルを配置する場所を設定する新しいスキーマを、Denodo 組み込み MPP で作成する必要があります。

それには、Denodo ストアドプロシージャ CREATE_SCHEMA_ON_SOURCE を使用できます。

CALL CREATE_SCHEMA_ON_SOURCE(
   'admin_denodo_mpp',
   'embedded_mpp',
   'hive',
   'test',
   '<filesystem_schema>://<host>/<folders>');

データ一括読み込みを構成するには、 embedded_mpp データソースの [Read & Write] タブで [Use Bulk Data Load APIs] をチェックし、少なくとも以下のパラメータを入力します。

データ一括読み込みの構成¶

次に、選択したファイルシステムによっては、いくつかの Hadoop properties を追加し、認証を構成する必要があります。「 Hadoop 互換ルートのサポート」のセクションを参照してください。

Azure Data Lake Storage へのアクセスを構成するプロパティを以下の例に示します。

Azure Data Lake Storage のプロパティの構成¶

最後に [Test bulk load] ボタンをクリックし、すべて正常に動作していることを確認します。

USER MANUALS