etl

0熱

1答えて

私はssis etlパッケージを作成したいと思います。 ssisに新しいです。それでもインターネットからの基礎を学ぶことができ、それに取り組み始めました。ソース= xml。宛先= Microsoft SQL Serverデータベース..良好なレコードと不良レコードの2つの別々のテーブル1つ。私の最終的な結果は次のようになります。エラーのある特定の列が来て、下の表に表示されます.1つのxml行

0熱

1答えて

Pentaho Spoon Database Lookup、日付の比較方法

私はETLを開発するためにPentaho Spoonを使用していますが、Extractの非正規化データを取得し、DimensionのPKを取得するルックアップのセリフを作成する必要があります。これらのディメンションの1つに、レコードの緊急性の開始日と終了日があります。したがって、Extensionの参照日を使用して、Dimensionの開始日と終了日を基準にしてテーブルを検索する必要があります。

0熱

1答えて

pygrametl 1つのテーブルから別のテーブルにデータをロードするときのKeyError

私はpygrametlを使って、データベース（ソース）の1つのテーブルから宛先データベースの別のテーブルにデータを取得しようとしています。ソーステーブルには、次のスキーマを有する。 CREATE TABLE `sdata` ( `id` int(11) NOT NULL AUTO_INCREMENT, `fname` varchar(255) DEFAULT NULL,

0熱

2答えて

赤方偏移 - CSV負荷ラインブレイク

イムでロードが、私はエラー Delimited value missing end quote CSVファイルのエラー行赤方偏移ERROR得ながら、CSVファイルをロードしようとしている：を line_number | 13 colname | Comment col_length | 250 raw_line |"123"|"123"|"xyz"|"2009-06-25 21:

0熱

2答えて

Cassandra 3.10からデータを抽出するのに最高の無料ETLは何ですか？

データベースCassandraからデータを抽出して、変換を行いたい。

0熱

1答えて

ケトルのリポジトリパスを取得

ケトルが使用している完全なリポジトリパスを取得するのに苦労します。変数（link）のヘルプを読むと、ジョブまたは変換であるかどうかに応じて、 "Internal.Transformation.Repository.Directory"または "$ {Internal.Job.Repository.Directory}"のいずれかを使用できます。これは実際に動作し、repoをrootとしてファイルへ

-2熱

1答えて

生成MISは、下のシナリオのためのあなたの提案の

アムの必要性を報告し、オープンソース技術を使用してダッシュボードサーバー。は - を生成する約100の報告があります - そこは周り50Kの行は、これらのデータベースのそれぞれに追加されます - レポートは、毎月1回のために生成されるようにしている - 彼らはbaremetals にすべてそこにセットアップを実行している - 彼らドン彼らはmaintainabilityがより高くなると思うの

1熱

1答えて

イベントストリームからの自己参加日の効率的な方法は何ですか？

私は初めてイベントストリームに取り組んでいるので、テーブルに自分自身を参加させることは、私が大したことをあまりしていないことでした。ユーザーがログインした後にチャットロビーの読み込み時間を与えるSQLスクリプトを作成しようとしています。以下では、ETLのサンプルスクリプトがあります。私は、自分が行ったことをより良く結合する方法があるかどうかを知りたい。私はまた、サブクエリを2つの別個のテーブルに分

0熱

1答えて

.csvとしてGreenplumデータベースをAmazon S3にエクスポート

仮想シナリオ - 1000ノードのデータに100 TBのデータを含む10ノードのGreenplumクラスタがあるため、S3にオフロードする必要があります。理想的には、最終結果はデータベースの各テーブルに対応する.csvファイルです。私は3つのアプローチがあり、それぞれポジティブとネガティブがあります。 COPY - どのように答えたのかという疑問がありますが、分散アーキテクチャーでのpsql

-1熱

1答えて

ユニオンを使用せずに列ごとに最高の価値を得る