u-sql

    1

    2答えて

    私は、Azure Data Lake Analytics(ADLA)にU-SQLスクリプトを使用して、Azure Data Lake Store(ADLS)にアップロードされた2つのcsvファイルを処理しようとしています。 CSVファイルには1つの行と3つの列があります。私はU-SQLスクリプトを使って各ファイルの3つの要素を追加し、その結果を新しいCSVファイルに入れる方法は明確ではありません。

    1

    1答えて

    私はusqlスクリプトを動的に生成して、テーブルスキーマを読み込みます。私は既存のtsvファイルをデータ・レイク・ストアに置いており、新しいデータをそれらの既存のtsvファイルに追加する必要があります。 しかし、usqlスクリプトを生成すると、テーブルスキーマが変更され、追加のカラムが追加されることがあります。 私の知る限り、tsvファイルのusqlスクリプトと同じ数の列を持つ必要があります。 こ

    0

    1答えて

    データレイク解析でデータベースを作成しました。 次に、データ湖のファイルのデータが入力されます。 私が作成したテーブルにクエリを実行すると、いくつかの奇妙なエラーが発生します。 (私には奇妙な!) これは動作します:WHERE [刻印シリアル番号] == "000074O1" これはない:[CTN番号] == "000074から1" エラー: "コード生成中にシステム障害が発生しました。 アレイの

    1

    1答えて

    私たちは、単純な時系列データを含む大きなU-SQLテーブルを持っています。テーブルは1日に分割されます。新しいバッチのデータが受信されるたびに、新しいバッチに古いデータポイントの更新値が含まれている場合、新しい時系列データポイントを挿入し、以前に受信したデータポイントを新しい値で更新する必要があります。 U-SQLで詳細なUPDATEまたはDELETEを実行できないため、影響を受けたパーティション

    0

    1答えて

    私はAzureデータレイク解析とU-SQLを学習しています。私は実行され、期待される出力を生成する簡単なスクリプトを持っています。しかし、ヘルパーメソッドの背後にあるコードにブレークポイントを設定すると、シンボルがロードされていないため、決してヒットしません。私は利用可能なMicrosoftのチュートリアルをすべて見てきましたが、デバッグを有効にするために何かをしなければならないという提案はありま

    0

    1答えて

    私はファイル内のvarbinary列を抽出する必要があります。私はバイト[]で抽出しようとしました。 「変換エラー。無効な文字を含む列」というエラーが表示されます。 U-SQLスクリプト:?? EXTRACT IDをint型、CreatedDateに日時、フォトバイト[] Extractors.Csvを使用した @input FROM は(引用:真、nullEscape: "\ Nを" );

    1

    1答えて

    ADLSは帯域幅の制限をいくつか実装しているようです。これらはデータにアクセスするすべての人に等しく適用されますか? (HDInsightクラスタとADL Analyticsの違いはありますか?) この帯域幅はどの範囲でどのように決定されますか? Here一部のHDInsightの制限があります。 HereいくつかのU-SQL制限が記載されています。

    1

    1答えて

    データレイクファイルをGZ圧縮に圧縮する必要があります。 USQLの出力装置が直接これをサポートしていないことがわかりました。私の以前の投稿では、How to preprocess and decompress .gz file on Azure Data Lake store? @Michael Rysは、自動圧縮機能は現在ロードマップ上にあると述べました。誰もがこれを達成するためのカスタムコー

    0

    1答えて

    私はそれが期待するよりもはるかに長い時間を要するように見えます。 70MBのファイルを読み込み、データを変更しないPythonスクリプトを呼び出す減速機を介して実行し、新しいファイルにデータを書き戻します。 Pythonスクリプトで実行すると42分かかりますが、コンパイルを含めて1分未満で完了します。 私は理解しようとしている:私は間違って 何をしているのですか? 何時間もかかるフードの下には何が

    1

    2答えて

    U-SQLでは、要素内の要素のリストを取得しようとしています(XmlExtractorを使用)。しかし、私はネストされたコレクションを取得することはできません。 ロケーションのあるアイテムのリストです。 XmlExtractorでは、要素のコレクションを取得できますが、コレクションを含むコレクションを取得する方法はわかりません。 XMLサンプルを以下に示します。 アイデア?文字列は結果の区切りカン