Avroを使用して複数の列を含む行をBigQueryに挿入

Question

Avroをインポート形式として使用して簡単なテーブルを作成する際に問題があります。私は、N列のプリミティブデータ型（例えば、c1 STRINGとc2 INTEGERという列のテーブル）を持つ典型的なテーブルを作成したいと考えています。私はこの

{ 
    "type": "record", 
    "name": "x", 
    "fields": [ 
     { 
      "name": "c1", 
      "type": "string" 
     }, 
     { 
      "name": "c2", 
      "type": "int" 
     } 
    ] 
} 

ようなスキーマを使用

これはc1とc2をネスト有するタイプRECORDの名前rootと一つの列に生じます。

Avroで2つのカラムc1とc2を持つテーブルにインポートするにはどうすればよいですか？または、固定名がrootの1つの列を持つテーブルのみを作成することは現在可能ですか？

Iは、他のアプローチを試みた：（stringの）

• アブロタイプarrayは{"type":"string"}等root
STRING REPEATEDタイプの最も単純なスキーマタイプ STRINGの名前 rootとつの列を作成する名前を持つ1列を作成します。この方法では、複数の列を作成することも、列の名前を変更することもできません。

Answer 1

フィードバックをいただきありがとうございます。 Avroスキーマは常に、名前のない列から始まります。これは、文字列のようなプリミティブ型、またはレコードのような複雑な型になります。これをBQの列にマップし、名前を「root」に固定します。これが一般的な要求になる場合、囲みレコードをルートレベルでストライピングすることを検討します。しかし、次に、他のタイプとは異なるレコードタイプを処理しています。

解決策は、ルートレコードをクエリで削除し、別のテーブルに保存することです。または、フェデレーテッド・テーブルを使用してロードとストリップを1つのステップで結合することができます。

bq query --external_table_definition = foo :: AVRO = gs：//your_bucket/path/file.avro* --destination_table your_dataset.your_table " SELECT root。* FROM foo "