amazon-athena

0熱

1答えて

バケットへのパスは、s3のようなものになるように、一般にs3バケットにはいくつかのサブディレクトリがあります。トップレベル関数グループ/より特定のフォルダ/組織テナント会社ID /エンティティID /実際のデータ私たちは、その/実際のデータレベルのデータに対して、org-tenant-company-id内のデータに対してクエリを行うことができるようにAthenaを探しているので、何らかのものと

0熱

1答えて

S3バケットのサブディレクトリからAWS athenaパーティションを作成できますか？

バケットへのパスがs3のようなものになるように、私たちのs3バケットには多くのサブディレクトリがあります：機能グループ/サービス/組織テナント会社ID /実体ID /実データ私たちは、その/実際のデータレベルのデータに対して、org-tenant-company-id内のデータに対してクエリを実行できるようにAthenaを探しています。したがって、org-tenant-company-idの列ま

2熱

2答えて

Athena JDBC出力形式

Athenaでクエリを実行すると、結果は通常CSV形式で使用できます。 TSVまたはその他のような他の可能な出力形式を探しています。私の列の1つにCSVという値が既にあるからです。 MYデータ A a,b,c 123 B a,b 123 私は次のクエリを与えるは： select * from table ; 私はTSVすることを必要とする """A""","""a","b","c" ,

0熱

1答えて

データ集約と平均2,000億レコード

レコードは、毎日次のスキーマで作成されたAVROファイルで開始されました。 "attribute_key"と "attribute_value"レコードには20種類の属性タイプが格納されており、タイムスタンプとdevice_idも各測定に含まれています。 "fields" : [ {"type":"string", "name":"device_id"}, {"type":"string",

3熱

1答えて

athenaを使用してパーティションを作成する際に 'create external'という入力可能な代替語はありません

私はこのようなハイブ形式のs3にパーティションデータを保存しました。 /bucket/date=2017-02-20 /bucket/date=2017-20-25 今私はアテナから次のクエリのパーティションを作成するには、 CREATE EXTERNAL TABLE hive3( battery double, longitude double, application string, lati

2熱

1答えて

R AWSに接続するAthena

オンラインで読んだ内容に基づいてAWS Athenaに接続しようとしていますが、問題が発生しています。更新するJava を取っ手順ユーザーとユーザー/アクセスキー/秘密鍵に渡すパスアクセスキー/秘密鍵を交換/ にだけでなく任意のアイデアを渡しますか？エラーメッセージ： .jcallでのエラー（DRVする@ jdrv、 "Ljava/SQL /接続;"、 "接続"、as.character

0熱

1答えて

Amazon Athenaテーブルの作成に失敗しました "入力時に実行可能な代替案がありません" create external ""

これは私の最初の試みです。データベースに問題がないので、DBが正しくセットアップされていると確信しています。また、正規表現が残念だと思いますが、今は無視してください！私は、ログファイルの形式は、S3に保存されているいくつかのVPCフローのログを持っている：私はAWS example published hereに私のテーブルをベースとしている 2 123456654321 eni-ae343b

1熱

1答えて

Rを経由してアテナに接続

Rをアテーナに接続するためのthis articleを参照しています。、私は次のようなエラーになっていますドライバを定義する場合：（[1]）as.character（driverClass）.jfindClassでエラー：クラスが見つからない私は、いくつかの研究と私はthis pageに到着しました。受け入れられた答えには、同じ問題を述べるコメントがあります。しかし、提供された解決策（すなわ

1熱

2答えて

（SQL-アテナ）

私は現在、例えば行で私たちのwebserverlogからのメッセージを分割するに取り組んでいます：私のメッセージ（データ型string）は次のようになります。 at=info method=GET path="/v1/..." host=web.com request_id=a3d71fa9-9501-4bfe-8462-54301a976d74 fwd="xxx.xx" dyno=web.1

0熱

1答えて

PrestoDBは内部的に中間結果をキャッシュしますか？

PrestoDBにはマルチconnectorsがあります。コネクターは読み取りと書き込み操作を実装していますが、私が読んだすべてのチュートリアルから、通常は読み取り専用のデータ・ソースとして使用されているようです。たとえば、netflixは、Amazon S3上に「10ペタバイト」のデータを持ち、Prestoワーカーノードでディスクが使用されていない（HDFSがない）ことを明示的に示しています。