コールデータレコードのETLとしてのSpringバッチDBへの読み込み - テレコム

Question

誰でも情報を共有できる場合は、ETLツールとして使用されるバネバッチについて説明します。特に通信会社では、ネットワークスイッチからのコールデータレコードの読み込み（CDR）を使用しています。インハウスETLはバネバッチを使用して開発されました。

1. プロダクションでのパフォーマンスは？

2. スケーラビリティを向上させるSpringバッチで使用されるクラウドコンピューティングプラットフォーム。

Answer 1

SpringBatchは、Java開発者がSSISのような専用のETLツールよりも簡単でメンテナンス性の高いETLジョブを作成するためには簡単です。

私が実行している大規模なジョブはすべてアプリケーション自体ではなくネットワークの待ち時間に制約されるため、詳細な情報は得られませんが、より小さな抽出タイプのジョブ（〜10Kレコード）は通常3 -5秒、ほとんどが設定をロードして読み込み中です。

また、easily configurable for multi-threaded useでもありますが、フレームワークで提供されるものは通常スレッドセーフではないため、独自のリーダークラスとライタークラスを記述する必要があります。

ご不明な点がありましたら、お気軽にお問い合わせください。