ETL

P55 1.5.1 データ活用のための変換処理

テキストデータにおける変換処理の例 日付処理:西暦/和暦変換、JST/UTCなどのタイムゾーン変換 不正な値処理変換:Null値や空文字の取扱い 文字列や値の統一:大文字小文字の統一(半角/全角もか)、整数/小数の統一、表記揺れの統一 テーブルの結合処理:取…

Treasure Data 製品

ETL

●fluentd テキストストリームを別の出力系へ流し込むためのOSS github.com●embulk fluentdのバッチ版 github.com●td-agent fluentdの安定版 td-agent側ではなく、今はomnibus-td-agentを見た方が良さげ github.com●DigDag YAML形式で定義するワークフローエ…