dataq
JSON、YAML、CSVなどを、再現可能な形で正規化・検証・比較するためのRust製CLIです。
主な機能
- Normalize形式を整えて検証する
JSON、YAML、CSVなどのデータを正規化し、期待する構造かを検証します。
- Inspect構造と差分を調べる
データをプロファイリングし、構造や内容の差分を確認します。
- Transform結合・集計する
複数のデータを結合、集計、マージし、次の処理で使える形へ変換します。
- Run手順を再現する
宣言的に定義した処理手順を実行し、同じデータ処理を繰り返せる形にします。
利用場面
- CIの品質ゲート、ETL前後の検証、データ調査や自動化を想定しています。