Datavoloとは何ですか?
Datavoloは、Apache NiFiを基盤とし、非構造化データに特化したマルチモーダルなデータパイプラインを提供するインフラストラクチャです。単一用途のコードを再利用可能なパイプラインに置き換え、LLM向けのデータアクセスを高速化します。視覚的なキャンバス上でプロセッサをドラッグ&ドロップして構成し、リアルタイムでコードに変換できるのが特徴です。
Datavoloの特徴は何ですか?
- 可視的なパイプライン構築キャンバス上のドラッグ&ドロップ操作でソースから宛先までを接続し、その構成が即座にコードへ変換されます。
- 非構造化データ対応LLMが依存する非構造化ファイルを含むすべてのデータをキャプチャ・処理するために設計されています。
- データリネージ機能すべてのパイプラインにデータの流れと変換履歴(リネージ)が組み込まれており、データの信頼性を確認できます。
- 柔軟な設定変更どのソースからどの宛先へでも、カスタムコーディングなしで瞬時にパイプラインを再構成可能です。
Datavoloの使用例は何ですか?
- Pinecone等のベクトルDB連携キャンバス上でPineconeプロセッサを配置し、他のプロセッサへ接続することで、ベクトルデータベースへのデータ投入フローを迅速に構築します。
- 規制産業での機能開発厳格な規制下にある顧客向け製品において、新機能の提供速度を向上させるためのデータ処理基盤として利用されます。
Datavoloの使い方は?
- キャンバスでの構成Webインターフェース上で、必要なプロセッサ(例:Pineconeなど)をドラッグ&ドロップして配置します。
- 接続の実行配置したプロセッサ同士を線で繋ぎ、データの流れを定義します。この操作により、内部コードがリアルタイムで更新されます。









