Labelboxとは何ですか？
Labelboxは、AIエージェントによる業務実行と、フロンティアモデル向けのデータ・環境構築を提供するプラットフォームです。エンジニアリングやリサーチチームがタスクを委任できる「Recursion」と、AIラボ向けにRL環境や専門家データを供給する「Horizon」などの製品群で構成されています。各エージェントはサンドボックス内で動作し、認証情報への直接アクセスを制限した上で作業を実行します。
Labelboxの特徴は何ですか？
- Recursion（エージェントワークフロー）計画やアラート、API呼び出しなどをトリガーに、複数の専門エージェントが並列でコード修正や評価再実行などのバックグラウンドタスクを完了させます。
- Horizon（RL環境と評価）フロンティアモデルのポストトレーニング用に、推論、ツール使用、コンピュータ操作を含む強化学習環境と評価セットを提供します。
- Terra（ロボティクスデータ収集）7つの同期視点からエゴセントリックおよび遠隔操作デモをキャプチャし、コーパスの欠落部分を補うためのAI多様性エンジンを用いて収集を制御します。
- Alignerr（専門家判断の提供）法律、金融、医療など200以上の分野でスキルテスト済みの専門家によるルーブリック作成、選好ラベル付け、採点評価を提供します。
- セキュリティ分離各エージェントは専用のサンドボックス内で動作し、必要なリポジトリやツールのみへアクセス可能であり、すべてのコマンドや差分が記録されます。
Labelboxの使用例は何ですか？
- モデル回帰の原因特定チェックポイントでの性能低下に対し、評価の再実行、学習データの差分比較、アブレーション実験を通じて原因を特定し、修正パッチをレビューに出します。
- ソフトウェア保守自動化Sentryからの新規バグ報告を受け取り、再現手順の確認、原因究明、回帰テスト付きの修正プルリクエスト作成までを自動で行います。
- メタによるGIMベンチマーク開発820件の専門家作成問題とマルチモーダル項目を用いたデータ基盤を構築し、LLM評価飽和後の能力比較を可能にするフレームワークを実現しました。
Labelboxの使い方は？
- ジョブ定義開始条件（スケジュール、アラート、コミットなど）と期待される成果物、成功基準を記述します。
- エージェント起動Recursionがタスクを計画し、必要に応じて複数の専門エージェントを並列実行します。
- 結果納品プルリクエスト、結果テーブル、またはSlackスレッドとして、根拠資料とともに完成した作業を返却します。
