Modality-First
つないで、つくる。

TongFlow は、マルチモーダルAIワークフローを組み立てるオープンソースのツールです。キャンバス上でテキスト、画像、音声、動画、3D、文書をつなぎ、情報の抽出、変換、生成、組み合わせを行えます。各ステップは対応するプラグインと、そのモデルや処理プログラムで実行します。クラウド版でも、自分の環境に導入しても使えます。

テキスト、画像、音声といった情報の形態を基本単位にする考え方です。機能がそれらをつなぎ、モデルが機能を実行します。違うワークフローも共通の構造で組み立てられます。

各機能の入力・出力の型に合う接続が必要です。実行には対応するプラグインも必要です。組み合わせの設計は自由ですが、実行できる処理は現在の機能によって決まります。

いいえ。画像の理解、テキストの抽出、文字起こし、動画の分割、複数のデータを組み合わせる処理も扱えます。生成は、その中のひとつの操作です。

クラウド版を使うか、アプリをセルフホストし、選んだプラグインに必要な認証情報を設定します。Modal系プラグインにはModalアカウント、API系には対応するプロバイダーのキーが必要です。

クラウド版にはサブスクリプション料金がかかります。モデルAPIとGPUの利用料は、各プロバイダーから別途請求されます。TongFlowは生成クレジットを販売していません。料金と試用条件は料金ページをご覧ください。