スタンドアロン検証
アプリ内蔵エンジンとデフォルトモデルを使用して、実際のエンドポイントハードウェア上で一つの限定されたワークロードを検証します。
すべてのAIアプリは組み込みのAIエンジンで独立して開始できます。モデル、計算資源、APIを共有する必要がある場合はAI Serverを追加し、複数のサーバーに対して耐障害性のあるフロントドアが必要な場合のみAI Gatewayを追加します。
AIアプリは組み込みエンジンとローカルルートを保持しつつ、下記の組織プラットフォームに接続できます。
アプリ内蔵エンジンとデフォルトモデルを使用して、実際のエンドポイントハードウェア上で一つの限定されたワークロードを検証します。
ビジネスケースが必要な場合にのみ、中央のモデル、計算リソース、またはAPIサービスを追加します。
中央ガバナンスが重要な場合に、メンバー、権限、サーバー登録、ポリシーおよび監査証跡を追加します。
耐障害性、専門化、または測定された容量が必要な場合に、複数のサーバーワーカーの前にAI Gatewayを配置します。
展開オプションにはWindows、macOS、Linux、Docker、Kubernetesが含まれます。適切なトポロジーは、ワークロード、ハードウェア、アイデンティティ、可用性、コンプライアンスのニーズによって異なります。
互換クライアントを接続して、チャット、埋め込み、画像、音声、ビジョンサービスを利用できます。
モデルと推論を組織が管理するインフラ上に配置します。
メンバー、ライセンス、登録、ポリシー、監査、使用証拠を管理します。
需要と証拠が増加するにつれて、単一ノードからゲートウェイ管理のファームへ移行します。
展開プランナーは、埋め込みアプリ、オプションのサーバー、Gateway、管理、ハードウェア、有料ライセンス数を評価し、注文可能な項目のみをStoreに送信します。