project
cpmGO - Facewall Intelligenceが発表した、初の純粋なエッジベースの車載インテリジェントアシスタント
cpmGO(MiniCPM Super Assistant)は、Mianwall Intelligenceが開発した世界初の純粋なエッジベースのインテリジェントアシスタントで、特に車載インテリジェントコックピット向けに設計されています。cpmGOはMianwall MiniCPMエッジモデルに基づいて開発され、ビジョン、音声、多機能性を備えています。
cpmGOとは何ですか?
cpmGO(MiniCPM Super Assistant)は、Mianbi Intelligenceが開発した世界初の純粋なエッジサイド型インテリジェントアシスタントで、車載インテリジェントコックピット向けに特化して設計されています。Mianbi MiniCPMエッジサイドモデルをベースに開発されたcpmGOは、視覚、音声、マルチモーダルインタラクション、グラフィカルUIインタラクションなど豊富な機能を備え、コックピット外からコックピット内まで、エンドツーエンドの認識、意思決定、実行を可能にします。cpmGOは、大規模なクラウドベースモデルと連携した「ネイティブなエッジサイド体験」を提供し、脆弱なネットワーク環境やオフライン環境にも対応し、ユーザーのプライバシーを保護し、迅速な応答を実現します。cpmGOは、すぐに使えるアトミック製品を幅広く提供し、パーソナライズされたカスタマイズにも対応することで、インテリジェント車両がよりスマートで安全かつ効率的なインタラクティブ体験を実現できるよう支援します。
cpmGOの主な機能
- マルチモーダルな相互作用音声、ジェスチャー、グラフィカルUIなど、複数のインタラクション方法をサポートし、「見たままを話せる」ことを実現します。
- 賢明な意思決定と実行ユーザーの意図を理解し、ナビゲーションやエアコンの調整といったタスクを自動的に完了します。
- プライバシー保護データ処理はクラウドに依存せずローカルで行われるため、ユーザーのプライバシーとセキュリティが確保されます。
- 脆弱なネットワーク環境に適しています低電力消費と高性能を実現するため、ネットワーク環境が不安定な場合やオフライン環境でも安定した動作をサポートします。
cpmGOの技術原則
- エンドサイドモデルアーキテクチャMiniCPMエッジモデルは、壁面インテリジェンスをベースとしています。高いパフォーマンスを維持しながら、効率的なローカル動作を実現するように最適化されています。このモデルは、自動車のコックピットやOEMのニーズを満たすために、機能とサイズの両面で精密に設計されています。
- 深層適応と推論最適化本製品は、車載用チップの主流に最適化されており、共同チューニングと推論アクセラレーションにより、車載用チップの消費電力と演算処理能力の問題を解決します。最適化されたアルゴリズムとハードウェアアクセラレーションに基づき、ミリ秒レベルの応答速度を実現します。
- マルチモーダルな知覚と相互作用視覚、音声、グラフィカルUIなど複数のモダリティを組み合わせることで、より自然で効率的な対話体験を実現します。ディープラーニングアルゴリズムに基づき、ユーザーの曖昧な意図を理解し、的確なサービスを提供します。
- エンドツークラウドのコラボレーションエッジクラウド連携に基づき、より強力な機能拡張とデータ更新を可能にする。
cpmGOの応用シナリオ
- スマートカーユーザーハイテクな運転体験を追求するため、車両システムは音声やジェスチャーなどのインテリジェントな対話方法に基づいて、便利に制御できる。
- プライバシーを重視するユーザー個人データのプライバシーに対する要求が高く、車載データが漏洩しないことで情報セキュリティが確保されることを望むユーザー。
- ネットワークの状態が悪い環境で頻繁に運転する人例えば、トンネルや山間部、人里離れた地域を頻繁に運転する人は、ネットワーク接続が弱い、あるいは全くない環境でも、車両のインフォテインメントシステムを通常通り使用する必要がある。
- ホームユーザーそのためには、車内で子供やペットの世話をしたり、シートベルトが締められていないことを子供に知らせたり、ペットの状態が異常であることを知らせたりするスマートアシスタントが必要となる。
- 効率的な運転体験を求めるユーザー運転中の操作性と安全性を向上させる。