画像処理、音声・自然言語理解、感情推定、IOH (Internet of Human: 視線や脳波、脈波のセンシング&分析) 。多様なAI技術を統合して ”マルチモーダルなAI” システムを開発します。

ビジネスの課題を解決するには、複数種類のデータ(マルチモーダル)を学習できるAIが効果的と言われ始めています。しかしこのようなAIは未だ少なく、大手ITベンダーが提供するAIサービスもその殆どがシングルモーダルです。でも大丈夫。これらを目的に合わせて選択しシステム化すれば良いのです。私たちはビジネスの課題解決に「マルチモーダルなAIインテグレーション」をご提案します。

例えばこんなこと

画像や音声データを中心に・・・

【顔認識・表情分析】
画像・動画ファイル、ストリーミングなどデータ種別に応じて、顔位置の判定、表情から性別・年齢・感情を推定。

【音声処理、感情推定】
音声データから話者特定、年代、感情を推定。 発話内容の書き起こし、アバター口元とLipSyncした合成音声による発話。

【オブジェクト自動検出】
画像内の複数のオブジェクトの位置とカテゴリを検出。

マルチモーダルなシステム化で対応・・・

【会話/接客判定】
オントロジと合わせたな会話内容の高次判定。音声データとカメラデータによる多角的な会話判定、顧客満足の推定。

【スマホ/スマートグラス実装】 
サーバー側で学習させた自動検出モデルをデバイス側へ実装することでオブジェクト検出をエッジで行い、リアルタイム性が必要なアプリを実装可能に。

【視線、脳波、心拍・脈波 マルチモーダルインテグレーション】 
視線、脳波、心拍・脈波など身体データ・センサーとの連携と計測データの分析、視覚化。

ナレッジワークスは、発展著しい各分野のAIエンジン(クラウド型AIサービスやOSSソフトウェア、専門特化したライセンスソフトウェアなど)の中から、プロジェクトの目的・要件にあうものを選択し、マルチモーダルなAIシステムとしてインテグレーションしてご提供します。

こんな"~したい"を抱える皆様へ

  • 撮り溜めた動画データを分析し有効に活用したい

  • マルチモーダルの活用シナリオをデータ収集から相談したい

  • 営業や接客スタッフの会話内容を判定するシステムをつくりたい

  • 認知行動を促す訓練システムをつくりたい

  • 各種別データの分析・判定の精度を試してみたい

  • マルチモーダルなデータの分析・活用基盤をつくりたい

新たなミッションに挑戦する人を応援したい

関連サービス

マルチモーダル・ラボ

マルチモーダルなAIに関するご相談なら


 ● コンセプト設計
 ● POC開発(Bizケースと技術の両面) 
 ● 本格システム開発  など

スピードが優先される今、不確実性がある新サービスをリリースするには、先ず必要最低限の機能をもって市場に出し、ユーザーからのフィードバックを得ながら短期間の仮設・検証サイクルを繰り返し、そのうえで本質的なサービスを構築する”リーンスタートアップ方式”が選択されます。
リーンスタートアップに必要なデータ収集・解析のためのツールやエンジンと、その活用スキルをクラウドからご提供することで、小さく産んで大きく育てるプロジェクト・ニーズにお応えします。 AIシリュ―ションの実装スキルをもった当社のエンジニアとビジネス・プロフェッショナルが、貴社のプロジェクトを継続的にご支援するサービスです。(派遣や常駐型のサービスではございません。) 

マルチモーダルなAIシステムのDev & Ops


 ● 撮り溜めたカメラ画像を活用したい
 ● 接客トークのトレーニングシステムをつくりたい
 ● 面接の受付、Q&A対応を自動化したい
 ● その他

企画の検討やデータ収集、アノテーション付けなど、計画・準備フェーズから~アプリケーション機能開発、全体システム運用まで必要な範囲をご提供します。