-
Notifications
You must be signed in to change notification settings - Fork 2
Home
"ジャービス、今日の天気を教えて"
こんなことができたら面白いですよね。 codamaを使えば"ジャービス"という言葉をウェイク・アップ・ワードにした音声対話開発ができるようになります。
「codama（こだま）」とは、ユカイ工学株式会社（以下、ユカイ工学）と株式会社NTTドコモ（以下、ドコモ）が、XMOS Ltd（以下、XMOS)のボイス・プロセッサーを採用した音声対話開発キットです。
製品サイトはこちら https://codama.ux-xu.com
音声対話開発キット「codama」は、NTTドコモのオープンパートナーイニシアティブ（2017年6月23日発表）のデバイスオープン機能（ドコモAIエージェントAPI、以下、本API）に対応しており、NTTドコモが提供する本APIのRaspberryPi用ソフトウェアを利用することで動作します。
本製品に搭載された技術と同APIの連携により、様々な電子機器やIoTデバイスを、音声で簡単に操作することを可能にしており、本製品が部屋の隅に配置された場合でも、予め設定出来る様々な呼びかけに反応（ウェイク・アップ・ワード）し、クリアに音声をキャプチャー（ビームフォーミング、およびノイズキャンセル）し、音声によるAPIサービスへのアクセスを可能にします。
本ドキュメントは「codama」のセットアップ方法、およびAPIを利用したサンプルプログラムの説明、「codama」をもっと活用するための各パラーメータの設定方法を説明します。
ここではRaspberry piの初期設定から、codamaを使ったウェイク・アップ・ワードの作成を行い、そのウェイク・アップ・ワードを使ってドコモAIエージェントAPIを動かす手順を説明します。 以下で示す順序通りに設定を進めてください。
ここではRaspberry Piの設定方法および、codamaの設定方法を説明します。
"ジャービス","アスラーダ"等あなたの好きな言葉でウェイク・アップ・ワードを作ってみましょう。
ウェイク・アップ・ワードとは、音声スピーカーに対して音声アシスタント機能を呼び出す音声コマンドです。 このウェイク・アップ・ワードの作成には、YUKAIが提供する専用のツールを利用します。
- [ウェイク・アップ・ワードの作成、動作確認をする]
codama設定が完了したらRaspberry pi用のSebastienを利用したサンプルプログラムが動かせるようになります。
サンプルプログラムを動かすにはcodamaをRaspberry PiとI2Cで接続するように設定を行なってください。
またサンプルプログラムはNTTドコモが提供する/project:SEBASTIEN/を利用しており、サンプルをカスタマイズすることで音声による対話を実装することが可能です。
ウェイクアップワードの処理以外にも、codamaには多数のパラメータが存在し、自由に調整することができます。 例えば、DOA(音源方向)を取得したり、特定の方向からのみ反応するように調整するといったことが可能です。 調整の詳細に関しては下記ご確認ください。
またcodamaはRaspberry Piに留まらず、PCでの開発も可能です。
このサンプルに留まらず、オリジナルのプロダクト開発を楽しんでください。 いくつか作例がありますので、開発の参考にしていただければと思います。
Copyright © YUKAI Engineering Inc.