ホログラム×音声対話|歌で癒しを届ける「UtaMe(うたミー)」開発プロジェクト

【体験版無料配信中!】スマホ一つで楽しめる、音声対話型AIキャラクターアシスタントアプリ「ACUAH(アクア)」は今回、リアルタイムで歌う歌唱システム「UtaMe(うたミー)」を実装します。会話するだけでなく、好きな曲を歌ってもらったり、一緒に歌ったり…そんな、新しい体験をお届けします。

もうすぐ
終了

現在の支援総額

1,022,500

102%

目標金額は1,000,000円

支援者数

35

24時間以内に3人からの支援がありました

募集終了まで残り

5時間

ホログラム×音声対話|歌で癒しを届ける「UtaMe(うたミー)」開発プロジェクト

もうすぐ
終了

現在の支援総額

1,022,500

102%達成

あと 5時間

目標金額1,000,000

支援者数35

【体験版無料配信中!】スマホ一つで楽しめる、音声対話型AIキャラクターアシスタントアプリ「ACUAH(アクア)」は今回、リアルタイムで歌う歌唱システム「UtaMe(うたミー)」を実装します。会話するだけでなく、好きな曲を歌ってもらったり、一緒に歌ったり…そんな、新しい体験をお届けします。

こんにちは。シーズユナイト 大高です。支援いただいております皆様、いつもありがとうございます。体験版はお試しいただけましたでしょうか。VoiSona「双葉湊音」の歌声で、さまざまな楽曲を歌ってくれたかと思います。聴いていただいた方はお気づきかもしれませんが、その歌声は「正しい音程で歌う、フラットで自然な歌声」です。これは裏を返せば、リバーブ(エコー)・こぶし・しゃくりといった表現技法は、現時点では入っていない。いわゆる「上手な歌声」ではない、ということになります。※ 将来的にはそういったエフェクトも楽しめるようにしていきたいと考えていますが、リリース時点では対応していません。実は、UtaMeの開発コンセプトは「上手に歌う」ことではありません。もっと気軽に、「歌」そのものを楽しんでほしい。楽しみたい。これが出発点です。もし日常生活に本当に寄り添ってくれるAIアシスタントがいるとしたら——✔ 歌を歌ってくれる✔ 一緒に歌ってくれる✔ 自分の歌を聴いてくれるそんな存在であってほしいと思っています。「歌」には医学的にも癒し効果があることが示されており、そこに歌の上手・下手は関係ありません。UtaMeが目指すのは、そんな日常のひとこまです。もう一点、技術面についてもお伝えします。UtaMeでは、オケデータ(伴奏)と歌声を別々のデータとして同時再生しています。そのため、それぞれを独立して音量やキー(音程)を調整することができます。✔ キーが高すぎるから下げて一緒に歌いたい✔ キャラクターの声質に合わせて音程を調整したい✔ 楽器の練習用に、伴奏だけ・歌声だけを使いたいこういった使い方にも対応できます。ぜひご期待ください!


こんにちは。シーズユナイト 大高です。支援いただいております皆様、いつもありがとうございます。UtaMe体験版 お楽しみいただいておりますでしょうか。「UtaMe(うたミー)」 は、音声対話型AIキャラクターアシスタントアプリ「ACUAH(アクア)」に実装される歌唱機能のサービス名です。(ややこしくて済みません。)既存楽曲を含め、キャラクターが色々な歌を歌うという新しい体験を、まずは気軽にお試しいただきたいとの思いで体験版のご提供を開始したため、今までの「ACUAH」で搭載しておりました、AI(LLM)対応ついては体験版では省いております。ご了承ください。※ 勿論、UtaMe機能を搭載した新「ACUAH」では AI(LLM)対応もいたします。ですが... なぜか「話そう」ボタンが画面左下にあります。体験版でも音声認識機能でキャラクターに話しかける事ができます。ただ、AI(LLM)には対応していませんので、決まったフレーズや言葉にのみ反応するようになっています。■ キャラクターとの音声対話の仕方1.「話そう」ボタンをタップします。2.画面右側に紫色のボールが表示されたら、音声認識が開始します。3.キャラクターに話しかけてください。4.認識してくれたらボールが薄い緑色に、認識失敗した場合は赤色に変わります。例えば、「こんにちは」とか「こんばんは」とか、「明日の天気は」「歌って」等話しかけてみてください。応答してくれましたでしょうか。一方で、決まったフレーズや言葉にのみ反応する仕組みのため、正直なところ、思ったような応答をしてくれない事があります。「なんだ、使えないな...」と思われてしまったかも知れません。しかし、実は体験版でも、この「決まったフレーズ」や「言葉」について日々更新したものを配信しております。ですので、昨日は思ったような応答をしてくれなかった場合でも、若しかしたら、今日は応答をしてくれるかも知れません。是非お試しいただければと思います。詳細は仕組みについては、前回実施しましたクラウドファンディング「3Dホログラム・汎用AIアシスタント を普及させたい!」の活動報告でご説明しておりますので、よろしければこちらもご覧ください。音声認識の仕組み音声認識の仕組み(ウェイクワード)対話シナリオとはUtaMeの開発は順調に進んでおりますが、サービスリリース後の安定した運営が困難になってしまうかも知れません。皆様のご協力が必要です。何卒ご支援賜りますよう、どうかよろしくお願いいたします。


こんにちは。シーズユナイト 大高です。支援いただいております皆様、いつもありがとうございます。UtaMeの魅力の一つは、色々な声で歌ってくれること です。VoiSona等を手掛ける 株式会社テクノスピーチ の音声・歌声合成エンジンと連携していることをお伝えしてきました。 会話:「VoiSona Talk 知声」「VoiSona Talk 双葉湊音」「VoiSona Talk 田中傘」 歌声:「VoiSona 知声」「VoiSona 双葉湊音」「VoiSona AiSuu」VoiSona の音声・歌声エンジンによる自然な歌声だけでも十分楽しめるのですが、実は、並行してVOICEVOX との連携も開発しております。( 商用利用可能な音声・歌声を利用させていただきます。)UtaMe は ACUAH に展開する新機能ですので、キャラクターもVRMフォーマットに対応し、自分の好きなモデルに自由に差し替え可能です。あなたのキャラクターが、あなたが選んだ声で、あなたのために歌う。ご期待ください。


こんにちは。シーズユナイト 大高です。支援いただいております皆様、いつもありがとうございます。UtaMe 開発プロジェクトに合わせて、ACUAHのメインキャラクターが新しくなります。(ACUAH / UtaMe はキャラクターを自由に変更可能ですが、このメインキャラクターを標準モデルとしてアプリに搭載します。)今回の活動報告では、新キャラクターデザインを担当いただきました ivukiさんへインタビューを行いましたので、ご紹介いたします。ivuki さんのご紹介広告デザイナーでご活躍されていたivukiさんは、あるきっかけからイラストレーターとしての活動を開始されました。現在は、キャラクターデザインから背景美術、Live2Dモデリングまで幅広く手がけています。中でも特徴的なのが、一次創作(オリジナル)によるキャラクターデザインと世界観構築への取り組みです。代表作のひとつ「境奏戯画(きょうそうぎが)」をはじめ、「nerinerium」「ミユtoウズ」といった独自のオリジナル作品群では、キャラクターデザインだけでなく、それぞれの世界観・設定までを一貫して手がけており、単なるイラスト制作にとどまらない「世界を描く」クリエイターとしてのご活躍されています。(以下、敬称略)キャラクターデザインについて普段キャラクターデザインされている際にこだわっていることはありますか?ivuki: 当たり前のデザインにはとどまらないよう衣装の構造などにもこだわりました。 キャラクターをデザインした上で、動きのある、止まって見えないようなポーズを模索し、ビジュアルイラストを作成いたしました。ACUAH / UtaMe  のキャラクターデザインを依頼された時の心境はどうでしたか?ivuki:  ACUAHのアプリについては、別プロジェクト(あいほろ(愛★Holo)製作委員会)で昨年夏から触らせてもらっていました。ACUAHは汎用キャラクターアシスタントとの事でしたので、まず最初にナビゲーター、コンシェルジュのような存在というイメージが湧きました。 そして今回、Utame(うたミー)では、ACUAHに歌を歌う機能が搭載されるとお話をいただいたので、コンシェルジュのイメージに「歌姫」要素を加えるため、ユニフォームぽさを出しつつ歌姫ような動きを出し、魅了するような衣装を考えました。歌以外の動きがある「汎用」というところで苦労したところ、意識したところは?ivuki: コンシェルジュを意識しつつも、あからさまなユニフォームだったりふわっとしたライブ衣装にはしたくありませんでした。なので近未来的な衣装に少し硬めなマント(ポンチョ)やスカートを組み合わせることにしました。 そしてあまり細かくなりすぎず、かつシンプルになりすぎないように注意しました。シルエットでも判別できるように髪型にも意識しました。色使いがとても素敵ですよね。色について何かこだわった点はありますか?ivuki: 基本的にキャラクターを作る際はあまり色数を増やさないように意識しています。 今回は特にキャラクターへの注目が大きいコンテンツになるので、見ていてうるさくならない馴染む色といえば良いでしょうか。寒色暖色を混ぜながら生活に溶け込める色合いを目指しました。 男性キャラは赤を基調に、女性キャラは青といった感じです。今回、3Dモデルのデザイン監修もお願いさせていただきました。ivuki: 今までゲーム等のキャラクターや衣装デザインで3Dモデルのデザインをしたことはありましたが、自分のイラストで3Dモデルの監修を細かくやったのは初めての経験でした。 なのでキャラクターデザインする際もなるべく3Dモデルとの差異がないように心がけていました。 しかし実際3Dモデルの初稿を製作してもらった際に些細なところで大きく印象が変わるということに気付かされました。 アプリケーション内で試運転した際も脳内イメージとの違いが思っていなかったところで見つかったりと、監修しながらも「なるほどなー」と気付かされる日々でした。とても楽しく取り組ませていただきました。UtaMeについてUtaMe について何か思うところがあればお願いいたします。ivuki: やっぱり、自分がデザインしたキャラクターがいろんなところで活躍してほしいですね。 Utameは、カラオケデータと連携してキャラクターが歌を歌ってくれるというのがとても面白く、魅力ですのでアプリだけでなくカラオケボックスの新たなコンテンツとしても活躍してくれたら嬉しいんですけど・・・ちらっ(笑)ivukiさんには、本プロジェクト関連の様々なデザインをお願いしています。女性キャラクターだけではなく、男性キャラクターやロボットまで、とても魅力的なものをデザインされていますので、是非、関連リンクも覗いて見てください。■BOOTH:https://ivuki.booth.pm■Skeb:https://skeb.jp/@ivuki_works


こんにちは。シーズユナイト 大高です。ご支援いただいております皆様、いつもありがとうございます。UtaMe体験版、配信中ですがお試しいただけましたでしょうか。■ Android はこちらから■ iPhone (iOS) はこちらから今、週替わりで3曲ずつ配信中ですが、8/8(土)~は UtaMeオリジナル楽曲(デモ版)を追加し 計4曲 でお届けいたします。歌で癒しを届ける をテーマに木村チヒロ♂ さんに作詞、作曲をお願いいたしました。是非、お楽しみください。♪※ UtaMeで楽しめるのは既存楽曲だけではありません! 様々な曲が歌えるように開発してまいります。■もっと。作曲者:木村チヒロ♂ 作詞者:木村チヒロ♂ねぇそこのキミ私の声が聞こえてる?ならちょっとだけでいいから寄っていってよ私は歌える傷を癒せるキミのために生まれたよもっとお話してもっと聞いてもっと知りたいから会いに来てもっと私を観てもっと近くでいつでもキミのそばにうたみぃ♪


新しいアイデアや挑戦を、アプリで見つけるcampfireにアプリが登場しました!
App Storeからダウンロード Google Playで手に入れよう
スマートフォンでQRコードを読み取って、アプリをダウンロード!

24時間以内に3人が支援しました