概要
このプロジェクトは等身大美少女ロボット制作計画で開発中の人型ロボット「足立レイ」の、音声合成ソフトを作る事が目的です。目標金額が達成された場合、一般向けに販売します。
パッケージ版イメージ
足立レイ ロボット初期設計図
どんなソフト?
AI技術を用いたテキスト読み上げソフトです。株式会社エーアイ様が提供するA.I.VOICE(エーアイボイス)の技術を使用しています。ただ、その元となる音声は、声優の声ではなく、独自技術で生成された合成音で、合成音のさらにレプリカ、「レプリボイス(Replivoice) 」と名付けました。
クラウドファンディングが成功した場合、その名称で独自ブランドとして販売します。(※他A.I.VOICEライブラリとは同じエディター上で使用可能になる予定です)
(技術協力:株式会社エーアイ )
A.I.VOICE
特徴
大きな特徴として、いわゆる中の人(声優さん)がいません。
どういう事かというと、普通は声優さんの声を録音して合成音声の素材にしたり、声を機械学習させたりして声のモデルを作るのですが、この音声は元々正弦波合成で、100%人工的に音波を生成した音声だからです。
簡単に図解すると、こういう作り方になります。
波の合成で別の波(音声)ができる
作った音声をUTAUで喋らせたのがこちらです。
「合成音」感の強い声ではありますが、ちゃんと女の子の声には聞こえるようになっていると思います。また、「合成音感」が程よく強い声、というのを目指して作ってもいます。
これまでの経緯
ロボット開発の一環として、ロボット用の合成音声の開発も行ってきました。声はキャラクター用エンターテイメント向けロボットにとっては重要な要素で、完成には必ず必要と考えています。
開発中のロボットの上半身
開発中の脚部
足動作試験
その際、「せっかくロボットキャラなんだから声も一から人工的に生成したら面白いんじゃないか」と思って開発を始めたのがきっかけです。
そこで先ずは歌声合成ソフトUTAU用に足立レイのUTAU音源を作りました。(DLリンク)
【足立レイ】中の人のいない合成音声作った【UTAU音源配布】
UTAU音源を用いて喋らせられるソフトを使って、ロボットの開発実況なども行っています。
しかし歌声合成用のソフトを使って喋らせているため、特にイントネーションが不自然という問題がありました。
(※より詳細な経緯については、トップ画像にもリンクされているこちらの動画を見て頂けると幸いです。内容的には以降の記事とほぼ同一です)
そこで2年ほど前、テキスト読み上げソフトAITalkを提供している株式会社エーアイさんに連絡を取り、「人間の声じゃない合成音声ソフトからの声でもAITalkのライブラリにする事が可能か」というかなり無茶な問い合わせをしました。
普通、読み上げソフトを作る場合、音素バランス文と呼ばれるいろいろな声をバランスよく含んだ文章を500文くらい声優さんに読み上げてもらい、それを合成用の素材として使えるように分割していきます。 (ここからここまでが「か」の子音、ここからここまでが母音、というように)
音声タグ付け例
しかし今回はそもそもその元となる声優さんがいないため、「収録」できません。
そこで、合成音で喋らせた音声を使って、人間用のシステムをそのまま利用して「合成音声の合成音声ライブラリ」をつくれないか、3回ほどの試作と試行錯誤の末、それなりにちゃんとしゃべってくれるものができました。いわば「ロボットの声を収録して作ったロボットが中の人の合成音声」です。
ロボット搭載用としては目途が立ったわけですが、せっかくここまでできたので、ロボット専用のシステムとしてだけでなく、一般向けの販売もしてみたいと考えました。
そこでそのための資金を得るために今回のクラウドファンディングを計画しました!もし面白い、欲しいと思って頂けたら、ぜひご支援よろしくお願い致します。
また、これまでこのようなイレギュラーかつ、新開発の音声合成システムの方向性・コンセプトと、ある意味真逆の試みに快くご協力頂いております株式会社エーアイ様に深く感謝申し上げます。
リターン
リターンは足立レイの合成音声ソフト(A.I.VOICE)パッケージ版と、固有製造ナンバー入りの3Dモデル、その3Dモデルデータの入ったナンバー入りカード型USBメモリです。モデルはフルスクラッチで自作しました!
3Dモデルは通常版(00番)はすでに配布しています。ニコニ立体
支援者の方には胸のナンバーを固有のものに変更したモデルを配布します。今後ナンバー入りを作るかは分かりませんが、初期ロットとして今回のクラウドファンディング支援者の方のナンバーが何番までか発表します。形式はVRMとMMD用テクスチャです。
また、完成後の公式告知動画に支援者名をクレジットさせて頂きます。任意のハンドルネーム(もちろん本名も可)を備考欄に記入をお願い致します。
足立レイ 3Dモデル(0番)
固有製造ナンバー例
カード型USBメモリイメージ
また、10万円のプランとして製作中のロボットの開発過程で生じた、各身体パーツの実寸大の試作品を含めたリターンを用意してみました。各部1つ限定です。機械部品は高価で無理なので、3Dプリントの樹脂構造体パーツになります。
プリント中の試作顔パーツ
試作足パーツ
また、ロボットの3Dプリント骨材として採用しているカーボン(短繊維)入りのエンジニアリングプラスチックでできたキーホルダーもこちらのプランに入れます。(写真は実際のパーツです)
素材の値段も高くプリント難度も高いため大量には作れないのですが、記念品として作ってみようと思います。
------------------------------------------------------------------
2021.3.22追記
新たにデータのみのリターン(支援者名クレジット、色違い3Dモデル、パッケージ絵先行公開、レプリボイス足立レイによるお礼ボイス(発売に先行))と、足立レイ(ロボット)一日操縦体験のリターンを追加しました!
パッケージ絵(リターンで先行公開)はみさいる(@missile_39)が自分で描く予定です。参考に先日描いた絵を載せます。気合いを入れて描きます!
指の点検中
データのみリターンの方の3Dモデルは色違い(紺色)ですが胸のナンバーは2021番で共通です。
操縦体験の方のプランのモデルのレスキューカラーの胸ナンバーは個別に振り分けます。
追記終わり
------------------------------------------------------------
ストレッチゴール
AITalk5の機能として、感情表現対応させることが可能です。これは話者適応という技術で、個別に新たな収録をすることなく、喜び・悲しみ・怒りの感情対応をさせる事が可能です。そこで450万円、550万円、650万円達成毎に感情パターンを追加します。
音声の感情機能はロボットのコミュニケーション用の用途としても期待でき、実現した場合は感情表現に対応したロボットの表情変化などの機能の実装を実現したいと考えています。
ロボット開発には多くの費用がかかりるため、多く達成された場合にはロボット開発に存分に使わせて頂こうと思っています。
余裕があればもっと挑戦的な開発ができるので、大きく達成できると嬉しいです!
達成後のスケジュール予定
クラウドファンディング終了:3月末
法人登記:4月中旬
感情決定・音声辞書制作開始:4月末
マスタ完成:7月初旬
パッケージ制作・メディア増産:7月中旬
パッケージ納品:8月中旬
発送開始:9月
一般への販売開始は10月以降になる予定です。
これまでの活動
2008年頃から、等身大のエンターテイメント向けキャラクターのロボットの開発を行ってきました。(当時の記事)2017年からは現在開発中の足立レイの開発を開始しました。同時に、2018年にそのロボット用合成音声としてUTAUライブラリの開発を行い、リリースしました。今回のクラウドファンディングはその合成音声の「読み上げソフト化」の計画になります。
現在、日本大学理工学研究科精密機械工学専攻博士後期課程2年次に所属し、等身大2足歩行ロボットの研究や合成音声の研究をしています。
本クラウドファンディングに関連した研究としては以下のような論文も書いております。
Q&A
・最低目標金額が低くないか
これはいくつかの要因がありますが、一つは人工の音声であるため収録費用等が掛からない事、また、元々ピッチの安定した合成音声データであるため技術的に収録データが少なくて済む事、イラストや3Dモデルも自ら制作している事、等があります。
感情機能についてはAITalk5の新機能により追加され、新たにライブラリを増やす必要はないため、比較的低コストでの追加が可能となっています。
・UTAU音源からの声質の変化
ほとんど無いと考えられます。試作として50文章から作成したライブラリでの音声を聞いてみたところ、製作者自身でもほぼ同じだと感じられる程に同じ声質でした。これは元々合成音声である事と、合成音(UTAU単独音、一対の音素のピッチ変化)であるために辞書化するためのデータとしてもかなり均質なデータになるためだと考えています。
・どのように販売されるのか
クラウドファンディングが成功した場合、販売の為に法人を設立する予定です。また、今のところ通信販売のみを考えています。
理由としてはまず、エーアイ様とのライセンス契約の為に法人格が必要なためです。また、大規模な販売網なども持っておらず、当面はできるだけコンパクトに手の届く範囲で展開したいと考えています。
・A.I.VOICEとの関連性
【レプリボイス「足立レイ」powered by A.I.VOICE 】の様な形の表記になる予定です。
元音声の人工的な合成以降の部分は同じものを用いているのですが、根本の合成技術やコンセプトが全く異なり、つまるところ最新のエーアイ様の合成エンジンを使いながらも、性質上、生声らしさとは逆の方向を目指した声であるため、A.I.VOICEの合成音イメージに影響を与える事を避けたいという面もあり、明確に判別可能な別ブランド名にしようと考えています。
最新の活動報告
もっと見るレプリボイス足立レイ、発売告知&解説・支援者クレジット動画公開されます!
2021/10/31 15:45こんにちは!リターンの方、無事届いたようで安心しています。そして最後に残ったリターン、支援者名クレジットのされた動画の方を先ほどニコニコでライブ公開で投稿しました!初めて使う機能なのですが、最初は生放送として公開されるようなので、リアルタイムでコメントなどしていただければより楽しめるかと思います。【ライブ公開 (2021/10/31 18:50開始)】【レプリボイス】中の人のいない読み上げソフト完成&発売しました!【足立レイ】 https://live.nicovideo.jp/watch/lv334314364※こちら、支援者名が途中で途切れてしまっています。追加で動画を上げています。youtubeの方は修正版となっています。生放送の後、公開後はこちらのurlで動画として残ります。生放送中のコメントも反映されるようなのでご安心ください。https://www.nicovideo.jp/watch/sm39558701youtubeにも投稿しました!ぜひ楽しんでいただけたらと思います。皆様のご支援のおかげで無事完成・発売する事が出来ました。これからも足立レイ、メカニカルガールの応援をして頂けると嬉しいです! もっと見る
リターン発送しました!
2021/10/13 22:24こんばんは!先日メッセージの方でもお伝えしましたが、昨日からパッケージ版等の物品リターンの方の発送を開始し、本日2回目の発送を行い、すべての物品リターンの発送が完了しました!長らくお待たせしました。すでに早速届いた方がいらっしゃるようです。早ければ本日、2回目の発送の方も海外や一部離島などを除き明日か明後日には届くかと思います!リターンで埋め尽くされる部屋郵便局にて初日にパッケージ版リターンの先着順に80名、本日パッケージ版、3Dモデルカード、アクリルキーホルダー等のリターン81名分をお送りしました。内容物は以下画像が主です。アクリルキーホルダーは銀色のアルミ蒸着袋に入っています。また、USBメモリは専用ケースに入っています。このメモリのほう、カード自体は頑丈ですが、メモリ部分の根本の方はあまり頑丈ではないので少しご注意ください。容量は16GBあり、お財布のカード入れ部分にも入るので普段使いに使用する事もできると思います!QRコードは通常3Dモデルのダウンロードリンクになっています。こちらはアクティベーションキーのカードです。開封時は銀色のアルミ蒸着袋に封入されています。裏にキーコードが入っています!なお、ナンバリングはまさしく製造順に振られており、モデルとアクリルキーホルダーのみの支援者さんもいるため、どうしようか悩んだのですがモデルナンバーとアクティベーションナンバーは一部しか一致していません。(今後もパッケージ版やモデルを作るにあたりナンバーを一致させ続ける事が難しいため、純粋に製造ナンバーで統一しました)今回のクラウドファンディングでの最終モデルナンバーはNo.132になります。ぜひ支援者の初期ロットとして自慢しちゃってください!ちなみに実はサンプルの000の他、もしもの時の予備で作ったNo.133がいます。133をどうするのかちょっと悩み中です。とりあえず保管・・。また3Dプリントギアですが、こんな感じで製造しました。この後ネジ穴の加工等処理を行い、袋詰めしています。キーホルダー用の金具も同梱しておいたので、ネジ穴に通してキーホルダーを作る事も可能です!ただ、最低限のバリ(角等のとがったところ)取りはしておきましたが、元々ギアのためとがっていて硬いので、肌に直に触れる場所等にはつけない方が安全かと思います。また、ジャンクパーツには、経緯や箇所が分かると少し楽しめるかと思い、 大き目の付箋で説明書もつけておきました。ぜひアクリルキーホルダー等と一緒に飾る等して頂けたらと思います。今回のクラウドファンディング、3月9日に始まり、3月末、短い期間ながら何とか成功させて頂き、最終的には感情スタイル「喜」まで達成する事が出来ました。そして無事開発を終え、今回リターンとして発送する事が出来、とても嬉しく、また安心しています。動画への支援者クレジットについては、現在動画作成中ですので、改めて告知させて頂きます!4年ほど前、正弦波からキャラクターボイスが作れるんじゃないかと思い立ってからここまで来たことを思うと感慨深いです。またパッケージ絵やグッズデザインも全般的に自分で行ったのでより、かもしれません。ここまで一人でやる事はこれが最後になるかもしれませんが、そのせいで愛着がついてしまったのか本当に1つ一つパッケージングして送り出す時、少し名残惜しい感じすらありました。ぜひモデルデータ、ソフト、楽しんでいただけたらと思います!また、一人ではきつかった梱包には弟も手伝ってくれました。ありがとうございました。今後もメカニカルガールとしてロボット開発・音声合成等活動を続けていきますが、今後レプリボイス関連のお知らせは主に公式Twitter@MechanicalGirl0 や公式サイトのブログで行っていこうと思いますので、ぜひよろしくお願い致します。また、今回のリターンにもし不備・届かない等ありましたら、メッセージでおしらせいただけますと幸いです。最後に宣伝!で販売サイトですが、公式ショップはこちらになりますメカニカルガール公式SHOPまた、もしノートパソコン等で光学ドライブが無い、PC引っ越しをしたい、等の時、体験版を上記サイトからダウンロードしてからアクティベーションキーを使う事で製品版と同等になりますので、そういった用途でも活用して頂けたらと思います。今後もグッズなども増やしていこうと思っておりますので、よかったらお願い致します。それでは、まだ未到着の方は、ぜひお楽しみにして下さい。Twitter等での到着報告、とても嬉しいです。では、また! もっと見る
リターン発送準備中です&A.I.VOICE生放送に出ます
2021/10/05 20:15こんばんは!既にTwitterでも紹介していますが昨日パッケージ版が先行分200(リターン+70程)分届きました!ヾ(*´∀`*)ノすごくいい感じにできて自分自身めちゃくちゃ嬉しいです!またアクリルキーホルダーやナンバー入り3Dモデル入りのカード型USBモデル(画像はテクスチャ)また足立レイの脚用のカーボンPAギア等リターン品がついにそろったため、現在梱包・発送準備に取り掛かっています。ただ3Dモデルナンバーやパッケージ(アクティベーションキーカード)ナンバーの組み合わせなど合わせる必要があるため、結構梱包自体を慎重にする必要があり、少し時間がかかっています。実際に発送しましたら改めてお知らせします。(今週中の発送完了を目指しています。)また、明後日7日のA.I.VOICE生放送の方にゲストとして出演予定です!放送では到着したばかりの上記パッケージ版やリターン品等持参して実物をご紹介する予定です。また、新しいデモ動画(使用サンプル)や、レプリボイス足立レイ開発にあたってのエピソード等もお話できる予定ですので、よろしければぜひご視聴ください。A.I.VOCE Juniorの方々も勢ぞろいで画面が賑やかです。それでは、今後ともよろしくお願い致します。 もっと見る
コメント
もっと見る