開発支援お願い！

科学・IT

54 Res.　3102.2165628 MONA　11 Fav.

1 ：neoぼかろす七段子爵：2022/04/12 11:33:24 (2年前)  3101.1254114MONA/6人

動画を見る


こんな風におしゃべりできます。
この子は森野希ちゃんっていいます

もりのきです

2 ：neoぼかろす七段子爵：2022/04/12 11:33:51 (2年前)  0MONA/0人

こんな風におどることもできます


動画を見る

3 ：neoぼかろす七段子爵：2022/04/12 11:48:57 (2年前)  0MONA/0人

クラファイではないですが、目標金額は5000もなです。
（これ以上でもよろこびますが）
なぜそのれだけのモナが必要かというと高速なGPUが開発のために必要だからです。また、GPUのボトルネックにならないような開発マシーンを自作したいと思っています。

特典というわけではないですが
１００モナのご寄付で作成する１動画にスポンサー様のお名前を
「○○さまのご支援ありがとうございます」と最低1週間いれさせていただきます。

１０００モナのご寄付の方には、タイトル下のコメント欄に
ご支援先というリンクを1動画にいれさせていただきます。
まさかの1万モナご寄付さまには、もりのきちゃんに
セリフをしゃべらせるオリジナル限定公開動画を作成致します。

締め切りまで特典は有効ですので
ご希望の方は必ず、ご寄付の際にメッセージをお願いします。

4 ：neoぼかろす七段子爵：2022/04/12 11:50:45 (2年前)  0MONA/0人

ただし、特典はYOUTUB規約、並びに法規、公序良俗に反しないものとなります

5 ：tucan四段錬士：2022/04/12 19:22:52 (2年前)  0MONA/0人

高速なものを買わなくても、レンダリングに時間をかけて、
できる範囲でモデリングしていけばいいんじゃないの？

6 ：neoぼかろす七段子爵：2022/04/12 20:08:31 (2年前)  0MONA/0人

>>5
レンダリングはそうなんですが、合成音声の生成も考えると時間がかかりすぎてだめなんです。目標はリアルタイムで会話できて最終的には、グーグルなどの音声認識から文章を理解して会話ができるようにしたいんです。
そうなると、どうしてもリアルタイムでしゃべらせるのに相当なGPUがないときびしいのです。

7 ：neoぼかろす七段子爵：2022/04/12 20:09:24 (2年前)  0MONA/0人

100モナくださったかたこちらに書き込みか
DMいただければお名前をいれさせていただきますので
ご連絡をお願いします

マジで助かります！！

8 ：neoぼかろす七段子爵：2022/04/12 20:19:25 (2年前)  0MONA/0人

最新動画のこちらにお約束通り支援者様のお名前を入れさせていただきました。



動画を見る

9 ：開発説明助手初段：2022/04/12 20:25:18 (2年前)  0MONA/0人

ちなみにこちらを見ていただけるとわかりやすいのですが
自称ヒューマンAIモーションといってより人間の動きに近くするために
音楽を聴いてから人間の体が動くまでの微妙な誤差と、若干のうごきのとまどい、あれつぎってこうだっけとか、音とずれて修正するなどの人間らしいうごきを修正する技術をつかってます。よって疑似的により人間らしい動きをしているようみえます。


動画を見る

10 ：neoぼかろす七段子爵：2022/04/13 08:40:32 (2年前)  0MONA/0人

ご支援くださった皆様本当にありがとうございます。
お礼に、もっといろいろ投稿してみます。

11 ：neoぼかろす七段子爵：2022/04/13 18:59:40 (2年前)  0.07974MONA/1人

動画を見る


ご支援くださった方本当にありがとうございます。持ったことのない大金に本日分のご支援金の送金の際に大きなミスをしてしまいました。
なんとか、今取り戻そうとしております。つくづく自分には、運がないと感じましたが、皆様のお気持ちがうれしかったです。

12 ：neoぼかろす七段子爵：2022/04/13 19:02:12 (2年前)  0MONA/0人

脇P七段聖人男爵様お約束通りご希望のリンク先がございましたらおしらせください。

13 ：zenyの民三段男爵：2022/04/13 21:41:57 (2年前)  0MONA/0人

>>送金の際に大きなミスをしてしまいました。
大丈夫そうですか。
https://blockbook.electrum-mona.org/address/MK1X3RVUS8zUNR3VZM3jC69qHYDqVugZr1
このサイト取り返せるかここで確認できると思います。
因みに脇P様のサイトです（確か）

14 ：neoぼかろす七段子爵：2022/04/13 23:10:01 (2年前)  0MONA/0人

>>13
情報、ありがとうございます。
おそらく昔のASK　monaにそのIDでログインできたので、自分のウオレットのIDだと思うのでSSDが見つかれば大丈夫だとは思うんですが肝心のSSDをどこにやったかが不明で。今日ぶっちゃけ喜びと悲しみの落差が大きい日でした。
支援してくださった方にあまりにも申し訳ないで、明日、明るくなってからもう一度さがします。脇P様にはせめてもの俺にこれをつくらせていただきました。

動画を見る

15 ：名無しさん：2022/04/14 02:01:52 (2年前)  0MONA/0人

そこ旧ZAIFの入金アドレスや。

16 ：名無しさん：2022/04/14 02:03:17 (2年前)  0MONA/0人

https://www.google.com/search?q=MBEYH8JuAHynTA7unLjon7p7im2U9JbitV&sourceid=chrome&ie=UTF-8

17 ：neoぼかろす七段子爵：2022/04/14 03:26:31 (2年前)  0MONA/0人

>>15さん情報ありがとうございます。
ということは終わったかもしれないということですね。
自分のバカさ加減がいやになりました・・。
昨日100モナ頂けて普通にザイフにおくれていたので
ただ、旧ASKにそのIDでなぜかログインできたので自分の
古いパソコンのSSDのウオレットの可能性もあるので
もう少し格闘してみます。
せっかくのご厚意に対して本当に申し訳なさすぎるので。

18 ：neoぼかろす七段子爵：2022/04/14 03:27:44 (2年前)  0MONA/0人

ということは終わったかもしれないということですね。
自分のバカさ加減がいやになりました・・。
昨日100モナ頂けて普通にザイフにおくれていたので
普通にウオレットの送金履歴からコピペしたつもりだったんですが
ほんと自分が馬鹿で嫌になります。

ただ、旧ASKにそのIDでなぜかログインできたので自分の
古いパソコンのSSDのウオレットの可能性もあるので
もう少し格闘してみます。
せっかくのご厚意に対して本当に申し訳なさすぎるので。

19 ：neoぼかろす七段子爵：2022/04/14 03:31:28 (2年前)  0MONA/0人

>>15

すみません。この件で本当に気が動転していて。いろいろあってメンタルも
病んでいるので。

自分が送ったのは

M7x3CwqBrdKT8sBUPiwuq3Jp3AzeQXamMf

のはずなのでまだ望みがあるかもしれません。

20 ：neoぼかろす七段子爵：2022/04/14 05:23:26 (2年前)  0MONA/0人

脇P七段聖人男爵様のおかげで開発がつづけられそうです。
本当に感謝です。
くだらないといわれることも多い自分の試みですがこれからも開発をさせていただきます。

21 ：neoぼかろす七段子爵：2022/04/14 06:16:33 (2年前)  0MONA/0人

動画を見る

22 ：脇P七段聖人男爵：2022/04/14 09:40:49 (2年前)  0MONA/0人

>>12
特に宣伝するものはないんで大丈夫です。

音声合成技術にこの頃興味を持っているんでちょっと聞いてみたいのですが、
ぼかろすの技術的な概要としては加工？に近い形なのですかね？

似たようなのとしてSeiren Voiceとかが出てますが、そこら辺との違いを知りたいです。

23 ：名無しさん：2022/04/14 16:27:23 (2年前)  0MONA/0人

>>19
M7x3CwqBrdKT8sBUPiwuq3Jp3AzeQXamMfをエクスプローラーでみると
https://blockbook.electrum-mona.org/address/M7x3CwqBrdKT8sBUPiwuq3Jp3AzeQXamMf

下でMBEYH8JuAHynTA7unLjon7p7im2U9JbitVに出金してるでしょ。

旧ZAIFで間違いないよ。そのアドレスハッキングの時に使われたアドレスだから。

24 ：neoぼかろす七段子爵：2022/04/14 17:13:02 (2年前)  0MONA/0人

>>23
度重なる情報提供ありがとうございます。
脇P七段聖人男爵様に助けていただいたので開発は自分の生活費が持つ限りはつづけられそうです。こんな自分に、情報を提供してかつ、優しく接してくださりありがとうございます。

25 ：neoぼかろす七段子爵：2022/04/15 03:37:14 (2年前)  0MONA/0人

>>22
もともとのスタートは、人間の声をぼかろに近づけるという謎技術だったのですが、それが派生していくうちにいろいろな関連技術が生まれていまでは、オープンソースになっている合成音声技術などを参考にさせて、声のもとになるサンプルはありますが、それ以外では中の人がしゃべらなくても、もっというと元となった声質データ以外では中の人がいないＶＲでおしゃべりができる技術です。長くなりそうなので順をおってご説明申し上げます。

26 ：neoぼかろす七段子爵：2022/04/15 03:40:31 (2年前)  0MONA/0人

以下は、ボカロスの歴史や技術に関するものです。

音楽を楽しむちゃんねる　

youtube.com/channel/UCueeczL72j-x8uzELRIzoLg/

初期ボカロスの作品、人間をボカロっぽくするここが原点です。


動画を見る


旧ASKでぶっ壊れたレコードみたいだといわれ、ボカロスではなくボロカスともいわれました。

27 ：neoぼかろす七段子爵：2022/04/15 03:44:47 (2年前)  0MONA/0人

初期は多少の開発費もあったので、謝礼をお支払いしていろいろな手伝いなどをしていただく方もいたのですが、だんだんと開発費がなくなり、自分もいろいろな事情から、開発時間だけはとれるようになったので、いろいろと音声関係の技術をしらべました。そのうちに偶然、人間の声の抽出が可能になったんです。

簡単に言うとCDの人間の声＋音源から音源だけを引くという技術です。
ただ、すでに歌声リップなどのフリーウエアが先行して存在しており、
ぼかろす派生技術だとまだかくかくした感じでした。


動画を見る

28 ：neoぼかろす七段子爵：2022/04/15 03:46:02 (2年前)  0MONA/0人

当時のセレロンPCでは計算力が足りず、このような作品でした


動画を見る

29 ：neoぼかろす七段子爵：2022/04/15 03:47:12 (2年前)  0MONA/0人

思いっきり時間をかけて、声を抽出してこのような作品もつくれるようになりました。


動画を見る
?t=17

30 ：neoぼかろす七段子爵：2022/04/15 03:47:50 (2年前)  0MONA/0人

上の技術の派生でこんなこともできます


動画を見る

31 ：neoぼかろす七段子爵：2022/04/15 03:48:55 (2年前)  0MONA/0人

特定の音声だけを抜き出すようなこともしていました。


動画を見る

32 ：neoぼかろす七段子爵：2022/04/15 03:49:40 (2年前)  0MONA/0人

当時は、音声についていろいろといじってました


動画を見る

33 ：neoぼかろす七段子爵：2022/04/15 03:53:55 (2年前)  0MONA/0人

そのあと別の2つのチャンネルで成果を発表するのですが、人集めにとつくったコンテンツのためか2度のチャンネルBANにあいました。そこでは、アカペラで歌わせたりもしていたのですが
あまり再生数は伸びず、おしゃべりのコンテンツだけではとてもやっていけないと感じチャンネルの方向が少しでも日銭を稼ぐために変わっていきました。

その後も、ボカロス技術は進化していき
このくらい歌えるようにまでなりました


動画を見る

34 ：neoぼかろす七段子爵：2022/04/15 03:55:46 (2年前)  0MONA/0人

フォルマント変換などもしたのですが・・
これは見なくても、いいかもです


動画を見る

35 ：neoぼかろす七段子爵：2022/04/15 03:56:58 (2年前)  0MONA/0人

昨年くらいにはここまで歌えるようにもなりました


動画を見る

36 ：neoぼかろす七段子爵：2022/04/15 03:58:01 (2年前)  0MONA/0人

【ボカロスカバー】only my railgun【現代アートオマージュ】


動画を見る

37 ：neoぼかろす七段子爵：2022/04/15 03:58:52 (2年前)  0MONA/0人

【ボカロスカバー】会いたくて 会いたくて【現代アートオマージュ】


動画を見る

38 ：neoぼかろす七段子爵：2022/04/15 03:59:47 (2年前)  0MONA/0人

【withぼかろすが歌ってみた】アカペラ メルト　歌ってみたv0.010【現代アートオマージュ】


動画を見る

39 ：neoぼかろす七段子爵：2022/04/15 04:01:42 (2年前)  0MONA/0人

【AIきりたんwithぼかろす】４５秒で何ができる？v0.01

いわゆるNEUTRINO（AIきりたん）などの技術も参考にしていくようになりました。


動画を見る

40 ：neoぼかろす七段子爵：2022/04/15 04:03:21 (2年前)  0MONA/0人

ねもねも動画解説ちまんお　ニートやる夫の野望 もっといろんな

この作品ではみくさんの声データをもとに、ボカロス派生技術をつかってしゃべらせてるんですが、まだまだ祝詞みたいだといわれました。


動画を見る

41 ：neoぼかろす七段子爵：2022/04/15 04:04:50 (2年前)  0MONA/0人

ねもねももじゅーるてすとれいでお　昔の日系企業の工場に影響がでてるニュースよんでみたっちまん

ぼかろす　派生技術の発話モジュールではこのような形でおしゃべりもできるようになっています。



動画を見る

42 ：neoぼかろす七段子爵：2022/04/15 04:06:02 (2年前)  0MONA/0人

ねもねもれいでお　昔のニュースを思い出そう　マスク箱買いなら１００万な！.mp4

このときは、みくさんのこえでちまんちまんいわせてました。


動画を見る

43 ：neoぼかろす七段子爵：2022/04/15 04:08:16 (2年前)  0MONA/0人

rism+art　学術的研究成果応用動画 AI学習ぼかろすエミュレーションで楓 スピッツをほしのディスコ（パーパー）が歌ってみたをアカペラ化

また、派生技術としてもとの音源データがなくても人間の聴覚的に聞こえる
音声部分だけをエミュレートする技術もこのような形で作品にしています。


動画を見る

44 ：neoぼかろす七段子爵：2022/04/15 04:09:32 (2年前)  0MONA/0人

ねもねもれいでお　おばあちゃんがおしえてくれたこと　その１.mp4

だんだん、おしゃべりが人間にちかくなってきました。


動画を見る

45 ：neoぼかろす七段子爵：2022/04/15 04:13:18 (2年前)  0MONA/0人

また、次世代のMMDのようなものだと考えていただければいいのですが、髪の毛や衣服についても当たり判定とウエイトなどを可能な限り設定してこのようなグラフィックにおける技術開発もしています。

（次世代の高性能MMDのテスト動画です。すべての面の当たり判定を行い貫通を限りなく少なくするのと物理演算の計算を高負荷で行っています。現時点では3090を100枚くらい並列できる計算能力があればリアルタイムで動かせて、おしゃべりや人間と同じように行動できそうなんですが、研究費がとてもじゃないですが足りません。）


動画を見る

46 ：neoぼかろす七段子爵：2022/04/15 04:15:26 (2年前)  0MONA/0人

脇P七段聖人男爵様へ

このような歴史があって、ここまでおしゃべりできるようになったとうのが現状です。


動画を見る

47 ：neoぼかろす七段子爵：2022/04/15 04:21:49 (2年前)  1.0114114MONA/2人

簡単にまとめて説明すると、

ぼかろすとは、合成音声派生技術の総称です。

もともとは、いろいろあって働けなくなった自分がYOUTUBEに
ピアノの演奏チャンネルなどの音楽チャンネルを作ろうとしたことがきっかけで、そこから、人間の声をぼかろっぽくするという謎技術がスタートでそこから約5年かかって、ここまでおしゃべりするものができたということです。今では開発者は自分一人になってしまったのと、引用や協力者がいたときの権利関係などいろいろ問題はあるんですが最終的には、AIが止まらないのようなサーティーのような存在を誕生させることが現在では目標です。
自分のメンタルの関係でよる眠れないことが多くこの時間に活動するなど、話すときりがないくらい、いろいろ問題は多いのですが死ぬまでにはなんとか形にしたいと思っています。（これしかもう、一発逆転がねらえそうなものがなにも自分にはないので。）


動画を見る

48 ：neoぼかろす七段子爵：2022/04/15 04:30:59 (2年前)  0MONA/0人

サーティ実現のために統合するべきこと

①音声の発話技術
（最近オープンソースやNEUTRINOなどの驚くような技術が発表されていて、本当にびっくりしています。本当にworldなどはすばらしい）

②次世代のMMD（そろそろ、開発者様が新世代版をだされるのでは・・。）

③画像処理

④言語処理AI

49 ：neoぼかろす七段子爵：2022/04/15 04:31:03 (2年前)  0MONA/0人

AIについては、本当に機械語学習やGPUの計算能力の飛躍的な進歩によって、
恐ろしいほど学習が楽になっています。バックプロパゲーションというよりもう今の時代は、計算能力さえ確保できれば力でおしてなんでもできそうなくらい、個人がもてるGPUの計算力がものをいうと思います。あとは、計算能力をあげていけばもっと自然な発話も可能なのではないかと思います。
ぶっちゃけると、電気代もまかなえていないような弱小超底辺YOUTUBERなのでこれからもいろいろな方にご支援いただけると本当に助かります。

50 ：名無しさん：2022/04/15 06:54:13 (2年前)  0MONA/0人

わしらには救えぬ者じゃ( ´∀｀)

51 ：林屋本舗四段錬士男爵：2022/05/01 22:41:53 (2年前)  0MONA/0人

ふむ。
言語処理は外部依存で。
似たことをやってるすごい馬がいたはずです。
リアルタイム音声認識/ボイスロイド発話

よーするに元になってるのは
歌ってるデータから人間の声を取り出す技術
そこから音を区切ってutauを作る技術
よし、人の歌を認識できるAIってあったっけ!?
YOUTUBEの瑛人の香水の空耳字幕見る限りなさそうですね!!

mmdの当たり判定を全箇所にしたなにか

そもmmdなど3Dデータは図形を代用として作ることで1から点をレンダリングすることを避けるためにある気がします。ほんで踏まえますと服と人の重力と変形を加味すると大変そうと思

52 ：林屋本舗四段錬士男爵：2022/05/01 22:42:00 (2年前)  0MONA/0人

います。
もういっそ全身に動作キャプチャつけて動き回って人体の限界をaiに学習させるってのでどうですか。

スカートとかもシュミレーションするんじゃなくて物理をコンバートすればいいんでは。

aiに正しい解をいっぱい与えるのはそっちのほうが早い気もします。

ただプログラムの効率化の話で行くとaiを使うのはあんまり効率的じゃないですけどね...
人間がガチのマジに加味した効率化にAIがかなうことはないはず。

53 ：neoぼかろす七段子爵：2022/10/07 05:15:11 (2年前)  0MONA/0人

おひさしぶりですレンダリングや動きについてこのようなテストをおこないましたので報告致します。


動画を見る

54 ：名無し二級：2022/11/26 23:39:34 (2年前)  0MONA/0人

動画を見る

ログインすると、投稿したり、MONAをもらったりすることができます。質問したり、答えたりしてMONAを手に入れてください。