26
じゃあNovelAIで出力した1枚絵から簡単にVTuber的なことできるんじゃない？って思ってtalking-head-anime-3で試してみたら、それっぽいのができたので結構びっくりした。
イラストを作るのも、1枚絵から適切なリギングをするのもどっちも機械学習だし、すごい時代になったなと思った。
27
QuestProとLuppetを連携して「ARグラス時代のVTuberトラッキングソフト」の試作をしてみました！
今までのLuppet相当(顔と表情、手と指)の動きをデバイス1台かぶるだけで実現しています。
ARグラスをかけるだけですぐにVTuberになれる未来が作れそうです！
28
試作ではQuestProのビデオパススルー機能を使っていて、実際にユーザが見えている景色を撮影したものがこちら。
デバイスが1つにまとまったおかげでダイナミックな動きができるのが良い感じ！
現状でも配信操作や自分の動きのチェックは十分できたので、自分で作っててかなり将来性を感じました。
29
イーロン・マスクが休眠アカウントのTwitterIDを開放するらしいけど、2文字IDとか3文字IDとかすごい争奪戦になりそう。
30
ワールドカップ見てる間に、Instagramとかマストドンとかのリンクがプロフィールに書いてあったらアカウント凍結する可能性あるみたいなとんでもないポリシー改定がアナウンスされててヤバ
help.twitter.com/en/rules-and-p…
31
新しいことを学ぶ時に、とりあえずTwitterでその分野の専門家(+その人がフォローしてる人)やその分野で楽しそうに過ごしてる人をフォローしたりリストに入れたりして、毎日眺めるようにしてる。（毎日Google検索するよりも楽だし最新の情報が入ってくるし何よりみんな本気なので面白い）
32
OpenAI GPT-3+VoiceVoxで、3D AIエージェントを作ってLooking Glassで良い感じに表示させてみた！
ふとした時に何か会話するの楽しいし、自分の作業してるすぐ横で見守ってくれるし、AIにどんどんかわいさを感じていってあまりにも良い…👏😭
33
GPT-3とVoiceVoxを活用してAIエージェントを作る！【Unity】｜ねぎぽよし @CST_negi #note note.com/negipoyoc/n/n0…
AIエージェントを作った話を忘れないうちに書きました🙏
34
ChatGPT API
・応答速度が尋常じゃなく早い
(1秒前後で回答が返ってくる)
・会話を始める前に「語尾に"にゃ"をつけて」のような前提条件となるキャラクター設定ができた。
・これまでの会話の文脈をもとに答えてくれた。
(「その作り方を教えて」の部分)
顧客が求めていたもの…👏😭
35
ChatGPT APIをUnityから動かす。｜ねぎぽよし @CST_negi #note note.com/negipoyoc/n/n8…
早速Unityから使う方法を書いてみました。
実装が簡単な割に強力で素晴らしいなと思いますね。
36
これ机の脇に置いて運用してるけど、ChatGPT APIへの差し替えでパーソナライズができて回答に面白みが出てきたし、何か話しかけた時に単純に役に立ったり楽しいのでこの方向性は本当に何か革命的なものを生み出すだろうなって確信してる。
マジで作って良かったものの1つ。 twitter.com/cst_negi/statu…
37
AIエージェント(ChatGPT)に現実の情報を与えて、正しい回答をさせるようにしてみた！
正しい天気予報が聞けるようになったのと、その天気に合った服装まで聞けるようになったしめちゃくちゃ便利になった！👏😊
38
私事ですが、お付き合いしていた彼女と本日入籍いたしました💍
お互いにミクさんが好きということもあり、ミクの日に入籍できてよかったです！
結婚しても今までと変わらず好きなものを全力で作っていくつもりなので、これからもよろしくお願いします！
39
自分が何年もかけて準備してたことや頑張ったことがAIで簡単にできるようになってしまった時の虚しさを感じる人はたぶんここ半年くらいで相当増えると思う(自分もそう)けど、もう時代が変わったことを早めに受け入れて1から頑張ろうって切り替えるしか無いなと思った。
40
プロンプトは
"あなたはUnityの高度な専門家としてふるまってください。
以下のコードについてパフォーマンスに問題がある部分があればそれを最適化しつつ、修正理由を教えてください。
{{code}}"
でやっていました。 twitter.com/CST_negi/statu…
41
GPT-4を使って非エンジニアの人が面白いアプリや機能を作ってるのを観測してるんですが、作りたいものを想像してGPT-4が作れるレベルまでタスクを細かく分解してそれぞれを繋ぎこむ力があれば大体動くものは作れるし、作りたいものが大規模でもこれさえ徹底してれば別に難しくないのかも。
42
GPT-4なAIキャラクターとのコミュニケーション実装を色々工夫してみた！
・Streamを都度音声化することで人の発話終了～キャラクターの発話開始をラグを一定化+従来の1/2以下に減らした。
・Streamが追いつかず発話が遅延しそうな時には間投詞(えっと…)を自動付与して不自然な沈黙を減らした。
Luppet™(ラペット)を作っています。
キャラクター関連の技術開発(AR・VR・AI)が好きなエンジニアです。CEOもしています。初音ミクさんが好き。