pix2pix使ってモノクロ漫画をリアルタイムで着色する仕組みを作ってみた。ubuntu上でpix2pixをサーバー化して、unityと通信させてるので、VR化もできます。
文才がありあまりすぎてやばい "スタバでダベる女子大生に対し畏敬の念を禁じ得ない - もはや日記とかそういう次元ではない" manato-kumagai.hatenablog.jp/entry/2016/01/…
どんなに安いセンサー探してもさすがに$1は無理やろって思ったけど、ミラーでディスプレイ付近の映像をフロントカメラに反射させて解析するとか天才過ぎる。 "Turning a MacBook into a Touchscreen with $1 of Hardware · cat /var/log/life" anishathalye.com/2018/04/03/mac…
PRNetを使って、単眼カメラの映像からリアルタイムで顔面3Dモデルを構築するやつ作ってみた。実際の視点とは違う視点にぐりぐり動かせて楽しい。GTX1070 8GBで現状5fpsくらい。多分もっと速くなる。
Perfume「ディープラーニングをという最新技術を使った映像演出で紅白を盛り上げます!」 ????「それって線形回帰じゃだめなんですか?SVMは試した?」
iPhoneXで21fpsで動く身体部位セグメンテーションがTensorFlow公式に追加されたらしい。すげえ。 twitter.com/oveddan/status…
撮った風景を無重力空間にしてみた。 Turn the cityscape into zero-gravity space. #AR #ArgumentedReality #MaskRCNN
HoloLens2体験した方の詳細なレビュー記事。個人的にはこの辺が大きそう→ 水平視野角は52度、垂直視野角も同様に広がっている。映像は3つのレーザー光によって120fpsで描画され、照射されていない部分は完全な透明になるとの。 cnet.co/2tAOmRm
リアルタイムでアニメ顔変換してみた。 Realtime anime face conversion implemented with #ugatit pre-trained model. github.com/taki0112/UGATIT
ARとLiDAR付きiPadの力で現実世界を小人リアルアバターで冒険できるやつ作ってる。 Recorded on the latest iPad with LiDAR. The avatar is scanned by @HappyOcean
現実をピクセル化&波動化してみた。 Pixel wave of the reality.
フォートナイトばりの建築能力を獲得した小人アバター
Capture the temporal 3D space, and replay the inversion of it. 時空間を3次元的に記録して、逆行再生するやつをARで作ってみた。 Inspired by #TENET
Spatial multi track recording with LiDER / LiDER使って一人多重演奏会撮ってみました。自分以外に需要あるかわからないんですが、開発中の #時空間レコーダー はこんな感じで空間版のMTRみたいに使えたら面白いなと思ってます。 #ARKit #madewithunity
3Dで時空間データをキャプチャして逆再生させたり、一人で3Dバンド演奏などが撮れるRememoryというアプリのベータ版をTestFlightで公開しました!3D映像を作れるのはLiDAR付きのiOS端末限定です。使い方などは追って整備します! rememory.jp/jp/ #Rememory
The beta version of spatio-temporal recorder app "Rememory" is now available on TestFlight. It allows you to record 3D data on iOS devices with LiDAR and edit/share it so it can be played back in AR. I'll post more details soon! rememory.jp
立体として映像を記録するボリュメトリックビデオというコンテンツをiPhoneで気軽に撮影・編集・共有できるRememoryというアプリをApp Storeで正式公開しました!こんな映像を手軽に作れて、ARで見てもらうことができます。ぜひ使ってみてください! https://t.co/Hw0a6tNfEm
動画をAnimeGANv2で変換してみた / Converted a talking video by AnimeGANv2
iPhoneだけでNeRFの学習とレンダリングができるLuma AIに3DモデルExport機能が来てたので試してみた。従来の3Dスキャンアプリだとどうしても綻びが生じていたギターもかなりきれいに3Dモデル化できてすごい…!
AR visualization of guitar sounds / ギターの音をリアルタイムARで可視化してみる #AR
ARピアノできてきた! AR Piano WIP