  |
はてなキーワード: トラッキングとは
VTuber史を語る上で（数字面を除いた）技術や手法の新しさでホロライブを語ろうとしたら何が一番に来るんだろう
自分はすぐにあげることができない――作成中のホロオルタやメタバースは完成すれば特筆できるものになると思う
複数人を3Dフルトラッキングできる技術が凄いと言われたこともあったけれど機材の力によるところが大きくて
「量を質に転換した」とまで言うのは言い過ぎと思う。同時期で他にも動かせる事務所があったらしいし（えのぐのところだったと思うが）
個人によるところは大きいけれど「朝ココ」が一番デカいかもしれないな
負の側面に触れていいなら他の事務所ができない中（無許諾で）多種多様なゲームの配信を行ったこともデカかったか
自分が思うホロライブの強みはデザインやモデル作成を一流の人に依頼して、配信者として実績のある人を連れてくる
数字を得るために投資を集中する場所の勘どころに優れていることだ
宇宙開発でいうソ連の束ね方式で「完成度の高いものを組み合わせて目的を達成する技術」こそがホロライブの新規性だったのかもしれない
現状はそこからの脱皮を目指しているように思われる
そういう次元にないわ
Wikipedia読め以前にそもそもこういう話についていけそう？
倫理ゆるゆる規制ゆるゆるの日本製の二次エロは、世界中の日本ヲタクに需要がある。
なので、強者がいないジャンルのエロ（たとえば女攻め・男受け) を狙えば、英文・中文 sub つけりゃ、ワンチャンあるんじゃない？
アラ還以降、なんならアラフィフ以降は、エロマンガやショート動画をお小遣い稼ぎの柱にするのも有なんじゃないか？
まぁ "エロに対する情熱は皆無" ＋"現状の画力はへっぽこ" なのだけど 🙄
・・・とか思っていたけれど、 AI が 低・中品質の アニメ・マンガ・イラストを喰っちゃう速度は、
ワイたちが思っているよりもずっとずっと速そう。少なくともワイがアラフィフになる前には確実に到来するな 😨
既に blender が原画と原画を繋ぐ作画、"中割り" を自動作成してくれるのはご存知の通りなのだけど、
▼ Blender2.92から自動中割実験。blenderデータ付き｜PIXIV FANBOX｜りょーちも。
ディープラーニング(深層学習) を使ったプロダクトたちがもうそれはそれはスゴイ。
例えば、Googleでソフトウェアエンジニアとして働くプラムック・カンガーン氏が作った、
『一枚の画像でVTuberになれるシステム(v2)』。
たった1枚の2次絵画像で、不自然では無い 笑い顔・困り顔・怒り顔 の表情差分を自動作成ができる。
この時点でスゴ過ぎて考えるのを放棄するのだが、VTuber なので当然アニメーションである。
目パチするし、頭振りもするし、眉・黒目・虹彩・口の形や動きも調整可能だし、
製作者のプラムック・カンガーン氏の動画見た方がたぶん早いので見てみて。
ホビーユースならもう Live2D 要らなくね？ってなる
そして同じくディープラーニングを使った「Deep Nostalgia（ディープ・ノスタルジア）」という海外で人気っぽいアプリ。
オリジナル家系図を作成するサイト(MyHeritage) で公開されているアプリで、 1枚の画像から、自然な瞬き・微笑み・目パチ・微笑み・頭振りを自動生成する。
本来は故人の写真で生きているかのような動画を作成するのが目的のアプリなのだけど、
2次絵キャラや3DCGキャラであっても、写真(人間)と同じレベルで自然な瞬き・微笑み・目パチ・微笑み・頭振りのアニメーションを自動生成してくれる。
この2次絵キャラや3DCGキャラのアニメーションの自動生成のレベルがヤバい。Live2D超えてる。もうホビーユースなら自分でアニメ作る必要なくない？ってレベルだ。
身体を動かすのは桁違いの学習が必要になるので現状は顔(付随して髪)だけなのだけど、コレが無料でだれでも利用可能だぞ？どうすんの？
とりあえず、ウンウン唸ってイチから自分でアニメや表情パターンを作るより Deep Nostalgia で作成した動画をトレスした方が早そう。
なお、Deep Nostalgia は、イスラエルの顔認識技術企業、D-IDの「Live Portrait」を利用しているとのこと。
#DeepNostalgia (Twitter 検索で自動作成されたアニメーションを見てみよう)
https://twitter.com/search?q=%23DeepNostalgia&f=live
▼古い写真の顔をディープラーニングでリアルに動かせる「Deep Nostalgia」 無料で利用可能｜ITmedia NEWS
https://www.itmedia.co.jp/news/articles/2102/28/news018.html
さて、ここまでもスゴ過ぎて思考を放棄するのだけど、とりあえず元となる1枚の絵は必要だった。
アニメーションや差分表情は AI にお任せしても "元の絵" 、"キャラクター" は必要で、製作者に 最低限の絵心、2DCG・3DCGの修練が必要だった。
ここまで言えばもうわかると思うのだけど、絵心がなくてもキャラクターを自動生成(塗り付き)するシステムがもう出来ている。
なお顔だけじゃなくて身体も自動生成してくれる。もちろん関連システムでアニメーションも自動生成してくれる。
▼キャラクター生成プラットフォーム「Crypko™」の編集機能 / Editing characters generated by Crypko™
▼[公式サイト] Crypko | Preferred Networks
▼ 自動生成システムが生成したキャラクターを元にデザインされた3DCGキャラが主人公のMV
MVの中の3DCGも自動生成された3DCGを利用したもの(流石に調整はしてるらしい)
いま既に出来ること・これから出来るようになることにワクワクしてヒャッハーってなるけど、ワクワクはワクワクとして、ヒャッハーはヒャッハーとして、
学術研究レベルでAI周りについていけないとあらゆるお金稼ぎが危ういな・・・😨って感じだよね
もちろん短期的に見ればイニシャルゼロで出来るので人間のマンパワーでやった方があらゆものは安い。悲しいけどこれは事実だ。
けど、修練レベル低めの人間が手間暇かけて作ったものよりも、高コストでもAIがやった方がクオリティも速度も上であるという現実。切ないね。
もっと言えばAIを導入・運用出来る資本力があるならば将来的にはAIの方が安いまである。
ちなみ絵(アニメーション)だけじゃなくて、文章もけっこうAIに喰われてます。日本語は遅れてるけど英語圏では
「AI Dungeon」というAIに対して対話形式で物語を作って遊ぶテキストベースのRPG(基本無料)が出てる。
［2021-02-23］AI Dungeonの素晴らしさを語る
＜はじめに＞
読みにくいと題に書きました。この文章を読んだあなたが不快になったとしてもそれは注意書きを読んだ上であなたがあなたの判断によってあなたが読んだ文章によってあなたが不快になったにすぎず、それは完全にあなたの自己責任です。祈りが足りません。毎日もっともっと祈ってください。
＜はじめにおわり＞
ブログを開設して投稿しても良かったのですが、増田で投稿したほうが興味のある人に少しでも多く届くかなと思い増田で投稿することにしました。
先日、TwitterがOnion版サイトに対応したと風のうわさに囁かれました。
https[:]//twitter3e4tixl4xyajtrzo62zg5vztmjuricljdp2c5kshju4avyoid.onion
これがそのURLです。（Chrome、Safari、Edge、インストールした後そのままつかているFirefox、では閲覧することができません。諦めてください）
おそらくTwitter社が想定しているケースは
①何らかの理由によって、Twitterへのアクセスがエラーを吐くようになった。（生IPでのアク禁）
②ユーザーは長年使用してきたTwitterアカウントにログインして情報を得たい、情報を投稿したい。
みたいな意図なのではないかと勝手に想定しています。が、これはあくまで一民間人の主観なので流してください。
①への対策としてVPNが挙げられますが、プライバシー保護を謳う幾多のVPNがこれまで国家権力に屈してログ情報を開示してきた例を見ると（すべてがすべてノーログを謳っていたわけではない）、そこらのVPN会社を利用するよりもTorで多重化した方が少しは安心ではないかという気持ちからTwitter社がOnion版サイトを公開してくれたとしたら、嬉しいことです。
＜本題＞
・個人的に今利用しているアカウントにTorでログインするのは嫌なので、新規登録ができるかどうかを確認する（気になる人は既存アカウントで実験してみてください）
・Tor等を利用したTwitterアカウント作成時との比較を観察する
Torから設定→プライバシーとセキュリティ→セキュリティ（セキュリティレベル）を選び、Torでボタン一つで選択することのできるJavaScript等のトラッキング制限をどの程度選択すればアカウント作成できるかを確認します。
より安全（真ん中のレベル）：アカウント作成できない（自分が確認した環境ではできないだけかもしれません、詳しくは後で記します）
最も安全（３段階で一番上のレベル）：相変わらずいつも通りアカウント作成できない
アカウントを作成した感想としては、正直Onion版サイトを公開したと聞いたときには、他所のOnion版サイトのように「最も安全」でアクセス先のURLに依存したJavaScriptをいくつか許可すればアカウント作成できるのかな、と期待を胸にしていたのですが、現実としては「いつもどおりのhttps[:]//twitter.comへTorを用いてアカウントを作成するとき」と何一つとして変わる点がありませんでした。これには少しがっかりです。
Torを用いてTwitterアカウントを作成するとだいたい1ツイートまではTwitter社の宇宙よりも大きな器によって許されます。
しかし、2ツイート目をしようものなら、時間をかけてアイコンやBIO、ヘッダーを設定しようものなら「reCAPTCHAのパチモンクリア（4問正解で通してくれる神キャプチャ、お前が世界を取れ）」がやってきます。
運が良ければそのまま関門通過。運が悪ければ電話番号登録を強いられます。
今回はセキュリティの「標準」でアカウントを作成したので、ログイン後1ツイートをした後に「より安全」に上げても使えるかな？と上げてプロフィール設定をしているところで電話番号登録を要求されました。
ここ最近のhttps[:]//twitter.comは、ブラウザのセキュリティレベルを「最も安全」「より安全」にしていると「んなんか今日調子悪いわ笑」とログインページやアカウント作成ページを表示しれくれません（国際情勢が関係しているのかな？）。ですが、以前は上で書いた「他所のOnion版サイトのように『最も安全』でアクセス先のURLに依存したJavaScriptをいくつか許可すればアカウント作成できるのかな」の手順でアカウント作成をできた過去があります（セキュリティレベルを上げ忘れたままTorを利用していた可能性があります、「ですが」以降は思い出として読んでください）。
その時ですら電話番号登録まで要求してこなかったというのに、セキュリティレベルを最低まで落として、やっとアカウント作成できたと思ったら、「お前はホモサピエンスか？」とパチモンに聞かれ、全問正解したというのに電話番号まで登録を強いられる。ダルいのでこの文章は放置されている電話番号登録画面を横目に書かれています。
実験結果
ブラウザのセキュリティレベルを最低まで落とすことでアカウントの作成に成功したが、セキュリティレベルを上げて遊んでいたら（これが原因では？？？）電話番号登録を強いられた。
この実験結果からわかるように、新規アカウントへの優遇としてOnion版サイトを公開したとはとても思えず、既存ユーザーに向けたサービス展開と見るべきだと思う。
まず今回やったことはOnion版サイトで行わなくても、https[:]//twitter.comで再現可能だったことであり、2者の差はOnionに対応しているか否かでしかありません（緩くあってほしかった）。
生IPでアクセスできないからTor使うのにそこで電話番号登録を要求したら、電話番号を契約している本人が分かりますよね。
Onion版サイトの展開がどこの誰のためにやっているのか知ったことではないですが（良い子のみんなはソースを探してから口を開こう）、向いている方向とやっていることが少しズレている気がします。
「理不尽な事象により生IPでアク禁された人々がいる、それに対抗するためにOnion版サイトを公開する、がOnion版からであってもアカウント作成はいつもどおりです。」だと仮定すると、現状は今のTwitterが落とし込めるギリギリなのかもしれません。
TwitterくんがFacebookくんに憧れる気持ちはよく分かりますが、Tor関連を冷遇するのところまでしっかり見習わなくても良かったと思います。
腹癒せ
「Onion版サイト公開されたんですか？やったー！」「サイト公開されただけじゃないですかやだー！（少しは優遇されただろうと勝手に思っていた筆者が完全に悪い）」をしたので、初めの方に少し書いたVPNについて少し。ノーログを謳うおすすめの紹介です。VPNを使ってたとしても、画面の向こうにいる人間に配慮しながらインターネットを利用しましょう。もうページを閉じてインターネットに帰っていいですよ。帰りの会は終わりました、事務連絡は済ませたのでここからは雑談です。
Mullvad（有料）
一言：広告を一切していないので、検索して出てくるMullvadの感想はPRを含みません。すげぇ
IVPN（有料）
一言：他所のノーログを謳うVPNサービスは月当たりの通信量の制限があったりしますが、ProtonVPNにはそれがない。そこがすごい。本当にすごい。無料で始めたかったらProtonを使ってください。
OVPN（有料）
一言：2月から#StandWithUkraine https://www.ovpn.com/en/blog/standwithukraine というページを公開し、ウクライナの人への応援をしている。すごい。「ウクライナ人はサポートに連絡したら無料のVPNが用意してあるぞ」と言ってる。かっこいい、抱いてほしい。それはそれとしてOpenvpnの拡張子が.ovpnだから検索結果がOVPNとめっちゃ交じる。マジ卍
個人的には薦めないけれど、生IPよりかは良いんじゃないんですか、有名で使っている人も結構いますよね、好きだったら使えばいいと思います4選（それぞれノーログを謳っています）
NordVPN（有料）
一言：有名、紹介料いくらか知らんけどプライバシー特化おすすめVPN○選！みたいな記事ではいつもいるやつ。ちなみにそいういう記事に限って上の4選の奴らはいません。
一言：買収されて運営会社が変わった。NordVPNを紹介している記事は大体ExpressVPNも紹介している感じのアレ。
PIA（有料）
https[:]//www.privateinternetaccess.com
一言：ﾟ(ﾟ´ω`ﾟ)ﾟ｡ﾋﾟｰア 日本人ではNordとExpressよりは使っている人は少ないんじゃないかな。
AirVPN（有料）
最後に
https://gigazine.net/news/20211015-former-malware-kape-technologies-owns-vpn-services/
LINE、食わず嫌いはよくないだろうからと一応昔やってたけど、自分には合わないのでさっさと辞めました。
動きがもっさりしてて重いし、いらない機能ばかりだし。あのキャラクターも好きじゃない。AppStoreのプライバシー情報見てもトラッキングやユーザーに関連付けられたデータ多くてぞわぞわ。
既読未読でどうこうなるのも、短文連打されるのも嫌。あれって「おしゃべり」だと思ってる人と「連絡」だと思ってる人の間に乖離があるよね。「おしゃべり」だと思ってる人は、既読＝相槌だと思ってるから、返事がないとイラつくわけよ。
もともと周りがほぼiPhoneだったのでiMessageで事足りており、それほどヘビーユーザーではなかったけど、使うたびに迷惑メールが来るのも嫌だった。セキュリティどうなってんの？
だから去年の3月に不適切な情報管理問題が報道されたときも、そんなことだろうよ感はあった。その後の会社の対応を記者の人がラジオで語ってたけど確かに「あまりにも杜撰」だったしな。
電話番号を教えたくないからLINE交換って言うけど、そもそも電話番号教えたくないような人と連絡取り合いたくないんです。
でも「子供がいるとそんなわけにはいかない」んだって。PTAとかではLINEしか連絡手段をしらないような情弱ボスママに「LINEをやらない人は迷惑」って声高に叫ばれるんだって。なんで単なる一アプリを強制されなきゃならんのよ。他にももっと便利で楽な方法あるでしょう。じゃあもうそういうコミュニティに参加しない方を選ぶわ。
芸能人や識者も、イジメダメゼッタイとか言っておきながら「LINE使ってない人迷惑」って言う人いるよね。
メールが主流のころは、お互いどんなメール使ってても連絡できたのに、絶対に同じアプリ入れなきゃならないって、世の中は本当に便利になったんですかね。
ノンバーバル・コミュニケーション、言葉以外の意思疎通っていうのはあるよね実際。身振り手振り。
表情の表現力不足もさることながら、せめて手指腕がちゃんと動いてくれないと表現力不足だよなあとは前から思っている。
トラッキング追従する角度がすごく広い、「高可動域」をアピールする人はちょくちょくいるけど視覚的インパクトとしては薄いと思うんだよなあ。残念ながら。
それよりは眉毛、目の開き方、口の形をめちゃくちゃ頑張って表情を豊かにしたほうがいいと思う。
そこまでやるならもう生身でええやろ、と…本末転倒になっちゃうんだけど。
果たしてVTuberの生身とキャラとのシンクロ率は今後どこまで上げられるのだろうか。技術的課題。
思うに、Live2Dで作り込んでシンクロ率を上げるのはコスト的に限界があるので、SnapChatのフィルターのようなアプローチによるVTuberに置き換わっていくのでは？と言う気がする。
↓こういうやつ
憧れの「アニメ顔」になれる！？Snapchatの新フィルターが話題 | TABI LABO https://tabi-labo.com/297336/wt-snapchatanimefilter
Vtuberのアバターに100個の細かな感情表現を求めてはないよ。
けど、全く動かない立ち絵より、表情をトラッキングして動くアバターの方があればより感情をくみ取りやすいと思う。
GIFで決まった表情パターンをつけてる人も見たことあるけど、あれは声（感情）と表情がほとんど乖離している印象だった。
もし動画内で声や会話の流れがなく、アバターの表情だけ見せられたら、さすがに「笑ってるな」と「無表情だな」ぐらいにしか分からないんじゃないかとは思う。
いつも見てるVtuberには普段から全く笑わず、アバターがほとんど動かない人がいるけど、たまーに笑ったりした時に動く表情に良さを感じることもある。
顔出ししてない日にコメントで「顔出してくれ」って顔出しを求められるのと、表情をトラッキングして動くアバターに求められてるものって同じじゃなかろうか。
