にほんブログ村 ニュースブログ 海外ニュースへまとめ
このエントリーをはてなブックマークに追加

【歴史】AIによって補完された20世紀初頭の美しい4k映像

歴史

 古い映像を見る時、そこにはなんとも言えない哀愁が漂う。実際に自分が生きていた過去の時代の映像を見て感じるなら、その哀愁は望郷の念からだろうが、そうでないなら何かしらの錯覚のはずだ。そして、たぶんその錯覚は、低解像度、低フレーム、ノイズ、場合によっては白黒であるなどの、古い映像故の必然的な低品質によるのではないだろうか?

 ということで、ならば実際に高解像度、高フレーム、ノイズも無くカラーの高品質の、なのに古い(1920年代)映像を見ていただきたい。

100年前を生きていた美しい女性達

1929年の中国・上海の女性達がファッションについて語っている
1928年のフランス・ビアリッツのビーチを楽しむ人々
1921年のオランダのビーチを楽しむ人々

 やっぱりこれでも哀愁感じるじゃないか・・・。

 これらは、1・ノイズの除去、2・Dain Appというソフトを使ったフーレムの補完、3・解像度の拡大、4・ニューラルネットワークを用いた顔部分の改良、5・DeoldifyとDeep Exemplar-based Video-Colorizationというソフトを用いた色付け、という手順を用いて、古い映像を美しい映像に復元しているそうだ。

 流石にまだ完全に現代の映像と見間違うくらいに、とまでは行かないが、これらの動画を投稿しているチャンネルで最新の動画である上記の上海の女性達の映像は、これまで見たことないほど高品質な復元に成功しているようだ。ぱっと見70,80年代の映像だと言われても信じてしまうくらいだ。

 このチャンネル、及びチャンネル運営者のサイトには他にもたくさんの復元された動画や写真があるが、どれも一見の価値があるものばかりだ。

以下、この動画(上海のもの)についてのレディターの反応

名前: BIGMCLARGEHUGE_
 びっくりした!


名前: justatest90
>>BIGMCLARGEHUGE
 怖いよね。もう何が本当で何か嘘か分からなくなる。
 もちろんこの動画自体は良い技術の使われ方だけど、ある程度の技術がある人なら誰でもフェイクビデオを作れるようになるかと思うと怖いよ。


名前: Tommy_the_Gun
>>justatest90
 トム・クルーズのディープフェイク見た?
 一見無害だけど、もし世界のお偉方を使って誰でも同じようなことができるようになったら確かに恐ろしい。
 希望があるとすれば、それは誰もが懐疑的になることだけだ。


名前: l3ane
>>justatest90
 子供の頃におじいちゃんにトイ・ストーリーを見に連れて行ってもらったときのことを思い出した。
 アンディの靴が数秒アップになるときあるんだけど、おじいちゃんはそれがCGだって信じなくてね。
 おじいちゃんの目には”漫画”にしてはあまりにもリアルすぎたようだ。その後おじいちゃんと議論になったけど、12歳の頃の自分にはおじいちゃんを説得できなかった。
 26年前にCGでも騙される人はいるんだから、最新のCGになんてなったら恐ろしいよ。まだ今は見分けがつくけど、何れはもうそうでなくなるだろう。


名前: asian_identifier
 北京の動画もあるよ。


名前: navitios
>>asian_identifier
 ありがとう。おかげで今午前3時なわけだけどさ。
 男達の三編みが気になって中国史を2時間も調べてしまった。


名前: CoSonfused
>>asian_identifier
 なんでも着色すればいいってもんじゃないな。何もかも紫色では美しくない。


名前: Kalean
 AIによる高画質化や顔の生成を見るたびに思うんだけど、歯をうまく表現できてないよね。


名前: weatervest42
>>Kalean
 アニメーターとして言わせてもらうと、口の形って本当に難しい。
 AIにとっては、唇なのか歯なのか口の中の空洞なのかってうまく識別できなくて、うまく表現できなくなるんじゃないかな。
 まだまだアルゴリズムを改良するのに人間の労力は必要とする。


名前: Kalean
>>Sweatervest42
 たぶんその通りだと思う。
 さらに言うと、AIは学習したデータや入力情報だけに依存した性能を発揮する。
 ところが、ほとんどの高品質化AIは、アニメの画像や顔認識データベースのどちらかで学習してて、どっちもそのデータ内に歯を見せてることが少ないし、しかも歯の形状も一致してない。(ArtbreederWaifu2xをチェックしてみてほしい
 これらの問題が重なって、地獄の悪魔のような口が女性の顔に現れるのだろう。


名前: Trooner
 彼女、ずいぶん手がグレーだね。


名前: heymrtoughguy
 一番驚いたのは音声があること。 ハリウッド以外でこの時代の音声付きビデオは初めてみた。


名前: SwissJAmes
>>heymrtoughguy
 ジャズ・シンガーで1927年だからね、当時とても新しい技術だったろうね。


名前: redpandaeater
>>SwissJAmes
 おそらくだけど、蓄音機で別撮りした音声を同期させてるんだと思う。
 映像と音声の同期は昔は大変だったけど、最近ならわりと簡単にできる技術がある


名前: mcsharp
 時代を超えて女の子達は眉毛でクレイジーなことをしているのがいいよね。


著者抜粋翻訳・引用元:Reddit