低解像度映像を高解像度に「復元」するシステム「Ikena」 54
ストーリー by mhatta
技術の勝利 部門より
技術の勝利 部門より
maia 曰く、
Tech-On!の記事(要登録無料)によれば、米MotionDSPは10月30日、低解像度の動画の解像度や品位を高めるテクノロジー「Ikena」を発表した(プレスリリース)。映像のフレーム1枚ごとに、前後5~10枚のフレームの情報を参照して処理する。映像サンプルを見ると、低解像度な元画像と比べて劇的に改善され、ブロックノイズやモスキートノイズもほぼ消えている。投稿動画サイトや、ロケフリのようなシステム、あるいはテレビ局で(細い回線で送られた)ニュース画像を処理する際にも利用したらよさそうだし、SDTVの映像をHDTV化するニーズもある。もちろん、ユーザー側で(出来ればリアルタイム処理で)使えたら嬉しい技術でもある。
昔のソニーの技術と似た発想らしい (スコア:5, 参考になる)
タレコミのシステムは複数フレームの同一映像部分を重ね合わせることでノイズを低減するものと見ました。ソニー製品が物理的に行っていた処理をデジタル技術で精密化したものですね。すると原理的に画像の相関関係がとれない、高速で画像が切り替わるもの(車の流し撮りとか)ではあまり威力は発揮できなさそうです。でもそういう画像は少ないでしょうし、用途をあまり動かない画像やゆっくりパンする画像に限れば非常に効果があります。
あまりできのよくないDVDだと暗闇などの背景にブロックノイズが出て非常に見苦しいものですが、この技術を使えばきれいな画像を見ることができます。DVD再生機に搭載希望。
#2001年宇宙の旅のDVDに出たブロックノイズは粘菌がのたくってるみたいで不快だった。
#これを搭載すればクリアな画像になるだろうと直感。
Re:昔のソニーの技術と似た発想らしい (スコア:4, 参考になる)
家電各社としてもこのようなタイプの技術は丁度激戦区なのかもしれません。自前で開発できない所はTechonの記事にある通りこのIkenaを導入するんじゃないでしょうか。
低解像度映像を高解像度に「復元」するシステム (スコア:5, おもしろおかしい)
Re:低解像度映像を高解像度に「復元」するシステム (スコア:2, 参考になる)
#それだけなのでAC
Re:低解像度映像を高解像度に「復元」するシステム (スコア:2, 興味深い)
えっと, 冗談抜きで人間の目(と言うか視神経も含めた画像解析システム)は似たようなことをやっていると思いますよ.
論より証拠で普通のテレビ画像を静止画像で見ると, いかに汚い画像を見ていたのかってことが分かりますから. 逆にアクションゲームなんかでは, よく雑誌などに載っている静止画では実際の動いている画面の綺麗さは判断できないなんてことが言われていますから, 脳内補正がしやすい画像なんてものもあるんじゃないですかね.
まあ, 経験的にはこうした脳内補正がきつそうな画面(例えばピンがずれているような物など)を長時間見ていると, かなり頭が痛くなってくるようなので, それなりに重い処理なのでしょう. そういう意味では外部でできるだけ補正してもらえれば, 楽になるので歓迎したいところです.
Re:低解像度映像を高解像度に「復元」するシステム (スコア:0)
と書こうと思ったけど「積分効果」なんて言葉ないことをGoogle先生に教わった秋の日。
#積分処理ってのが上位に上がってた。。。
##昔、視覚系ニューロモデルを研究してたAC
元論文? (スコア:5, 参考になる)
たぶんこの論文の実用化 [ucsc.edu]じゃないでしょうか。
大雑把に言えば、
0.1ドット単位で移動する画像が10枚あれば、それを合成することで解像度10倍の画像を得ることが出来る
ってことですね。
単なる3DNRや合成開口と違って、
画面内の物体の動きを検出した上で、それを補正して合成するところがスゴイと思います。
Re:元論文? (スコア:1, 興味深い)
ということは、秒間30フレームの動画から、60フレームや120フレームの動画を再構成できるってことでしょうか。
つまり、画面上のオブジェクトが本来あった位置を予測して、そこに描画するということです。
最新の液晶TVでは、そういう補正をしているものがあるようなので、可能なんだろうと思いますが、理屈からいうと無限フレームにすることができるわけで、すごい技術だ…。
始めてフーリエ変換を理解した時の衝撃に近いモノがあります(^^;
Re:元論文? (スコア:1)
サンプリングレートの壁は越えられませんよね…
Re:元論文? (スコア:0)
Re:元論文? (スコア:0)
Re:元論文? (スコア:1)
masamic
Re:元論文? (スコア:0)
動画の複数のフレームを時系列で解析して、各フレームの欠損部分を、
前後フレームから抽出した画像で補うとか何とか。
Re:元論文? (スコア:0)
キャプチャした映像の超低解像度部分(モザイクとも言う)を如何に鮮明な画像に戻すか、とか言いながら。
Re:元論文? (スコア:0)
カメラがパンしたときにガクガクっとした動きは目が痛いですから。
Re:元論文? (スコア:0)
さっそく (スコア:5, おもしろおかしい)
#デジタル技術の胸囲ってやつですか
Re:さっそく (スコア:1, 興味深い)
マニアックなネタに3票入れるとは…
オタクの集まりだなぁ
<この部分ですね>
惚れて惚れて、泣いて泣いて?
いえ、その後です。ああ、雨に濡れながら。ここです
どこ?
ほら、右上の。この雲の切れ目のとこ
ん? んん? ん?
どこ? あたしには見えないけど
ここですよここ! この黒い鳥みたいな影!
後藤さんはもうお分りの筈だ
このすぐ後に、ベイブリッジが吹っ飛んだんだ
これを踏まえた上で、もう一本のテープを見て頂きたい
改竄の余地のないよう作業の過程を全て収録してあります
デジタル技術の驚異って奴ですな
分かりますか
あんまり詳しくないんですが、放映された例のビデオの奴とは形が違うような
そういえば
これでどうです
左が今見たビデオのもの。そして右がテレビで放映されたもの。よくご覧なさい。左が最新型のステルス翼。そしてこれも、ごく最近開発されたベクターノズル。そしてここからが本題ですが、自衛隊はこのタイプのF16を、装備していない。
Re:さっそく(オフトピック) (スコア:1)
ウェストとヒップのサイズも忘れずに突き止めてください。
あと、どれだけ人気のある研究分野かも。<ひとまかせ
# 誤字へのツッコミだけだと寂しい
#ので、とって付けたような質問。(笑
vyama 「バグ取れワンワン」
Re:さっそく(オフトピック) (スコア:0)
続けて「16ならC~Dだが写真屋でFに!」というネタを書こうかと思ったがつまらないのでやめた
国内でも (スコア:4, 参考になる)
http://www.ok.ctrl.titech.ac.jp/res/CSR/CSR-ja.html [titech.ac.jp] とか。
手法自体は以前からいろいろと研究されていますが、どう高速化するかが実用化の鍵のようです。
モザイク (スコア:2, すばらしい洞察)
Re:モザイク (スコア:5, おもしろおかしい)
Re:モザイク (スコア:5, おもしろおかしい)
あぁ。だから名前が「Ikenai」なんですね。
フレーム補完技術とか (スコア:2, 参考になる)
■ フレーム補完技術で現実に近い情景を [impress.co.jp]
Re:フレーム補完技術とか (スコア:2, 参考になる)
SDなんかじゃなくて (スコア:2, すばらしい洞察)
!!
地デジの画質が悪いのは、この技術を見越してのことだったんだ!
な、 (スコア:1)
高級端末を買えば綺麗に見えるということになればある意味正しい。
地デジのHD (スコア:1)
#それにしても大型液晶TVはモスキートノイズを弱める類の技術を使っていて、明らかにメーカーによって技術差ありますよね。
3DNDR (スコア:1, 興味深い)
ブロックノイズに特化してるってこと?
超解像といいます (スコア:5, 参考になる)
呼ばれる技術で,画像処理の世界では近年非常に発展した分野です.
国内外で多数の研究が行われていますが,例えば国内では,
東工大の奥富先生(こちら [titech.ac.jp] )がこの分野の第一人者です.
本質的には,ブロックノイズはあまり関係ありません.
動画像の各フレームにぶれがあると,サンプル点(各画素が対応する
物体表面上の点)が微妙にずれるので,そのずれに合わせて重ね合わせていくと
解像度が上がるという処理になっています.もちろんそれだけではなく,
画素面積やレンズによるボケの補正,ノイズ抑制も一緒に入っています.
今回の例が始めてではなく,従来から商品例もありますよ.
主に軍事・セキュリティ分野用に売られているものですが,
VideoDetective [pyramidvision.com]が その1つです.
CTC [ctc-g.co.jp]でも売ってます.
Re:超解像といいます (スコア:1)
防犯カメラに映った犯人の顔をクリアにするとかに使われているのかな?
となると、警視庁には1台くらい入っていそうだな。
たぶん違うと思う (スコア:0)
Re:たぶん違うと思う (スコア:0)
> This ‘computational super-resolution’ is MotionDSP’s core technology.
と明記されている通り、超解像の一種です。
複数の画像ソースを「ある方法」で集約して解像度を改善する技術一般を
超解像ど呼びますので、3DNRも超解像の実装の一つといえます。
合成開口法? (スコア:1, 興味深い)
Re:合成開口法? (スコア:1)
真っ先に考え付くのは (スコア:1)
#路は果てなく遠く
映画でよくある (スコア:1, おもしろおかしい)
抽出するあれがいよいよ現実のものにってことですか。
face hallucination (スコア:5, 参考になる)
元トピックのように複数の画像から高解像度を得るのではなく,
1枚の低解像度画像から復元できます.
Re:face hallucination (スコア:2, 参考になる)
よって、美人やかっこいい顔を学習させると、自動的にそのように補正してくれるというフィルタができますね。
もちろん、逆も可能です。
※まあ、こんなに重い処理をしなくても、hiraxさんの方式 [hirax.net]で十分?
Re:face hallucination (スコア:0)
「顔」という、低次の固有ベクトル(大まかに「楕円型」とか)が支配的な事物なら適用が可能ですけど、
そうでない事物は無理ですね……
別の話ですが、低周波の方にもノイズが入る可能性があるのは「超解像」のテクニックは使えないのでしょうか。
#低周波のノイズが入る信号で高周波のシグナル抽出を要求されている仕事しているのでAC
Re:真っ先に考え付くのは (スコア:0)
いままでなかったのか? (スコア:1)
既知の技術じゃなかったのかッ!! とか思ってしまう。
げに恐ろしきは(以下略
==========================================
投稿処理前プレビュー確認後書込処理検証処理前反映可否確認処理後……
ナイトライダーで (スコア:1)
DVDの限界らしい (スコア:1, 参考になる)
Re:DVDの限界らしい (スコア:1, おもしろおかしい)
http://www.akibablog.net/archives/img/2006-10-24-407.html [akibablog.net]
Re:DVDの限界らしい (スコア:1)
マナ板に乗ってるのはハロなので、復元してもキャベツにはなりません。
#いや、なるのか? 偏った学習させるとアメコミ風になったり実写になっちゃたりw
ずいぶん前にどっかで見たぞ (スコア:0)
それは私の勘違いでGIZMODO Japan [gizmodo.jp]のほうでした。お詫びして訂正いたします…。
# GIZMODO Japanの中の人は絶対ガジェット好きでもなんでもないに違いない。あまりにも文章に愛が無い
特許っきょ。 (スコア:0)
前後5~10枚 (スコア:0)
メモリ使用量は、結構現実的?
エンコーダは厳しいとしても、デコーダなら何とかならないかなぁ。
そこそこまともにアップコンできれば、媒体としてのDVDは延命できそうな気がする。
MD→MDLPみたいに。