3分排列3注册-3分排列3-高邑新闻网
点击关闭

图像电影-会简单地用与其最近邻相同的颜色填充空白像素-高邑新闻网

  • 时间:

武汉动物园告急

https://www.engadget.com/2020/02/04/how-ai-helped-upscale-an-antique-1896-film-to-4k/

那麼,這究竟怎麼做到的呢?

傳送門博客:https://arstechnica.com/science/2020/02/someone-used-neural-networks-to-upscale-a-famous-1896-video-to-4k-quality/

視頻地址:https://www.youtube.com/watch?v=3RYNThid23gfeature=emb_logo

當然,看慣了高清電影的大家可能對此不以為然,那麼請欣賞下1896年的原片。

曾在Комитет公司和Futurico公司擔任產品經理,也在Merck KGaA和Bellerage Vostok兩家商店擔任系統管理員。

而它插入的幀數多到可以讓視頻速率提高到60 FPS。

也就是說,光是要把普通高清提升到4K高清,就需要額外填充600萬個像素。

它利用一種專有的插值算法,對圖像做分析、識別其細節和結構,最後將額外的「信息」填充到圖像中。

沒有對比就沒有傷害,這才是原始《火車進站》的效果,低清、卡頓,還有大量的噪點。

這個工作量是什麼概念?普通的高清是1920×1080,總像素為2073600,而4K高清是3840x2160,總像素是8294400。

雙線性插值 (Bilinear Interpolation)方法需要更多的處理能力,但它基於最近的兩個像素來分析空白像素,並在它們之間生成一個梯度,這會讓圖像變得更加清晰。

最近鄰 (Nearest Neighbor)方法,會簡單地用與其最近鄰相同的顏色填充空白像素。它雖然簡單而有效,但結果是一個鋸齒狀、明顯像素化的圖像。

網友就把Shiryaev的視頻放到了這樣的安卓程序中,給這個黑白電影着色。

據Shiryaev介紹,他採用的是一種叫做Gigapixel AI的商業圖像編輯軟件(付費)。這款軟件由Topaz實驗室創造,可以讓圖像的質量提升600%。

△Gigapixel AI

AI插值,自動填充百萬像素

同樣是利用神經網絡,從一堆彩色照片開始,將它們轉換成黑色和白色,然後再重建彩色原圖。

十三 發自 凹非寺量子位 報道 | 公眾號 QbitAI

古董級電影秒變4K高清,還能黑白變彩色。

黑白變彩色雖然Shiryaev的視頻中,只是提高了老電影的清晰度和流暢度,但也有網友在此基礎上做了進一步的工作——着色。

可以看到,AI正確的判斷出了樹木是綠色,砂石是棕色,以及路人衣服的顏色。

解決了像素低的問題,還需要解決視頻卡頓問題。

本文首發於微信公眾號:量子位。文章內容屬作者個人觀點,不代表和訊網立場。投資者據此操作,風險請自擔。

通過結合雙線性插值和雙三次插值,就可以生成光學質量損失最小的放大圖像。

不僅如此,另一位網友還將這段高清視頻進行了着色,可謂是賦予了古董電影新生命。

插值估計每個新像素要顯示什麼內容,這個過程是基於它們周邊的像素。對於這一點,有許多方法可以來衡量。

而這一過程,Gigapixel AI利用深度卷積神經網絡來完成。正如產品頁面介紹的那樣:

而雙三次插值 (Bicubic Interpolation)會對其16個最近鄰像素進行了採樣,這樣就會讓着色變得精確,但仍然存在圖像模糊的問題。

△Denis Shiryaev

當然,這位網友也表示,希望看到更好的着色技術讓這部經典的古董電影煥發新生命。

神經網絡分析成千上萬對照片,了解圖像細節是如何丟失的。算法會根據所學知識在新圖像中填充信息,有效地為照片添加新細節。

那么,你想试试吗?博主简介

Denis Shiryaev出生於1988年6月28日,俄羅斯人。

而最近,國外網友Denis Shiryaev利用一種增強程序(Gigapixel AI),將1896年的古董電影《火車進站》,轉變成了4K 60fps高清「大電影」。

不僅如此,還需要弄清楚如何顯示這些額外的像素,這就是插值過程的用武之地。

由於技術原因,最早的影像資料都是較為模糊且卡頓的,這就讓大大降低了我們的觀感體驗。

Gigapixel AI在關鍵幀之間進行「想像」之後,把這些想像出來的幀插進去。

這就是古董電影也能變得如此清晰、流暢的原因。

可以看到畫面中火車進站、人物走動、衣服擺動都非常流暢、逼真。

今日关键词:红会公布捐赠情况