什麼是谷歌的RAISR:這款人工智慧正在革新影像分辨率

  • 超智能解析度: RAISR 利用機器學習技術即時將低解析度影像轉換為高品質影像。
  • 大幅節省數據流量: 它可以將您的影像大小減少高達 75%,從而優化行動頻寬消耗。
  • 顛覆性的速度: 它處理影像增強的速度比傳統超解析度方法快 10 到 100 倍。
  • 告別像素化: 它消除了混疊偽影和噪聲,優於線性縮放或經典上取樣。

風險投資回報率

機器學習是當今最具顛覆性的技術趨勢之一。它能夠分析模式並從數據中學習,使數位服務不斷發展,提供更個人化的體驗。一個明顯的例子是Google Play Music等服務中的音樂推薦優化,該系統會學習用戶的喜好來優化他們的播放清單。事實上,我們最近分析了Google基於情境的更新策略,結果表明,我們與應用程式互動越多,人工智慧的預測就越準確。


然而,機器學習的潛力並不局限於音訊。谷歌決定將這項智慧引擎應用於行動時代的關鍵問題:影像解析度。目前,我們面臨著一個悖論:雖然我們的裝置(例如平板手機或智慧電視)螢幕需要越來越高的解析度才能顯示清晰的影像,但裝置的內部儲存空間和行動網路速度卻成了瓶頸。為了解決影像品質與資源消耗之間的這種衝突,Google開發了一種名為RAISR 的創新技術。

什麼是 RAISR:快速精確影像超解析度?

RAISR,即快速精確影像超解析度技術,是一項利用深度學習產生高品質低解析度影像的尖端技術。與傳統方法不同,RAISR 並非簡單地拉伸影像,而是基於先前學習到的模式重建遺失的細節。

該系統的主要優勢在於其高效性。 RAISR 能夠產生與現有超解析度方法(稱為 SISR 或單一影像超解析度)相當,甚至在許多情況下更勝一籌的結果,但速度卻大幅提升:處理時間縮短了 10 到 100 倍。這種速度至關重要,因為它允許在用戶設備上直接即時進行影像增強,無需在外部伺服器上處理影像並等待回應。


除了提升清晰度,RAISR還能解決一些惱人的視覺問題。在不久的將來,這項技術將能夠徹底消除鋸齒偽影和摩爾紋,這些問題通常會在放大低品質影像時出現,從而獲得清晰、無光暈和雜訊的影像。

傳統上採樣與 RAISR 的區別

要理解 RAISR 所代表的技術飛躍,我們必須分析多年來一直使用的上採樣方法。傳統的上採樣基於線性方法:基本上,系統會獲取現有解析度並對其進行“拉伸”,透過組合周圍像素的值來填充新像素的空白區域。

儘管這種方法由於使用簡單的線性濾波器而速度極快,但它有一個嚴重的缺陷:無法重現生動的細節。即使放大後,影像仍然會顯得模糊、像素化或邊緣過於平滑,因為軟體無法「理解」影像所代表的內容;它只是計算顏色的數學平均值。

上採樣


RAISR流程的技術運作方式

RAISR 的奧秘在於其訓練過程。與靜態濾波器不同,RAISR 利用機器學習技術,透過分析影像對進行訓練:同一張照片的高解析度版本(原始影像)和低解析度版本。透過這種對比分析,人工智慧可以發現降維過程中失去的元素,並學習如何重新合成這些元素。

RAISR 訓練可以透過兩種不同的方式進行:

  • 直接方法: 重建濾波器是透過比較低的解析度影像和高解析度影像對直接學習。
  • 間接法: 首先對低解析度影像應用類似於傳統「上取樣器」的濾波器,然後人工智慧學習所需的濾波器,以縮小該中間結果與原始高品質影像之間的差距。

風險投資回報率

無論採用何種方法,RAISR 濾波器都經過訓練,能夠識別影像小區域中「峰值」的特定特徵。這包括區分顏色漸變、高亮度區域、複雜紋理區域或平坦區域。人工智慧會評估每個像素的方向、強度和一致性,從而應用最適合的解決方案。


風險投資回報率

系統即時地從其學習的資料庫中選擇最相關的濾波器,並將其應用於每個相鄰像素。最終產生的影像能夠重現與原圖相近的細節,消除像素化現象,並顯著提升視覺清晰度。

實際影響:節省數據和頻寬

RAISR 最具顛覆性的應用不僅在於提升影像美觀度,更在於大幅節省資源。透過讓低解析度影像呈現高清效果,Google可以傳輸更小的文件,而使用者幾乎察覺不到任何差異。

這項發展對行動用戶體驗有著直接的影響:

  • 減少數據消耗: 據估計,RAISR最多可將影像權重降低至多 這意味著,用戶使用下載一張標準圖像所需的頻寬,可以上傳四張 RAISR 處理過的圖像。
  • 存儲優化: 照片可以以較低的解析度儲存,以節省雲端或內部儲存空間,僅在查看時放大。
  • “捏合縮放”功能改進: 由於人工智慧可以即時產生所需的分辨率,手機上的捏合縮放功能變得更加流暢和清晰。
  • 更快的應用程式載入速度: 更少的資料意味著更短的載入時間,從而提高嚴重依賴影像的應用程式的效能。

科技的應用與未來

谷歌已經開始將 RAISR 技術整合到各種服務中。其中最引人注目的應用之一是Google+應用,該系統每週用於處理數十億張圖片,顯著降低了數百萬用戶的頻寬消耗。此外,這項技術也被應用於iOS 平台的Motion Stills應用,提升了從 Live Photos 匯出的影片的清晰度。

RAISR 的成長潛力幾乎是無限的。我們很可能會看到 RAISR 發展成類似Google Photos的服務,不僅可以優化存儲,還能恢復用老舊設備(例如老式低分辨率諾基亞手機)拍攝的舊照片的質量,這些照片在現代屏幕上會顯得像素化。此外,將其應用於 YouTube 縮圖或 Google Play 商店,可以在不犧牲視覺品質的前提下即時導航。

與傳統的JPG壓縮(透過移除資訊並產生視覺瑕疵來減少檔案大小)不同,RAISR並非以傳統方式壓縮影像。它只是減小圖像的物理尺寸,並依靠人工智慧來預測和重建缺失的資訊。雖然它無法始終精確地預測每個細節,但最終的視覺效果非常逼真,足以以假亂真,讓人誤以為這就是原始的高解析度影像。

這項進步代表著多媒體內容管理領域的典範轉移。透過將工作負載從資料傳輸(下載)轉移到本地處理(裝置端運算),Google使網路瀏覽更有效率、經濟且更具視覺吸引力,確保影像品質在行動時代不再是限制因素。


在 Google 中將其新增為首選來源