更多

    Google Research 與大學研究 NeRF   
    用照片拼砌出自由視點影像

    Mickey Chan
    Mickey Chan
    愛騎單車的宅,眼鏡娘控。 1.膽固醇跟美味是成正比的; 2.所有人都可以騙,但絕對不能騙自己; 3.賣掉的貨才是錢,不賣的收藏品不值一文; 4.踩單車,是為了吃更多美食! 5.正義的話語,不一定出自正義之人的口;

    Nubia 發表紅魔 6 系列電競手機 屏幕刷新率高達 165Hz

    ZTE 旗下子品牌 Nubia 剛發表與騰訊深度合作的新一代電競手機騰訊紅魔 6 和紅魔 6 Pro 電競手機。這系列手機具備刷新率高達 165Hz 的 6.8 吋 AMOLED 屏幕,加上單指 500Hz 觸控取樣率和 ICE6.0Pro 多維散熱系統,堪稱當今最強的電競手機之一。

    【冇咁好死】 Apple 澄清 iOS 14.5 沒有設定讓用戶選擇 Siri 預設音樂服務

    早前在 iOS 14.5 beta 1 推出的時候,我們介紹過當中有個新功能,可讓用戶設定叫 Siri 播放音樂時所選用的音樂服務。不過最近 Apple 就向傳媒澄清,原來這個功能不是改變 Siri 的預設音樂服務,而只是為了訓練 Siri 令她/他醒目一些⋯⋯

    一套代碼發佈跨平台程式  Google 發佈 Flutter 2 擴展至桌面程式

    Google 在日前舉行的 Flutter Engage 網上大會上發表第二代跨平台應用程式開發 SDK Flutter 2 ,新一代 SDK 繼續開源方針,除了支援一套程式碼同時開發 iOS 和 Android 手機程式之外,還擴展支援至開發桌面程式、網頁程式 PWA ,連像 Microsoft Duo 那樣的雙畫面裝置上使用的程式也可以開發得到,大大節省開發時間和成本。

    相信大家都有玩過 Facebook 3D 相片功能,只要拍一張照片就能做出有輕微 3D 效果。不過細心看就會發現相片有不少瑕疵,而光影反射也是固定了的,不太真實。早前加州大學柏克萊分校和聖地牙哥分校就與 Google Research 合作,開發出一套名為手 NeRF 的技術,透過新的神經網絡機械學習,就能生成可以自由地從不同角度來觀看的立體照片,非常像真。

    NeRF 使用一種名為 MLP (多層感知)神經網絡來學習,沒有使用一般機械學習生成影像時所用的卷積神經網絡( CNN, Convolutional Neural Network ),而產生出更高精度的結果。

    花卉的立體感非常豐富,而且沒有其他用照片生成 3D 圖像時出現的拉扯材質現象。
    留意恐龍的每一條胸骨都清晰可見。

    研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩,從而合成出新的連續影像。合成出來的影像,連光的反射方向都能重現,觀察者變更觀看角度時,反射程度也會同時改變,令影像看來來更加真實自然,更具立體感。

    研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩。
    研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩。
    其他使用 CNN 卷積神經網絡技術所生成的圖像(左)和 NeRF 相比,精細程度高下立見。
    其他使用 CNN 卷積神經網絡技術所生成的圖像(左)和 NeRF 相比,精細程度高下立見。

    ▲ 改變觀察視角時,連房間背後電視的反光都會跟隨移動(左),相當迫真。

    此外,研究人員更可以在生成出來的影像主體前後放入虛擬物件,虛擬物件能按照觀察角度而被前景的物件遮蓋,就像虛擬物件真的存在於照片當中。

    可以在生成出來的影像主體中置入虛擬物件(紅球),就像物件本來就在影像裡一樣。

    想更進一步了解 NeRF 技術的利害之處,可以欣賞以下影片介紹。

    您會感興趣的內容

    相關文章