Google Research 與大學研究 NeRF   
用照片拼砌出自由視點影像

相信大家都有玩過 Facebook 3D 相片功能,只要拍一張照片就能做出有輕微 3D 效果。不過細心看就會發現相片有不少瑕疵,而光影反射也是固定了的,不太真實。早前加州大學柏克萊分校和聖地牙哥分校就與 Google Research 合作,開發出一套名為手 NeRF 的技術,透過新的神經網絡機械學習,就能生成可以自由地從不同角度來觀看的立體照片,非常像真。

NeRF 使用一種名為 MLP (多層感知)神經網絡來學習,沒有使用一般機械學習生成影像時所用的卷積神經網絡( CNN, Convolutional Neural Network ),而產生出更高精度的結果。

花卉的立體感非常豐富,而且沒有其他用照片生成 3D 圖像時出現的拉扯材質現象。
留意恐龍的每一條胸骨都清晰可見。

研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩,從而合成出新的連續影像。合成出來的影像,連光的反射方向都能重現,觀察者變更觀看角度時,反射程度也會同時改變,令影像看來來更加真實自然,更具立體感。

研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩。
研究人員從不同角度拍攝 20-50 張目標物件的照片,將各照片拍攝的 3D 座標和 2D 視線方向資料輸入,讓人工智能去預測不同視角的物體密度和 RGB 色彩。
其他使用 CNN 卷積神經網絡技術所生成的圖像(左)和 NeRF 相比,精細程度高下立見。
其他使用 CNN 卷積神經網絡技術所生成的圖像(左)和 NeRF 相比,精細程度高下立見。

▲ 改變觀察視角時,連房間背後電視的反光都會跟隨移動(左),相當迫真。

此外,研究人員更可以在生成出來的影像主體前後放入虛擬物件,虛擬物件能按照觀察角度而被前景的物件遮蓋,就像虛擬物件真的存在於照片當中。

可以在生成出來的影像主體中置入虛擬物件(紅球),就像物件本來就在影像裡一樣。

想更進一步了解 NeRF 技術的利害之處,可以欣賞以下影片介紹。

Advertisement

spot_img

MOMAX 1-Wear 智能手錶系列 全天候洞察健康狀況

Momax 的產品線越來越多元化,近日推出全新「1-Wear 智能手錶」系列,價錢抵玩,卻備有先進的健康監測功能,無論是日常佩戴或運動健身,都能為用戶提供精準的健康數據,讓用戶隨時了解自身的健康狀況。

針對行動裝置 YouTube Premium...

唔想睇廣告,有不少人都改用付費版的YouTube Premium,除了免睇廣告外,YouTube Premium 都有不少方便用動的功能。今日 Google 在YouTube 官方部落格產宣佈,新增 5 個...

可讀寫藍光碟、MD 碟、Mini DV 帶成歷史 SONY...

SONY 於 1 月 23 日正式公佈,將於 2 月起停產包括可讀寫的藍光碟、MD Data、音樂用 MD 及 Mini DV 帶等多款記錄媒體,往後亦不會有相關的新產品推出。

演唱會拍攝神器 Panasonic LUMIX TZ99 平玩...

啟德體育園將於 3 月正式開幕,多個超級演唱會將排住隊登場。不過如果想係演唱會影相打卡就要留意,啟德體育園禁格嚴止換鏡相機入場。只能夠用手機,又或者有長鏡功能的袋裝相機。幾過幾年沉澱,Panasonic 係呢個時候竟然再出袋裝長鏡相機,而價錢更是相當吸引。

迎合混合辦公模式 Zoom 運用大量 AI 打造智能工作平台

個人用戶對 Zoom 的認知可能仍停留在跟朋友聯繫的視像會議應用,又或是上網課之用,用法較為單一。然而,面對後疫情的轉變,該公司早已向著提升員工生產力及簡化溝通等方面出發,透過大量 AI 技術改造方案,建立人工智能工作平台。最近,Zoom Workplace 和 Zoom Contact Center 更增設多項新功能,進一步幫助企業加強效率並改善在工作場所的協作體驗。

MOMAX 1-Wear 智能手錶系列 全天候洞察健康狀況

Momax 的產品線越來越多元化,近日推出全新「1-Wear 智能手錶」系列,價錢抵玩,卻備有先進的健康監測功能,無論是日常佩戴或運動健身,都能為用戶提供精準的健康數據,讓用戶隨時了解自身的健康狀況。

針對行動裝置 YouTube Premium 新增 5 項功能

唔想睇廣告,有不少人都改用付費版的YouTube Premium,除了免睇廣告外,YouTube Premium 都有不少方便用動的功能。今日 Google 在YouTube 官方部落格產宣佈,新增 5 個 YouTube Premium 功能。 YouTube Premium 新加入 5 個功能,包括: 高品質音訊 : YouTube Premium 用戶可以用最高 256kbps  音質,播放音樂內容。 iOS 版的 YouTube...

可讀寫藍光碟、MD 碟、Mini DV 帶成歷史 SONY 宣布停產多款記錄媒體

SONY 於 1 月 23 日正式公佈,將於 2 月起停產包括可讀寫的藍光碟、MD Data、音樂用 MD 及 Mini DV 帶等多款記錄媒體,往後亦不會有相關的新產品推出。

演唱會拍攝神器 Panasonic LUMIX TZ99 平玩 30x Zoom

啟德體育園將於 3 月正式開幕,多個超級演唱會將排住隊登場。不過如果想係演唱會影相打卡就要留意,啟德體育園禁格嚴止換鏡相機入場。只能夠用手機,又或者有長鏡功能的袋裝相機。幾過幾年沉澱,Panasonic 係呢個時候竟然再出袋裝長鏡相機,而價錢更是相當吸引。

迎合混合辦公模式 Zoom 運用大量 AI 打造智能工作平台

個人用戶對 Zoom 的認知可能仍停留在跟朋友聯繫的視像會議應用,又或是上網課之用,用法較為單一。然而,面對後疫情的轉變,該公司早已向著提升員工生產力及簡化溝通等方面出發,透過大量 AI 技術改造方案,建立人工智能工作平台。最近,Zoom Workplace 和 Zoom Contact Center 更增設多項新功能,進一步幫助企業加強效率並改善在工作場所的協作體驗。

Elon Musk 終承認聘用遊戲代練

全球首富的 Elon Musk 雖說自己也是遊戲迷,而且在包括《Diablo 4》及《Path of Exile 2》亦有相當高的等級,手上的裝備也很精良。不過有網友從早前 Elon Musk 本人的遊戲直播中發現,他對遊戲操作的熟練度和對遊戲系統的認識,似乎和一線玩家有很大落差。日前,Elon Musk 與知名遊戲實況主 NikoWrex 對話時承認,自己的確有花錢請人幫他練等升級,並直言不少頂級玩家都有請人代練角色⋯⋯

機動戰士 Gundam GQuuuuuuX 電影版上映・網友比較三代機設

新一輯《機動戰士 Gundam GQuuuuuuX》將於今年稍後時間播映,今次的作品是由《新世記福音戰士》的 Studio Khara 和 Sunrise 共同製作,在電視播放之前,由部分集數重新編排及剪輯的劇場版《機動戰士 Gundam GQuuuuuuX -Beginning-》亦於 1 月 17 日於日本上映。據日本的消息,新作的票房和評價都相當亮眼,不過很多人對新作的機設,都有不少的意見,有網友更將三代 Gundam 的機設作比較,作為 Gundam 粉絲的你,又有甚麼感想呢?

為出親生仔 Android XR 眼鏡招兵買馬?Google 收購 HTC 部分 XR 研發團隊

HTC 宣布與 Google 簽訂在 XR 方面的合作協議,Google 以 2.5 億美元,買下 HTC 部分 XR 事業,部分 HTC XR 研發團隊成員將過檔 Google,HTC 亦會向 Google 授予 XR 方面的智慧產權非專屬授權讓他們使用。這是繼去年底 Google 發表 Android XR 作業系統和 XR 計劃之後又重大舉動。HTC 就表明會持續發展 VIVE XR 方案和產品。