hi188| 撰文

在Google眼中,沒有什麼東西是不能加持AI的。從去年的Pixel 3手機單攝拍照能力秒殺其它雙攝、三攝機型,到Duplex AI智能電話語音助理等都體現了谷歌強大的AI實力。

今年也不例外,雖然在本屆開發者大會並沒有看到太多ARCore相關消息,但現場依然展示了一些跟AR相關的場景和案例,並且我們也看到了谷歌正在將自己擅長的搜索、AI、計算機視覺、AR等一系列技術相結合,帶來體驗上的大幅提升。

ARCore支持HDR模式

首先我們來看看ARCore技術,谷歌宣佈ARCore應用已超1000個,目前ARCore支持設備超過4億臺(12月份數據爲2.5億臺)。並且,預計本週也將發佈一個更新,主要改善渲染、設計、交互方面,將支持增強型API,光預估API,環境HDR模式。

增強型圖像API是指,拍攝固定圖像例如海報、包裝等,彈出一個的動態的圖像,邏輯和玩法上相對簡單,沒有加入太多交互。

而光預估API是指,通過單一光源模擬數字場景的光效,加入環境HDR模式。

這個模式不得了,同樣利用了HDR,其通過單目相機拍攝的畫面,結合機器學習技術,讓其通過360的光效模擬出高保真的HDR效果。

據瞭解,環境HDR主要包含三個關鍵API:

  • 主方向光:確定陰影方向;

  • 環境光線:模擬來自各個方向的環境光

  • HDR Cubemap:提供鏡面反射效果以及高光效果


搜索+AR進入Web三維時代

谷歌宣佈將在搜索結果中加入3D模型,而且還可以直接通過AR的形式直接預覽,例如在線購物,或者其它娛樂場景。

現場谷歌演示了一個基於大白鯊3D模型的案例,並談到可以讓你在真實環境中瞭解大白鯊的體型有多大。在搜索結果中頁面,你可以直接點擊這個3D模型,然後進入3D模型預覽界面,之後可以選擇AR模式實景預覽。

哎,怎麼感覺跟蘋果去年在WWDC推出的USDZ文件格式以及ARKit 2.0有點類似呢?

實際上,兩者都是將3D模型與AR實景預覽結合起來,只不過蘋果是聯合皮克斯開發了一種新的3D文件格式,而谷歌雖然沒有提及3D文件格式形態,但估計以obj等主流格式爲主,畢竟開放嘛。

而應用層面來看,蘋果的USDZ文件格式可以嵌入到任何網頁、App中,而谷歌則厲害了,憑藉自家搜索引擎,可以直接在搜索結果頁面進行展示。

由此來看,3D文件格式Web化競爭要開始了,國內搜索引擎要加油啊,不要總是在廣告上費工夫了。

據青亭網瞭解,3D AR搜索將於5月晚些時候正式開放。對於開發人員而言,只需添加幾行代碼即可支持該模式。目前, 谷歌已經聯合NASA、New Balance、三星、沃爾沃、Target等合作,爲他們的3D模型提供了支持。

從當前結果來看,大多數人更多是希望在搜索中獲得結果,而在這個過程中,將搜索結果變得有趣就非常重要,3D模型和AR的加入就是非常重要的一環,這直接將以往2D頁面互動提升到三維交互。

融合搜索、更智能的Google Lens來了

如果說只是將3D模型和AR與搜索結合還不夠的話,那這項功能可以說是顛覆體驗的大殺器。谷歌在去年推出Google Lens非常受大家歡迎,以往大家都是通過文字去搜索,這項技術直接讓你通過手機拍照進行搜索。

本屆Google I/O大會上,谷歌展示了基於Google Lens的新升級。例如,在拍攝菜單的同時會以星標形式顯示出類似大衆點評中受歡迎的餐品,當你點擊這道菜時,還會有更多詳細信息和大家的評價等,這些都是基於計算機視覺和機器學習以及搜索技術實時完成的結果。

甚至,在買單時你可以將Lens拍攝小票,它會顯示出菜單計算價格以及小費等,或者AA制快速計算分攤價格。

也就是說,以前我們通過Google Lens進行識別顯示場景中的物體,現在則可以基於識別到的物體進行在搜索的過程。

據瞭解,以搜索菜單爲例,Lens首先需要識別菜單上的菜有哪些,這就需要識別文字、樣式、大小、顏色等內容,並且如何區分不同的菜餚也是一個複雜的過程,這是之前能夠完成的。現在,Lens還會將搜索到的菜品與地圖中餐廳照片、點評網中的評論相結合。

左:日文原文,右:英文譯文

此前大家使用Google Lens較多直接的就是拍攝翻譯,而現在拍攝翻譯過程更簡單,翻譯後的結果會直接覆蓋原有文本,看上去更爲直觀,據悉已支持100多種語言。

同時,谷歌還透露一個基於數字場景和物理場景融合的例子。例如將在博物館中你可以拍攝某展品會看到展品背後的一些故事,拍攝雜誌上的一道美食可彈出食譜等。

去年12月份,谷歌宣佈Google Lens可識別產品數量已超過10億,其背後的TensorFlow開源機器學習框架,在過去一年中其準確度有了大幅提升。

另外,根據谷歌描述全球有8億成年人還存在閱讀障礙(指不認識字),他們不能讀懂公交車站牌等信息。因此,谷歌打算通過將Lens看到的文本內容直接用語音朗讀出來幫助這部分人羣,從而讓他們更易於理解,同時也可以點擊某個單詞瞭解更多詳情。

據悉,該功能將率先在Google Go中推出,這是一個低功耗、售價低餘50美元的安卓手機,而且其安裝包僅100kb。

Pixel手機率先支持谷歌地圖AR導航

同時,今天谷歌還推出一款Pixel 3a系列手機,並宣佈此前測試的谷歌地圖AR步行導航功能正式兼容自家Pixel手機,今天即可支持。

據青亭網瞭解,谷歌地圖AR導航功能加入了VPS技術,其通過拍攝到的基於已知位置的圖像提取分析“關鍵視覺特徵”來構建AR導航場景。

至於何時支持其它機型,谷歌暫未透露。

Pixel 3a不支持Daydream,今年沒有VR新品

根據TheVerge報道,谷歌在I/O大會之前就表示:Pixel 3a將不支持Daydream VR盒子,主要原因是“解決方案和幀率”問題導致不兼容。

其中最大原因可能就是處理器達不到運行需求,因爲Pixel 3a爲驍龍670處理器,這是一顆中端處理器。

值得注意的是,當前部分高端OLED安卓手機不支持Daydream,其中三星S10也不支持,自家Pixel 3a也不支持,Daydream正在邊緣化,也表明VR在谷歌內部進展變得緩慢。

另外,Google的VR&AR負責人Clay Bavor表示:今年不會推出新款VR一體機,即便Oculus Quest這類雙6DoF機型即將發貨。

Clay Bavor談到:在VR方面我們關注的重點是VR真正可以帶來的好處,以及對應的服務,例如我們推出Quest版《Tilt Brush》;我們的YouTube VR上有超過100萬個VR視頻,是全球最大的VR媒體庫;我們也有Owlchemy公司,並製作了《Vacation Simulator》、《Job Simulator》等,讓VR遊戲變得更有趣。

也就是說,即便谷歌在VR硬件上放緩速度,但並不意味停緩VR其它的工作。

關於下一代產品是VR還是MR,Clay Bavor並沒有給出明確的答覆:谷歌未來的硬件或將專注於實用性,更多的還處於深度研發模式,我們需要精心打造一套標準,讓他們能夠很好的連接起來,創造出更優秀的體驗。

(END)


 
   推薦閱讀    




 
每天五分鐘,輕鬆瞭解前沿科技。    
         —— 青亭網  
相關文章