Uploads%2farticles%2f16392%2fproject astra  our vision for the future of ai assistants nxvvvrhigji 0009
|
2024-05-16

幾秒鐘閃過(guò)的谷歌新眼鏡,是 AI 與 AR 最好的硬件載體 | Google I/O

谷歌眼鏡用上了 Meta 智能眼鏡的攝像頭颖御,還有 Meta 準(zhǔn)備在下一代增加的 AR 顯示功能榄棵,多模態(tài) AI 助手的能力也更勝一籌

谷歌曾在 2022 年的 I/O 大會(huì)上展示過(guò)一款智能眼鏡,其本質(zhì)是一款 AR 翻譯眼鏡疹鳄,支持語(yǔ)音雙向翻譯拧略、手語(yǔ)翻譯等功能,語(yǔ)音助手作為主交互界面瘪弓,通過(guò)近眼顯示提供實(shí)時(shí)翻譯的字幕信息。


而在剛剛開幕的 Google I/O 2024 開發(fā)者大會(huì)上,又有一款智能眼鏡短暫亮相——短到只有幾秒集索,模樣被一帶而過(guò)诽俯,卻令人過(guò)目不忘。

谷歌新眼鏡是伴隨著新 AI 助理 Project Astra 的發(fā)布而亮相的呛占。

演示者問(wèn) Astra 提問(wèn):你記得在哪兒看到我的眼鏡了嗎虑乖?Astra 告訴她:眼鏡在桌子上,紅蘋果旁邊晾虑。演示者順著 Astra 的回答决左,找到了眼鏡。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI-0003

她放下手機(jī)走贪,戴上眼鏡佛猛,一個(gè)開啟眼鏡的提示音出現(xiàn)。接著下一個(gè)轉(zhuǎn)場(chǎng)坠狡,畫面中出現(xiàn)了一個(gè)代表 Astra 的小圓點(diǎn)继找。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI-0002

演示者繼續(xù)與 Astra 對(duì)話,詢問(wèn)白板上的開發(fā)流程圖如何優(yōu)化逃沿,Astra 很快給出了答案——一邊語(yǔ)音播報(bào)婴渡,一邊將播報(bào)文字投射在眼前。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI-0004

很明顯凯亮,使用眼鏡與使用手機(jī)與 AI 對(duì)話的方式有一些不同:

眼鏡上的攝像頭替換了手機(jī)上的攝像頭边臼,眼鏡上的麥克風(fēng)替換了手機(jī)上的麥克風(fēng),眼鏡上的揚(yáng)聲器替換成了手機(jī)上的揚(yáng)聲器假消,眼鏡上的光學(xué)顯示系統(tǒng)替代了手機(jī)的顯示屏柠并。

眼鏡替換成手機(jī),成為谷歌新 AI 助理 Project Astra 的硬件載體富拗。

這副眼鏡看起來(lái)很輕盈臼予,樣子與日常佩戴的光學(xué)眼鏡差不多,卻多了眼睛啃沪、耳朵粘拾、嘴巴的功能:

  • 眼鏡:攝像頭捕捉環(huán)境畫面,采集影像信息

  • 耳朵:麥克風(fēng)聆聽(tīng)環(huán)境聲音创千,識(shí)別語(yǔ)音指令

  • 嘴巴:信息經(jīng)過(guò)(手機(jī))中樞處理后缰雇,經(jīng)(眼鏡)揚(yáng)聲器播報(bào)反饋

在硬件設(shè)計(jì)上入偷,它與 Meta 的第二代智能眼鏡的設(shè)計(jì)思路一脈相承。不同之處是械哟,谷歌提前做到了 Meta 沒(méi)有做到盯串、并準(zhǔn)備在下一代產(chǎn)品中集成進(jìn)來(lái)的 AR 顯示功能。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI-0005

谷歌剛剛就 Gemini 的三個(gè)模型做了更新:

Gemini 1.5 Pro 在翻譯戒良、推理体捏、編碼等關(guān)鍵用例上做了優(yōu)化,能夠勝任更復(fù)雜的任務(wù)處理糯崎。

Gemini 1.5 Flash 是 Google 發(fā)布的一款新的輕量級(jí)模型几缭,主要用于處理高頻、簡(jiǎn)單任務(wù)沃呢,具備快速響應(yīng)的能力年栓。

Gemini nano 是一款端側(cè)輕量級(jí)大模型,將集成在 Android 底層系統(tǒng)薄霜,作為一項(xiàng)能力向設(shè)備提供某抓。能支持語(yǔ)音理解、圖像識(shí)別惰瓜,以及將消息否副、郵件和文檔,提煉合成簡(jiǎn)潔崎坊、可讀的摘要內(nèi)容备禀。

具體用例方面,Gemini nano 可以讀懂手機(jī)界面上的信息奈揍、提煉 PDF 等文檔關(guān)鍵信息曲尸,并支持語(yǔ)音問(wèn)答。還能根據(jù)陌生電話涉及的索要身份信息男翰、銀行賬號(hào)等敏感詞匯另患,識(shí)別詐騙電話。

從另一個(gè)層面蛾绎,谷歌新眼鏡又是 Project Astra 的載體昆箕。

Project Astra 是一款實(shí)時(shí)多模態(tài) AI 助理,通過(guò)手機(jī)攝像頭和麥克風(fēng)感知物理世界秘通,通過(guò)語(yǔ)音和文本與人類交流對(duì)話为严。

Flash_Utility

演示者用 Pixel 手機(jī)攝像頭對(duì)準(zhǔn)桌面敛熬,詢問(wèn)桌面上什么東西能發(fā)出聲音時(shí)肺稀,Astra 準(zhǔn)確的回答:是揚(yáng)聲器。

演示者繼續(xù)問(wèn)应民,這個(gè)顯示器上面這部分是什么话原?Astra 準(zhǔn)確地回答:是高音單元夕吻。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI

Astra 還可以記得東西放在哪里,可以給金毛狗和寵物熊的樂(lè)隊(duì)組合起名繁仁,可以查看電腦屏幕上的代碼涉馅,可以環(huán)顧窗外告訴你這是哪里。

Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI
Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI
Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI
Project_Astra%EF%BC%9A_Our_vision_for_the_future_of_AI_assistants-nXVvvRhiGjI

灣里小結(jié):

Project Astra 將接替 Google Assistant 成為新的融合多模態(tài) AI 能力的新 AI 助手黄虱,它代表著谷歌人工智能的未來(lái)稚矿。

作為大模型交互界面的 AI 手機(jī)和 AI 眼鏡,將成為最重要的捻浦、可以隨身攜帶的 AI 硬件載體晤揣。

只有麥克風(fēng)和揚(yáng)聲器的音頻 AI 眼鏡(李未可、米家等)朱灿,有麥克風(fēng)也有攝像頭的音視頻 AI 眼鏡(Ray-Ban Meta)昧识,加上 AR 顯示并擁有大模型接入能力的 AI 眼鏡,智能眼鏡的新進(jìn)化之路已經(jīng)清晰盗扒。


主筆:周森 / 深圳灣

編輯:陳述 / 深圳灣

>>
Back to top btn
亚洲AV无码国产精品网址,久久亚洲AV成人出白浆无码国产,日韩AV美乳欧美,永久免费AV无码软件app下载