Snap推出集合AI模型的新AR眼鏡：支持語(yǔ)音交互，可搭積木可遛寵物

　　多知9月18日消息，Snapchat背后的公司Snap剛剛推出了第五代Spectacles——Spectacles’24，這是一款全新的AR眼鏡。這款眼鏡在視野、分辨率和手部追蹤等方面進(jìn)行了改進(jìn)，并更新了其軟件堆棧。

　　該眼鏡的售價(jià)為1200美元，首批將面向開發(fā)者用戶，采用“硬件即服務(wù)”的方式銷售產(chǎn)品，提供了每月99美元的月租模式，為期一年。

　　Snap公司強(qiáng)調(diào)，Spectacles軟件平臺(tái)“沒(méi)有開發(fā)者稅”，意味著公司不會(huì)從開發(fā)者的收入中抽成。

　　Snap對(duì)Spectacles的軟件進(jìn)行了全面升級(jí)，推出了全新的SnapOS操作系統(tǒng)。新系統(tǒng)以手部追蹤為核心，提供了統(tǒng)一的界面和交互方式。

　　Spectacles佩戴者能夠要求生成 AI 圖像作為 AR 濾鏡，或與 Snap 的 AI 聊天機(jī)器人 MyAI 互動(dòng)，獲取視野內(nèi)物體的相關(guān)信息。

　　此外，Spectacles ’24還支持社交功能，能夠識(shí)別附近其他眼鏡并無(wú)縫加入會(huì)話。

　　這款眼鏡同時(shí)支持“旁觀者”模式，允許智能手機(jī)用戶看到你的AR會(huì)話。與Quest和Apple Vision Pro等頭顯的觀眾視角不同，智能手機(jī)視角實(shí)際上是從第三方用戶自己的視角來(lái)感知AR內(nèi)容，而不僅僅說(shuō)頭顯用戶的第一人稱視角。

　　智能手機(jī)同時(shí)可以作為控制器，或者你可以將智能手機(jī)中的應(yīng)用鏡像到眼鏡之中，這樣你就可以看到應(yīng)用程序的浮動(dòng)視圖(但不是交互式)。上述社交和智能手機(jī)可擴(kuò)展功能只適用于專門為它們?cè)O(shè)計(jì)的應(yīng)用和體驗(yàn)，但在操作系統(tǒng)/SDK級(jí)別提供支持開辟了有趣的可能性。

　　這款新眼鏡的電池續(xù)航時(shí)間約為45分鐘，電池安裝在鏡框內(nèi)，靠近眼鏡臂的柄部。眼鏡重量為226 克，比Vision Pro輕了60%多，比Meta的雷朋智能眼鏡重一些。與其他AR或混合現(xiàn)實(shí)產(chǎn)品不同，眼鏡不需要太多校準(zhǔn)或定制配件。

　　與早期的眼鏡型號(hào)一樣，當(dāng)內(nèi)容被捕獲時(shí)，一個(gè)小而可見(jiàn)的LED燈會(huì)閃爍。在拍攝照片或視頻等內(nèi)容時(shí)，也會(huì)發(fā)出鐘聲。

　　Snap還發(fā)布了Lens Studio 5.0，用于構(gòu)建Snapchat和Spectacles 的AR體驗(yàn)。新版本支持更復(fù)雜的Lens，包括TypeScript和JavaScript，并提供了改進(jìn)的版本控制工具。

　　此外，開發(fā)者能夠使用SnapML直接在Lens中使用自定義ML模型，通過(guò)與OpenAI合作，將把云托管的多模態(tài)AI模型引入至Spectacles。

　　這款眼鏡內(nèi)置了多個(gè)應(yīng)用程序，包括打擊樂(lè)游戲、高爾夫模擬器和虛擬寵物體驗(yàn)。

　　此外，Snap公司還與ILM Immersive、Niantic、樂(lè)高和Wabisabi Games等進(jìn)行了合作為該平臺(tái)打造定制 AR 體驗(yàn)。如ILM Immersive公司將為為可穿戴平臺(tái)推出一款《星球大戰(zhàn)》游戲，而 Pokémon GO 制造商 Niantic 將帶來(lái)其游戲 Peridot 和 Scaniverse。

　　樂(lè)高與Snapchat合作，將Bricktacular引入Spectacles中。在一個(gè)簡(jiǎn)短的演示中，Lens體驗(yàn)可以在一個(gè)表面上渲染各種各樣的積木塊，就像在現(xiàn)實(shí)生活中一樣。用戶可以旋轉(zhuǎn)和操縱每一個(gè)積木塊，把一個(gè)放在另一個(gè)上，建造一個(gè)積木小房子。積木塊用完了，用戶還可以用內(nèi)置的麥克風(fēng)用語(yǔ)音命令系統(tǒng)制作新的積木塊，還可以要求特定的顏色。

　　《麻省理工技術(shù)評(píng)論》作者提到了使用體驗(yàn)：“在一個(gè)普通的房間內(nèi)，佩戴上Spectacles’24，可以將樂(lè)高積木堆放在桌子上，將AR高爾夫球擊入房間另一側(cè)的洞中，用雙手在天花板和墻壁上畫花和藤蔓，并詢問(wèn)我正在看的物體并得到 Snap 虛擬 AI 聊天機(jī)器人的回答。甚至還有一只來(lái)自Niantic的紫色虛擬小狗，跟著我在房間里走來(lái)走去，然后走到陽(yáng)臺(tái)上。 ”

　　用戶可以通過(guò)語(yǔ)音和手勢(shì)的組合來(lái)控制這一切。

　　Snap在2016年至2019年推出的前三代Spectacles為消費(fèi)設(shè)備，沒(méi)有任何顯示屏或揚(yáng)聲器，它們純粹作為相機(jī)眼鏡使用，沒(méi)有音頻輸出和AI功能。

　　第四代Spectacles于2021年推出，配備了用于真正AR的波導(dǎo)顯示屏，但僅以非常有限的數(shù)量提供給選定的開發(fā)者。它們是一種真正的太陽(yáng)鏡形態(tài)的獨(dú)立AR設(shè)備，配備了高通Snapdragon XR1芯片組，視野非常小，活躍電池壽命僅為30分鐘。

　　新的第五代Snap Spectacles提供了更廣闊的視野，更長(zhǎng)的電池壽命，更強(qiáng)大的處理器，以及更高的透明度，以便旁觀者可以看到佩戴者的眼睛。