蘋(píng)果要給AirPods配攝像頭,為了空間計算更為了AI?
文 |雷科技leitech
你是否想過(guò),耳機也會(huì )有配備攝像頭的一天?
耳機+相機,雖然類(lèi)似的產(chǎn)品并非沒(méi)有,但是我們一般將這類(lèi)產(chǎn)品稱(chēng)為“智能眼鏡”,產(chǎn)品定位則類(lèi)似于隨身相機和騎行記錄儀,可以說(shuō)攝影功能才是核心,而耳機功能只是順帶的。
畢竟從實(shí)際體驗和產(chǎn)品設計出發(fā),很難想象怎樣的用途才會(huì )需要在無(wú)線(xiàn)耳機上增加攝像頭??紤]到佩戴體驗、續航等各方面的限制,這也并非什么好主意,但是蘋(píng)果似乎不這么想。
在今年2月初,外媒曾經(jīng)報道過(guò)蘋(píng)果正在探索可穿戴設備的一些“未來(lái)可能”。當時(shí)的傳聞稱(chēng),蘋(píng)果正在規劃帶攝像頭的AirPods及智能戒指,彼時(shí)大多數聲音都認為這只是蘋(píng)果在實(shí)驗室里的嘗試,大概率不會(huì )轉為實(shí)際產(chǎn)品。
圖源:谷歌
然而現實(shí)總是更魔幻一些,最新的信息顯示,蘋(píng)果計劃于2026年量產(chǎn)擁有紅外攝像頭模組的AirPods。與這個(gè)信息相比,往AirPods充電盒上塞屏幕的傳聞都顯得無(wú)比正常。不過(guò),若是將兩個(gè)信息結合在一起,倒是為我們描繪出一款全新的AirPods,一款配有屏幕、支持攝像的無(wú)線(xiàn)耳機,這是什么?隨身迷你相機?
在一個(gè)小小的AirPods上折騰這么多新東西,蘋(píng)果到底想做什么?
AirPods,蘋(píng)果空間計算的另一塊拼圖
蘋(píng)果想做什么?在回答這個(gè)問(wèn)題之前,我們首先需要了解爆料中提到的紅外攝像頭是什么?簡(jiǎn)單來(lái)說(shuō),傳統的攝像頭主要是通過(guò)傳感器接收可見(jiàn)光,然后轉為圖像信號,而紅外攝像頭則不同,除可接受紅外線(xiàn)的傳感器外,還會(huì )配置可以發(fā)射紅外線(xiàn)的發(fā)射器,通過(guò)主動(dòng)照射并接收反射光的方式來(lái)生成探測范圍的圖像。
相較于傳統攝像頭,紅外攝像頭可以滿(mǎn)足暗光、無(wú)光環(huán)境的圖像監測需求,而且更具隱蔽性,因為紅外發(fā)射器發(fā)射的紅外光在大多數動(dòng)物(包括人類(lèi))的視覺(jué)中都是不可見(jiàn)的,所以也常常被用在戶(hù)外動(dòng)物監測等方面的用途上。
咋看之下,紅外攝像頭的主要用途似乎與AirPods可能使用影像功能的場(chǎng)景都不沾邊,那這玩意的定位到底是什么?實(shí)際上,紅外攝像頭還有一個(gè)用途是傳統攝像頭不具備的,那就是“測距”。
通過(guò)紅外線(xiàn)發(fā)射及接收到反射信號的時(shí)間差,紅外攝像頭可以計算出發(fā)射端與反射物體的直線(xiàn)距離,而在短時(shí)間內多頻次的發(fā)射紅外光,攝像頭就可以通過(guò)算法計算出發(fā)射端相對于物體表面的移動(dòng)角度與速度。
看到這里,或許已經(jīng)有人猜到AirPods搭載攝像頭的原因,并非用來(lái)拍照或是其它雜七雜八的新功能,僅僅是為了進(jìn)一步提升空間音頻的效果。實(shí)際上,如果不考慮生成照片級的圖像信息,那么這個(gè)紅外攝像頭的功率、體積都可以被縮小到能夠接受的程度。
圖源:蘋(píng)果
不過(guò),這意味著(zhù)網(wǎng)友暢想的“你的拍照效果還不如我的耳機”等玩梗場(chǎng)面,大概率是不存在的。本質(zhì)上,這是一個(gè)探測并接收紅外線(xiàn)的傳感器,你甚至很難將其稱(chēng)為攝像頭,最多就是帶有簡(jiǎn)單的圖像信息,幫助芯片判斷設備所處的環(huán)境空間狀態(tài)。
除了對外的紅外監測設備,蘋(píng)果似乎還為AirPods準備了一個(gè)生物監測模組,預計將取代現有的內側紅外傳感器,原有的傳感器主要用于檢測佩戴狀態(tài)等需求,而新的生物監測模組在此功能上還將提供心率、體溫等數據監測服務(wù)。
精準空間定位+生物數據監測,AirPods顯然不僅僅是一副耳機,隨著(zhù)Vision Pro的發(fā)售,蘋(píng)果正在計劃將這款最受歡迎的智能穿戴設備,打造成一個(gè)全新的空間計算輔助設備,補齊空間計算生態(tài)中的音頻一環(huán)。
AirPods提供的精準3D空間音頻,加上Vision Pro近乎以假亂真的空間顯示效果,將會(huì )讓用戶(hù)的虛擬體驗躍升一個(gè)層次。
不得不說(shuō)蘋(píng)果的想法很大膽,想要在一個(gè)無(wú)線(xiàn)耳機里塞入這么多傳感器,同時(shí)保持續航和佩戴舒適度,對工業(yè)設計的能力要求高到嚇人。所以并不奇怪為什么就連爆料中,也僅稱(chēng)這是蘋(píng)果“計劃中”的想法,即使最終在2026年無(wú)法實(shí)現上述目標,我也并不感到驚訝。
實(shí)際上,想要實(shí)時(shí)計算紅外攝像頭傳回的數據,對于目前的無(wú)線(xiàn)耳機來(lái)說(shuō)就已經(jīng)十分困難。我能想到的最優(yōu)方案,是借助手機等無(wú)線(xiàn)連接的設備的算力來(lái)實(shí)現。但是這又會(huì )導致空間音頻信號出現延遲等問(wèn)題,這顯然并不符合蘋(píng)果對新一代“空間音頻”的嚴苛要求。
結合此前的一些報道來(lái)看,蘋(píng)果的計劃是利用人工智能技術(shù),通過(guò)在耳機中部署NPU來(lái)滿(mǎn)足空間數據的計算需求,這確實(shí)是一個(gè)可行方案。在空間計算等方面,NPU對比傳統處理器有著(zhù)顯著(zhù)的優(yōu)勢,通過(guò)深度學(xué)習構建的AI算法,可以更高效的完成空間數據計算,而且功耗也遠低于傳統處理器。
以當前的技術(shù)進(jìn)步速度來(lái)看,想要實(shí)現這個(gè)目標并非遙不可及,其實(shí)更多的取決于相關(guān)硬件的整合成本,什么時(shí)候可以降低到一個(gè)能夠被大家所接受的程度。
另外,我還在思考一個(gè)問(wèn)題,蘋(píng)果會(huì )止步于此嗎?
AI時(shí)代,可穿戴智能設備才是未來(lái)?
當下,個(gè)人智能終端的代表無(wú)疑是智能手機,但是在A(yíng)I時(shí)代,智能終端的形態(tài)顯然將變得更加多樣。借助云端算力與AI大模型,未來(lái)即使只有一副耳機也可以完成許多復雜任務(wù),可穿戴智能設備與智能手機將不再是單純的從屬關(guān)系。
實(shí)際上,蘋(píng)果如今就在推動(dòng)這一進(jìn)程,Vision Pro就是一個(gè)很好的例子,為了讓用戶(hù)可以在戶(hù)外使用,蘋(píng)果甚至不惜額外增加了對外的平面顯示器和一系列的攝像頭及傳感器,來(lái)實(shí)現外部的面部再現與內部的現實(shí)畫(huà)面投射。
但是,Vision Pro等類(lèi)型的空間計算設備,顯然不能作為常規的日??纱┐髦悄茉O備來(lái)看待。某種程度上,這類(lèi)設備更像是筆記本電腦,只有在大家需要沉浸式體驗和完成復雜的視覺(jué)交互任務(wù)時(shí),才會(huì )將其戴到頭上并使用。
Vision Pro設計的離電續航也證明了這一點(diǎn),這并不是一款為長(cháng)時(shí)間隨身攜帶所設計的產(chǎn)品,那么蘋(píng)果顯然需要其他設備來(lái)補齊缺失的一環(huán),會(huì )是什么?其實(shí)答案很明了,Apple Watch+AirPods+AR眼鏡,而且前兩者的職責將會(huì )出現一些重合,使得用戶(hù)可以更自由的選擇設備搭配。
在A(yíng)irPods被曝光將配備紅外攝像模組時(shí),其實(shí)還有一個(gè)信息:蘋(píng)果在2023年啟動(dòng)了一項名為B798的項目,該項目的目標是在A(yíng)irPods上配置一個(gè)較低分辨率的攝像頭,實(shí)現圖像級的數據采集。
相較于只能用于空間定位的紅外攝像模組,進(jìn)階版的攝像模組可以作為AI助手的輔助,讓AirPods里的AI能夠“看到”使用者周?chē)那闆r,并提供基于圖像數據的幫助。
舉個(gè)例子,當你走到一間餐廳門(mén)前,想知道餐廳的口碑與人均價(jià)格,當下的做法是拿起手機,通過(guò)大眾點(diǎn)評等App來(lái)搜索餐廳名字,再確認評價(jià)。而在未來(lái),你只需要通過(guò)語(yǔ)音直接詢(xún)問(wèn)Siri,她就會(huì )通過(guò)AirPods上的攝像頭確認餐廳的名稱(chēng),結合定位等信息搜索餐廳的相關(guān)訊息,然后通過(guò)耳機直接反饋結果。
有意思的是,在蘋(píng)果的計劃中,AirPods并非唯一新增攝像頭模組的可穿戴智能設備。今年3月份曝光的一項專(zhuān)利中,蘋(píng)果已經(jīng)找到了一個(gè)解決方案,讓Apple Watch可以配備屏下攝像頭模組,這個(gè)模組可以實(shí)現拍照、面部追蹤、Face ID等多種功能,將讓Apple Watch成為一個(gè)更加獨立的智能終端。
圖源:蘋(píng)果
結合蘋(píng)果在A(yíng)I等方面的動(dòng)向,其實(shí)不難猜測這個(gè)攝像模組的主要用途,大概率就是Apple Watch的AI視覺(jué)輔助模塊,為Apple Watch提供實(shí)時(shí)的圖像采集能力,使其能夠在一定程度上取代iPhone的用途。
但是Apple Watch的攝像頭在使用過(guò)程中,不管是屏下式還是側邊式,實(shí)際上都面臨一個(gè)問(wèn)題,那就是不夠自然,我想應該不會(huì )有人想一直抬著(zhù)手走路,對吧?這也就催生了AirPods的攝像需求,通過(guò)兩款可穿戴智能設備的互補,來(lái)實(shí)現不同場(chǎng)景下的智能應用。
在一般情況下,用戶(hù)只需要調用AirPods的圖像數據即可完成如導航、資料查詢(xún)等工作,而在需要更高精度的圖像數據時(shí),Apple Watch就可以提供額外的幫助。我甚至懷疑在蘋(píng)果的設想中,未來(lái)某一天是否會(huì )讓iPhone徹底成為一個(gè)歷史名詞,試想一下,如果蘋(píng)果再用AR眼鏡解決圖像顯示需求,iPhone還有存在的必要性嗎?
屆時(shí),或許iPhone會(huì )變成另外一樣東西,比如一個(gè)隨身的本地算力終端,所有的硬件都是為內置的高性能AI芯片服務(wù),這個(gè)終端甚至不需要屏幕。Apple Watch、AirPods和Apple AR Galss(搭配智能指環(huán)),可以提供不同場(chǎng)景下的多種實(shí)時(shí)交互體驗,這遠比在一個(gè)玻璃屏幕上用手指劃來(lái)劃去要輕松、便捷許多。
當然,目前為止,這都只是基于蘋(píng)果的相關(guān)專(zhuān)利與產(chǎn)品布局,所做的一個(gè)瘋狂猜想,事實(shí)上想要實(shí)現這樣的宏偉藍圖,我們恐怕需要在半導體等多個(gè)行業(yè)上都取得巨大的進(jìn)步。
而且,基于空間計算設備的智能生態(tài),如今也依然處于萌芽階段,至少在短時(shí)間內,iPhone等手持智能終端,依然會(huì )是整個(gè)移動(dòng)智能生態(tài)的核心。