DeepSeek上臉實測:AR眼鏡實時翻譯老黃GTC演講,完了還幫我劃重點
DeepSeek、通義千問等大模型 + AR眼鏡,打開GTC老黃演講的姿勢,可以是這樣:
圖片
翻譯的字幕就在眼前,根據演講實時更新。
還能一鍵總結摘要:
實測為演講部分內容,并非全文
只憑一副看上去平平無奇的眼鏡,就能隨身帶一個翻譯官+助手。
圖片
摘下眼鏡,立刻回歸現實。
同時也可以是一個隨身攜帶,隨時可直接喚醒的AI助手。
提問一句,什么是相對論?專業回答立刻浮現眼前。
圖片
而且根據問題的難易,后臺會自動選擇不同大模型進行回答。
圖片
如上體驗來自星紀魅族StarV Air2眼鏡,它是一款具有多種AI能力的AR眼鏡。
最近DeepSeek+萬物,AR眼鏡是其一,也是最令人好奇的一種結合。
AI+AR到底有哪些新體驗?來看我們的實測。
讓AI能力浮現眼前
首先來看下StarV Air2的基本信息。
它自重44g,和普通板材眼鏡重量的差別非常小。輕度使用下,續航可滿足日常8小時佩戴,重度使用翻譯等功能時可使用2-3小時。
顯示方面采用更輕量化的光波導方案。鏡片分辨率為640×480,入眼峰值亮度2000nits,光引擎為Micro LED單綠光引擎,FOV對角線30度。
圖片
運行內存為RAM 32M+ROM 20M,機身內存為64M NAND Flash。
支持近視配鏡,1800度以下近視、200度以下散光都可以。
StarV Air2搭載Flyme XR 2.0系統,支持調用自研Flyme AI大模型以及通義千問、字節豆包、百度文心一言等三方大模型,并第一時間接入DeepSeek。
主要可實現的功能有6方面:
- 翻譯官
- 會議助手
- 備忘錄
- 提詞器
- AR導航
- 語音轉寫
據介紹,StarV Air2支持13種語言的實時對話翻譯,包括英語、日語、俄語、法語等,安靜環境下的準確率高達99%。
會議助手支持自動錄音并轉寫會議內容,生成會議紀要總結。這些需要在手機端操作,語音助手“小溪”會自動提供中英文摘要和待辦事項。
屬于把錄音筆、AI辦公軟件二合一了。
圖片
將實時路況投射在眼鏡上,顯示剩余里程和方向切換,支持騎行、步行和駕車三種模式。
圖片
此外它還支持接聽電話以及一些三方App功能。
比如支持了QQ音樂。然后就能通過語音控制音樂播放/暫停、切換。音樂通過眼鏡的音響播放,音量適中情況下,距離眼鏡20公分外聽不到任何漏音。
圖片
整體體驗下來,這副眼鏡在佩戴舒適度上已經表現很好,長時間使用也沒有發燙。
交互主要通過語音、眼鏡物理按鍵以及手機App端操作。眼鏡上的按鍵只有2個,主鍵可以顯示屏幕、長按喚醒語音助手,滑輪支持翻譯以及會議記錄等上下查看、不同按鍵切換(類似于方向鍵),按下滑輪鍵為確認。
圖片
另外眼鏡還支持和StarV Ring2智能指環一起使用,指環可以隨身佩戴監控一系列健康數據。
圖片
快速接入DeepSeek-V3,本地不跑大模型
綜上來看,AI+AR正處在一個早期積極探索的時期,包括星紀魅族在內,廠商們通過實際產品給出了一些初步探索答案。
在這之中,共識和差異并存,構成了當下“百鏡大戰”的局面。
首先,在產品路線上,已經表現出很大差異。
一部分廠商推出了AI眼鏡,它們不帶顯示功能,通過攝像頭和語音進行多模態交互問答;另一部分廠商則推出了更加AI化的AR眼鏡,依舊具備顯示能力,但同時也增加了AI功能。
圖片
但二者又表現出一些共性,比如在外觀形態上都在極力向普通眼鏡靠攏。重量更輕、設計更時尚、續航也更持久,力爭能替代普通眼鏡。
這需要廠商們在保障眼鏡基本能力的同時,還進一步降低自重和功耗,提升佩戴體驗、延長用戶佩戴時間。
以星紀魅族StarV Air2為例,盡管它強調了自身的AI屬性,但是端側并沒有放任何生成式AI大模型。這樣做是為了降低功耗、延長眼鏡續航。
據星紀魅族XR業務線總經理郭鵬介紹,StarV Air2可以保障用戶8小時佩戴,一天一次的充電頻率才是能被大家所接受的。
顯示方面,StarV Air2首發搭載0.15cc單綠光機,這款光機只有一粒綠豆的大小,它可以投射高達百萬尼特的亮度,更是AR眼鏡輕量化的關鍵突破。更小的光機采用使得顯示區域的結構設計進行了更多優化,整個眼鏡的線條更加流暢,造型更美觀,更偏日常化。
圖片
其次,一副更AI化的AR眼鏡,先做哪些能力?后做哪些能力?不同廠商也有不同的思考維度。
圖片
星紀魅族選擇先做了顯示能力。
郭鵬解釋,從終局來看一定會all in one,也就是給AR眼鏡配上攝像頭。
相對而言,顯示能力伴隨AR產品體驗的始終,更直接影響用戶體驗。在這方面,星紀魅族還與鯤游光電在光波導鏡片上進行一系列創新,將彩虹紋壓制到同產品最優水平,可以保證標準全角度環境光下,用戶視野上下左右各20度以內零彩虹紋。
(彩虹紋現象就像是在眼鏡鏡片上看到了“彩虹”一樣。它是一種光學干擾現象,通常在一些特殊的光學設備比如AR眼鏡中出現。)
在擁抱AI方面,DeepSeek熱潮下,星紀魅族也是第一批接入的AR眼鏡玩家。具體模型型號上選擇了DeepSeek-V3,可保證眼鏡能快速處理問答。后續如果用戶有在眼鏡端使用推理能力的需求,再納入R1等模型。
至于AR眼鏡的攝像能力,郭鵬透露星紀魅族也正在積極布局了:
今年星紀魅族也會做拍攝類的眼鏡產品,而且有自身的天生優勢。
郭鵬表示,從技術角度來看,給AR眼鏡增加攝像頭的光學、算法的技術要求都和手機非常重合。星紀魅族手機在該領域的長期積累,為此提供了很好支撐。
實際上,AR眼鏡的拍攝能力很有必要。一方面它比手機拍攝更方便,另一方面它能提供人眼第一視角的畫面,本身也是獨特優勢。
從AI角度看,AR眼鏡的多模態交互也一定會納入視覺能力。
未來可能有視頻、手勢、環境感知等形式交互,這都依賴于攝像頭的采集功能。
最后,在各家發展路線都不盡相同的局面下,什么會決定AR眼鏡的終局?
在星紀魅族看來,生態決定終局。
郭鵬認為,行業已經在朝著更深度的生態整合邁進。AR眼鏡突破單一硬件產品的趨勢明顯,嵌入更廣闊的智能設備網絡,與手機、智能穿戴設備甚至智能汽車的聯動能力,正在不斷突破大家對 AR 眼鏡的想象。
據了解,星紀魅族是AR行業里唯一一家具備全生態布局的企業,覆蓋手機、汽車、智能家居、可穿戴硬件等。
未來,AR眼鏡可以和汽車互聯,替代一部分汽車駕駛中的車載娛樂行為;可以和穿戴設備整合,把健康數據接通到眼鏡上。
結合AI智能助手的趨勢,在同一套生態里,AI助手能在不同設備之間流轉,能在不同場景、不同設備上提供服務,最終變成像“賈維斯”一樣的超級助手。
而在AR發展早期,建立好強大生態的團建是團結開發者和行業的力量。星紀魅族即將推出StarV 智能眼鏡能力的開放平臺-滿天星 1.0,能夠讓開發者和行業合作伙伴快速在平臺上構建各種應用,豐富生態。
艾瑞咨詢發布的《2024年消費級AR眼鏡市場動態與行業趨勢洞察》報告也進一步佐證了這一觀點。
短期內,硬件參數+爆款產品決定市場份額;長期來看,具備跨設備協同能力、開發者規模、數據資產厚度將成為品牌分水嶺。
圖片
One More Thing
不過對于咱們普通消費者而言,最關心的肯定還是價格(doge)。
目前市面上的AI+AR眼鏡價位普遍在2000-3000之間,AI拍攝眼鏡的價格則打到了2000元以下。
那么,更便宜和更多功能之間,哪個會更令你心動?
對于智能眼鏡這類新型終端,你還有哪些期待?說出你的想法,可能就會被廠商們看到哦~