近日，微軟旗下雷蒙德研究院的首席研究員，聯合南洋理工大學，發佈了可以集成到蘋果Vision Pro類型頭顯中的AI助手——Otter（水獺），該AI模型只需要輸入頭顯攝像頭實時錄製的視頻，即可完成類似於ChatGPT的多模態感知、推理以及上下文學習，在用戶生活中給出一些貼心建議，比如打麻將時候教用戶“科學麻將”，開飛機不會降落時，AI助手可以給予飛行員指示，一步步教用戶操作！
頭顯
上週的WWDC大會上，蘋果公司技驚四座，在GPT大模型時代，蘋果重磅推出了自己的MR頭顯設備——Apple Vision Pro，售價3499美元，可以同時實現AR+VR的混合現實效果！
Apple Vision Pro搭載了4k級的micro OLED背板，保證視頻可以4K渲染，採用雙芯片設計，支持視頻流實時渲染，強大的硬件以及整合能力，蘋果稱Vision Pro開啓了“空間計算”的新時代！
近日，微軟也爲蘋果Vision Pro頭顯領域，注入了新能量，即類似於ChatGPT的頭顯AI助手，有望讓頭顯設備真正結合多模態大模型技術，實現真正的AI頭顯！
Otter
微軟雷蒙德實驗室，以及南洋理工大學的團隊，帶來了最新的AI助手Otter，即“水獺”！ChatGPT多是文字輸入，Otter則是以視頻爲輸入，完成多模態感知、推理和上下文學習！
在極端場景中，比如用戶自己開飛機，但是無法找到降落的方法，Otter通過實時的視頻輸入，接受到用戶的提問，便能給出一步步操作飛機降落的過程！
在日常場景中，比如用戶打麻將，俗話說“科學麻將，死路一條”，Otter水獺可以給出打麻將的最佳選擇，而且還可以記錄其他人的出牌，相當於在現實生活中模擬出了一套雀魂的系統，然後Otter根據數據給出最合理的建議。
頭顯AI助手
相比於ChatGPT，頭顯AI助手帶來的直觀衝擊感更強，微軟再次給全世界帶來一點小小的AI震撼，Otter也可以說是未來全能的AI助手！
Otter支持中文等八種語言，在工作中，首先對頭顯設備的視頻進行處理，結合GPT大模型中的Prompt工程，通過LLM得到指令和回應數據，經過篩選器後，再以ChatGPT翻譯成用戶的母語輸出！
爲了訓練Otter，微軟和南洋理工團隊專門提出了MIMIC-IT的數據集，這是第一個具有 2.8M 指令的多模態上下文指令調整數據集，旨在創建與真實世界的視覺內容保持一致的多樣化視覺語言指令，跨越七個圖像和視頻數據集，涵蓋大量場景！團隊成員明確指出，OtterAI助手未來將直接用於Apple Vision Pro！
機器學習基礎：
AI學術巨佬——何愷明，從遊戲中獲得論文靈感
AI領軍人物——孫劍，重劍無鋒的經典之作
張益唐——黎曼猜想，華人數學家再創重大突破！
B站大學——線代不掛科，MIT傳奇教授的最後一課！
機器學習入門——數學基礎（積分篇）
機器學習入門——數學基礎（代數篇）
機器學習入門——數學基礎（貝葉斯篇）
遊戲&AI系列：
賽博朋克——敏捷開發能挽救CDPR的口碑嗎？
巫師三——AI如何幫助老遊戲畫質重獲新生
AI女裝換臉——FaceAPP應用和原理
AI捏臉技術——你想在遊戲中捏誰的臉？
Epic虛幻引擎——“元人類生成器”遊戲開發（附教程）
腦機接口——特斯拉、米哈遊的“魔幻未來技術”
白話科普——Bitcoin到底是如何誕生的？
永劫無間——肌肉金輪，AI如何幫助玩家捏臉？
GTA6黑客——R星自導自演營銷？無稽之談！
ChatGPT：
聊天機器人——ChatGPT全網爆紅，馬斯克驚歎誇讚！
聊天機器人——ChatGPT小白註冊教程，勿被電商割韭菜！
ChatGPT移動端——使用教程，5分鐘註冊iOS賬號！
ChatGPT王炸官宣——僅需2.7美元，即可輸出100萬詞！
火爆全網——AI生成的漂亮小姐姐，形象逼近真人！
AI動畫重磅上線——15種風格任選，支持圖片視頻輸入！
AI“核彈級”修圖神器——有手就能修圖，PS將被淘汰！
微軟——ChatGPT下週史詩升級！百度也同期發佈“文心一言”！
英偉達重磅：史上最強AI算力芯片，老黃髮佈會終極大招！
英偉達重磅：AI讀取視頻，可直出3D遊戲模型！
ChatGPT免費開源平替——200億參數，前OpenAI團隊打造！
ChatGPT王炸升級——可識別圖片，考試成績超九成人類！
ChatGPT史詩升級——1秒生成網站，看圖玩梗能力堪比真人！
ChatGPT加強版——60秒生成彈球遊戲，零基礎也能開發遊戲！
ChatGPT王炸升級——解除“封印”，接入互聯網！
ChatGPT王炸官宣——正式解除封印，接入互聯網開放插件！
ChatGPT：預計3億人將失業，斯坦福封神開源GPT平替版！
ChatGPT：亞洲IP大面積被封，意大利停止服務！
ChatGPT突發：暫停關閉付費Plus，只因需求量太大！
ChatGPT突發：法國、西班牙或禁止GPT，只因數據安全問題！
ChatGPT突發：iOS版應用上線，衝到總榜第二！
ChatGPT：僅時隔一天，OpenAI重新開放付費訂閱！
ChatGPT手機版：近300萬年薪招募團隊，GPT5傳言被闢謠！
ChatGPT之父：重磅推出世界幣，將成爲AI時代“身份證”！
ChatGPT之父：奧特曼沒有公司股份，因爲熱愛創造了GPT！
ChatGPT之父：奧特曼將重磅開源GPT-3，只因GPU供應不足！
ChatGPT：微軟聯手奧特曼，重磅投資核聚變發電！
微軟神級開源：“傻瓜式”工具，人人可擁有自己的ChatGPT！
遊戲界大變天：斯坦福最新成果，AI角色可模擬真人小鎮！
淘汰ChatGPT：智械危機來了，AutoGPT可自動寫代碼！
人工智能“覺醒”：自主學習，AutoGPT會顛覆ChatGPT嗎？
ChatGPT最強挑戰者：谷歌Claude，免註冊支持中文！
ChatGPT最強競品：谷歌免費升級克勞德，20秒逆天速通百頁論文！
ChatGPT：顯卡每日電費500萬，谷歌大腦合併阿爾法狗母公司
ChatGPT：玩轉《我的世界》，北京大學強化學習攻克複雜任務！
OpenAI重磅突破：用AI學習AI，開創人工智能新道路！
馬斯克重磅：推出“真相GPT”，保證不會毀滅人類！
馬斯克：ChatGPT成功離不開我，特斯拉擎天柱將改變未來！
奧特曼、馬斯克：ChatGPT風險堪比核武器，希望全球監管！
馬斯克：中國航天遠比想象中要先進得多，2030年前實現登月！
馬斯克訪華：擴建上海超級工廠，特斯拉一夜大漲1800億！
人工智能之父、奧特曼嚴肅警告——AI未來將滅絕人類！
蘋果版GPT：將升級推出Siri大模型，禁止員工使用ChatGPT！
蘋果最強頭顯：售價3499美元，人類進入“空間計算”時代！
占卜GPT問世：AI進軍玄學領域，將取代星座大V！
ChatGPT：AI女網紅交1000+男友周入50萬，未來AI會如何發展？
青年文學論壇——GPT-4來臨，翻譯會被AI取代嗎？
百度文心一言：全球大廠首發，可幫助續寫《三體》！
百度文心一言：中國版ChatGPT，短視頻批量生成！
百度文心一言：超8萬家企業排隊合作！
百度文心千帆：比ChatGPT便宜，百萬字僅12元！
百度李彥宏：有錢買不到創新，銳評谷歌也未做出來ChatGPT！
阿里雲ChatGPT：“通義聽悟”大模型，對標百度文心繫列！
國產ChatGPT：支持手機芯片推理，馬雲談用GPT解決實際問題！
華爲版ChatGPT：重磅出爐！盤古大模型將在4月發佈！
華爲重磅自研：盤古NLP大模型，不打算追隨ChatGPT！
華爲&北大：識別ChatGPT造假，AI打假檢測器來了！
中國最強ChatGPT：語言大模型“商量”，演示性能超文心一言！
ChatGPT清明節：上海雲生命公司“復原”逝者，數字生命丫丫！
360自研GPT：周鴻禕長文反駁馬斯克，自稱“拯救派”望彎道超車！
360版ChatGPT：實機演示“翻車”，答錯梅西進球數！
阿里版ChatGPT：發佈“通義千問”大模型，可在支付寶測試體驗！
百度打假蘋果：文心一言慘遭套皮，現已對蘋果發起訴訟！
元宇宙大會：6大國產GPT同日推出，華爲阿里等成立GPT聯盟！
復旦ChatGPT：開源MOSS大模型，3090顯卡即可運行！
搞錢GPT：國產首個帶貨AI，將顛覆全球千億美金市場！
國產GPT：推出AI數字人員工，元宇宙+GPT震撼登場！
論文相關：
畢業季雜談——如何隨時免費使用中國知網？
畢業季雜談——論文降重的“奇技淫巧”
畢業季雜談——大學教材如何獲取
畢業論文——Latex論文排版語言介紹
ChatGPT：畢業論文降重必備，天才數學家盛讚論文功能！
更多遊戲資訊請關註：電玩幫遊戲資訊專區
電玩幫圖文攻略 www.vgover.com
