5月15日凌晨，谷歌召開“ I/O 2024”，生成式AI成為本次大會的重點并發布了一系列產品和多款大模型。

其中，谷歌DeepMind發布了一款全新的AI 代理（Agent）產品Project Astra，可以像昨天OpenAI發布的GPT4o一樣，實現跨文本、音頻、視頻多模態實時推理。

例如，通過手機或谷歌眼鏡讓Astra解答數學題，解讀周圍環境等，這對于盲人、翻譯、學習、導游、日常辦公等領域幫助非常大。

Project Astra功能展示

和GPT4o一樣，Astra的多模態理解能力使其玩法非常多，這里「AIGC開放社區」就選一些有代表性的案例為大家展示。

例如，通過手機的攝像頭讓Astra對所有聽到、看到的東西進行解讀。可以點擊揚聲器、畫筆、代碼讓其解釋用途和含義。

此外，Astra還可以與谷歌眼鏡一起配合使用，這也就是說盲人戴上它在走路、看東西時獲得實時解讀功能。

不過Astra的語音情感輸出能力和數據響應效率，似乎比GPT4o差了一些。

 

也可以讓Astra對一些草圖、物品進行深度解讀和聯想。

Astra對提升搜索體驗幫助也非常大，例如，通過視頻讓Astra解釋，為什么留聲機的指針沒有放在轉盤上，Astra會直接跳轉搜索頁面給出詳細的解決方案。

甚至當你接到詐騙電話時，Astra都可以及時提醒你。所以，Astra更像是一位萬能小管家可以做很多事情。
 
AI代理可以為我們做什么

其實，AI代理并非現階段才出現的，深度游戲玩家應該知道20多年前一款外掛神器——按鍵精靈。

這便是最早的AI代理雛形，它可以通過用戶輸入的指令來執行特定操作，例如，讓游戲人物只在特定場景打怪。不過使用方法比較繁瑣，需要一些編程基礎。

隨后按鍵精靈演變成RPA（機器人流程自動化）從游戲場景擴展至辦公領域，并在OCR、NLP、ML等多種AI加持下實現自動化完成，在金融、日常辦公、數據搬運等應用非常廣泛。

而Astra、Project Astra在大模型加持下的AI代理屬于第三代，在使用方式、能力方面獲得巨大提升，為我們做的事情也更多。

健康管理與醫療咨詢：AI健康代理助手可以通過分析用戶輸入的癥狀、健康記錄和生活習慣，提供個性化的健康建議和早期疾病預警。

例如，一位患有糖尿病的人可以使用AI健康助手跟蹤血糖水平，獲得飲食和運動建議，甚至在血糖水平異常時獲得提醒和建議尋求醫療幫助。

客戶服務自動化：AI代理可以集成在客服系統中，提供7*24小時無間斷服務。能夠理解和回應用戶查詢，提供賬戶信息、解決常見問題、處理交易等。

個性化學習輔導：AI學習代理可以根據學生的學習進度、興趣和難點定制個性化學習計劃。

通過分析學生的互動，識別其強項和弱點，然后調整教學內容和難度，以適應學生的學習速度，從而提高學習效率和成效。

目前，谷歌并沒有公布Project Astra具體的發布時間，仍處于開發階段。估計很快會登錄到Android、iOS等平臺中使用。

可以預見，由OpenAI、谷歌掀起的全能AI代理將成為生成式AI領域一個新的熱門賽道。

同時為之前的智能RPA、AutoGPT等起到推波助瀾的作用擴大認知和市場范圍，極大培養了用戶的習慣一個全民AI代理時代已經來臨。

本文素材來源谷歌官網，如有侵權請聯系刪除

END

繼續閱讀：

未經允許不得轉載：RPA中國 | RPA全球生態 | 數字化勞動力 | RPA新聞 | 推動中國RPA生態發展 | 流 > 對標GPT4o！谷歌發布Project Astra，全民AI代理時代來啦