12月30日,支付寶推出新一代AI視覺搜索產品“探一下”,基於自研的多模態大模型技術,可“用AI之眼探索萬物”,提供更快速、有用、趣味的生成式搜索服務。

用戶遇到感興趣的事物,就能讓AI通過攝像頭,識別花草寵物和潮玩、做旅遊的隨身講解、查詢商品藥品詳情等,還能趣味解讀萌寵照、寶寶照等,曬圖不愁配文案。目前該產品已上線支付寶,在首頁點擊“掃一掃”後左劃即可找到它,在支小寶App也能快速訪問。

2024年以來,支付寶接連發布“支小寶”等AI獨立應用及智能體開發平臺,此次聚焦AI視覺多模態賽道推出“探一下”,標誌着以支付寶爲核心的螞蟻AI戰略正持續提速。

11.png

讓 AI 有眼睛,探索身邊世界

近年來,生成式人工智能飛速發展,多模態技術正讓視覺成爲數字服務的新入口。據介紹,支付寶推出“探一下”,正是希望讓AI成爲普通人的“好奇心之眼”,幫助其探索身邊萬物,實現AI識圖即可搜索、可創作、可互動。

不同於傳統的AI視覺搜索產品,“探一下”可通過AI識圖更快速地輸出有用信息,還能基於對用戶興趣和場景的深度理解,提供更趣味的視覺解讀及更多元的智能服務。

經過體驗發現,“探一下”目前提供三種核心服務:探知識、探靈感、探文本。

當遇到不知道怎麼用語言描述的事物,可通過“探知識”實現AI隨手識圖,隨時收穫新知。

比如愛戶外愛旅行的人羣,見到不認識的花草、昆蟲、美食、建築、展覽物品等,就能省心獲取相關信息,輕鬆擁有一個“智能導遊”。

年輕人遇到喜歡的手辦潮玩,通過它可查閱種草攻略;爸爸媽媽也能用它辨別68種奧特曼,再也不用擔心被孩子問懵了。

22.png

網友用“探一下”識別奧特曼

遇到讀不懂的外文商品,探一下就能獲取詳情,更方便線上買同款;家裏丟了說明書的藥盒,不僅可查到詳細介紹,還能調用支付寶旗下“AI健康管家”追問更多的用藥須知。

33.png

基於生成式AI的特點,“探靈感”則能根據場景觸發智能視覺濾鏡,實現AI趣味解讀,曬圖不愁配文案。

比如家裏養寵物的“鏟屎官”,可給萌寵拍照並定製“讀心物語”,讓毛孩子開口說話更暖心;熱衷在朋友圈曬娃的爸爸媽媽,也不妨讓AI幫着解讀自己對孩子的小愛意。

44.png

此外,在國外旅行或學外語時,遇到看不懂的外文菜單、招牌等,也可以通過“探文本”便捷識別原文並翻譯。

煥新AI視覺搜索,支付寶 AI 持續提速

過去,搜索主要通過關鍵詞匹配來返回相關結果。作爲新一代的生成式AI視覺搜索產品,“探一下”所提供的並非簡單的搜索鏈接,而是基於多模態大模型的視覺理解與創作能力,提供更智能、更豐富、更具交互性的服務體驗。

相關數據顯示,人類獲取的信息超過80%來自視覺,以視覺爲中心的人工智能產品,可極大降低人與AI交互的門檻,並解鎖更多的AI應用場景,實現“所見即搜索,所見即服務”。在國外,谷歌推出的Google Lens,每月有超過200億次的視覺搜索調用量;蘋果也在今年推出名爲“視覺智能”的新功能,通過手機攝像頭幫用戶“即時瞭解所見的一切”。

作爲承載數億用戶的數字生活開放平臺,此次支付寶推出 AI 視覺搜索產品“探一下”,並將其內置在“掃一掃”的核心入口內,正是希望通過持續煥新產品,讓 AI 像掃碼支付一樣便利每個人的生活——不止有大腦能對話、有手腳能辦事,更有眼睛能探索身邊世界。

支付寶 AI 產品密集落地的背後,是螞蟻集團AI First戰略的全面提速。2023年11月,螞蟻推出自研的百靈大模型,今年9月以來,又陸續上新支小寶、螞小財、AI 健康管家三大AI應用及智能體開發平臺“百寶箱”,加速構建開放的 AI 服務生態。