給淘寶打視頻電話，AI陪你邊逛邊買！淘天連發四項購物黑科技

智東西
作者 李水青
編輯 心緣

智東西7月21日報道，昨日，在阿里巴巴硬核少年技術節5.0開幕式上，淘天集團公布了AIGX技術體系（新一代生成式AI技術體系）的四項最新技術成果：拍立淘全模態實時Agent、全場景AI創作工作臺If Studio、Coupella智惠引擎，以及Agentic推薦系統Dream。

阿里巴巴ATH技術副總裁、淘天集團首席科學家鄭波稱：“今天發布的AIGX技術體系四項最新技術，從全模態感知到內容生產，從因果推斷到意圖理解，標志著AI從工具真正進化為伙伴。”

這場技術節橫跨淘天集團、ATH事業群等多部門，是阿里年度最大技術節日，由鄭波最早在2022年發起。本屆技術節持續一周，涵蓋技術展示、學術交流、AIHackathon競賽等多種形式，從內部視角展現了AI Agent對這家科技巨頭深入骨髓的影響。

一、消費者有了購物搭子，商家有了算賬引擎，淘天四項AI新品詳解

淘天本次發布的四項成果主要聚焦電商業務，橫跨AIGI（感知交互）、AIGC（內容生成）、AIGU（因果理解）和AIGR（推薦推理）四大方向，每一個環節都與用戶的網購體驗息息相關。

1、拍立淘：給淘寶打視頻電話，收獲購物搭子

本次發布中最具用戶感知度的成果，是拍立淘全模態實時Agent的正式上線。

它的核心變化可以一句話概括：拍立淘從此前的“拍照搜同款”搜索工具，升級為一個能陪你逛、幫你選、替你省的全能購物搭子。團隊將其定位為“AI時代的萬能淘寶相機”。

用戶打開淘寶攝像頭，就能與AI進行實時視頻交互。系統同時處理圖片、文字、語音、視頻流等多模態輸入，在用戶瀏覽畫面的同時完成意圖理解與商品檢索。

拍立淘團隊負責人在分享中展示的幾個場景頗能說明問題。

海外購物場景中，用戶面對貨架上琳瑯滿目的外文商品，只需打開攝像頭掃過去，AI就能實時識別商品信息、評價適用人群、給出購買建議，并直接檢索淘寶同款。這位透露，團隊在線上灰度期間觀察到，大量海淘用戶尤其偏愛這一功能，“一張一張拍過去、一張一張問，對用戶來說成本太高了。通過全模態實時Agent，用戶拿著手機從貨架一溜掃過去就行了。”

日常購物場景中，用戶拿起一瓶防曬產品，Agent會主動判斷紫外線強度并提醒防曬，隨后根據用戶提問分析膚質適配性，甚至在用戶問到“需要卸妝嗎”時，它也能給出成分層面的專業建議。

此外，許多用戶在旅游場景中也打開了這個購物搭子。有人用它省導游費，實時詢問埃菲爾鐵塔的高度和歷史。

背后的技術鏈路分為四層：感知層基于全模態理解模型，支持流式傳輸和全雙工實時打斷；決策層由導購Agent進行實時React規劃和智能篩選匹配；渲染層負責流式卡片輸出和語音播報；記憶層則通過多輪追問復用和上下文約束，確保交互實時流暢。

2、If Studio：一個人也能擁有一整支創作團隊

如果說拍立淘解決的是消費者側的體驗升級，If Studio則面向內容生產側，試圖重新定義創作的門檻。

這一平臺由阿里媽媽團隊基于運營十余年的素材平臺iconfont孵化，內置設計專家、視頻專家、建站專家三類Agent，以多智能體協同的方式覆蓋從素材處理到內容生成的完整鏈路。用戶無需具備專業技能，即可驅動復雜創作流程。

If Studio視頻專家以“導演思維”為核心，將視頻創作過程分解為可編輯、可迭代、可協作的畫面單元。在結構化創作面板上，AI生成的素材可無縫拼接，轉場處理和音畫對齊均可精細調控。

平臺還內置了HappyHorse1.1視頻模型及AI摳圖、圖像編輯等工具。一個值得關注的設計理念是“漸進增強”：Agent生成的skill可以在不同智能體運行環境中跨端復用，交互工作臺與能力系統深度解耦，讓創作工作臺本身也成為一個孵化新skill的IDE。

If Studio相關負責人在分享中提到：“未來每個用戶手上都會有一個核心智能中樞。一個電商商家可能在一個平臺里同時管理淘天、抖音、拼多多的銷售。”

基于這一判斷，If Studio的能力系統被設計為可嵌入各類Agent運行時的開放體系，既服務阿里內部業務，也通過阿里云對外提供企業級服務。

3、Coupella：AI算出補貼“真增量”，讓商家營銷投入有因可循

在商家經營側，Coupella智惠引擎瞄準的是一個長期存在的痛點：補貼到底值不值？

傳統的營銷發券模式依賴商家和運營的歷史經驗，看單點、看當下，難以區分“真增長”和“把明天的成交挪到今天”的虛假繁榮。Coupella背后的核心技術是生成式因果推斷大模型，采用Decoder-only Transformer架構，將用戶的全域狀態做序列化建模，進行跨空間、跨時間的歸因計算，并引入了三層增量擠占建模，系統刻畫時間擠占、跨店鋪擠占和跨權益擠占效應。

同時，Coupella還引入了策略Agent和自我進化Agent。策略Agent通過高維表征、沙箱模擬評估不同發券策略，將優選策略經流量路由投入線上；自我進化Agent則收集真實數據反饋，借助大模型的世界知識和推理能力動態生成新策略，形成持續優化的閉環。

據悉，自去年雙11規模化上線以來，Coupella已覆蓋數十萬商家，AI紅包轉化率提升81%，頭部品牌AI引導成交超8000萬元。

團隊還分享了一個案例：在近期世界杯周期中，一個運動戶外大商家從首日日均70多萬成交迅速攀升至日均180多萬，首周總成交突破800萬，其中50%以上是新客用戶。一些中小體育用品店也從個位數客戶量突破至千級規模。

4、Dream：千時千面，讓淘寶讀懂用戶此刻想買什么

第四個成果DREAM Agentic推薦系統，嘗試解決的是推薦領域的重要問題：傳統推薦系統的各個環節各自優化局部目標，缺乏全局統一的用戶意圖理解。

Dream在推薦鏈路之上構建了一個圍繞用戶意圖的優化控制層。其核心包含兩個模塊：意圖引擎和MetaModel。

其中，意圖引擎基于用戶在淘寶上的20多個微觀行為埋點，結合天氣、熱點等外部信息，借助推理大模型和COT能力，輸出結構化的用戶意圖，涵蓋興趣標簽、購物階段、價值偏好等多個層次。

MetaModel則作為決策大腦，將推薦系統的召回、排序、打散等環節作為可調用的工具，根據意圖引擎的輸出進行編排，實現”千人千時千面”的個性化推薦。

推薦算法團隊的負責人用一個場景解釋了這一機制：系統識別到用戶是體育愛好者，同時發現用戶正在湊單，又捕捉到世界杯熱點，三者疊加后，精準推薦了世界杯官方足球。“推薦系統從千人千面走向千人千時千面，核心是從揣測偏好走向真正理解人。”

目前，僅在手淘首猜場景中，Dream系統已帶動瀏覽量、成交金額等指標累計提升約7個百分點。

二、450人參賽、5000場對戰、30項技術展出，硬核少年技術節五年進階

硬核少年技術節已連續舉辦五屆。從首屆“機甲少年”主題展示，到第二屆引入AI Hackathon競賽，第三屆推出“AI誰是臥底”模型挑戰，第四屆首次發布AIGX技術體系，再到本屆多項成果集中亮相，該活動已成為阿里巴巴ATH事業群和淘天集團技術文化的年度載體。

本屆博見社首次升級為學術場與工業場雙場對話。杭州場主題為“從生成式AI到智能體進化”，聯合CCF人工智能與模式識別專業委員會舉辦，邀請清華大學、南京大學、上海交通大學、天津大學、山東大學、上海人工智能實驗室等機構學者進行主題報告和圓桌交流。北京場主題為“AI下一站：從生成內容到構建世界”，虎鯨文娛、群核科技、美圖公司等技術負責人分享產業實踐。

技術市集集中展出AIGX技術體系下30余項技術成果。Whoisspy趣味賽將Agent嵌入經典交易類桌游場景，構建人機對戰競技平臺。AI Hackathon比賽首次設置業務創新與靈感腦洞雙賽道，吸引淘天內外450名選手提交115個作品，并為好項目提供孵化支持。

大廠操盤手比賽今年引入多模態需求，選手的Agent需扮演經營者，在四個季度中通過工位抽取、談判交易和股份議價獲取最大收益。目前已有167個Agent參賽，后臺完成5000多場比賽。該平臺還成為北大信息學院通識AI教育課的實踐平臺。

結語：從電商巨頭內部技術切磋，看到大模型加速重構電商行業

大模型技術正在加速重構電商行業。從拍立淘全模態實時Agent重塑購物決策鏈路，到if Studio降低內容創作門檻。從Coupella讓營銷投入有因可循，到Dream讓推薦系統真正理解人的意圖。

AI正從工具進化為用戶的伙伴和商家的增長引擎。為期一周的技術節不僅是一次技術實力的集中展示，更揭示了AI與電商深度融合的產業方向。