“鎮(zhèn)館之寶”支付寶智能助理亮相展區(qū)，現(xiàn)場(chǎng)體驗(yàn)人人可享的AI應(yīng)用

大模型進(jìn)入應(yīng)用時(shí)代，螞蟻集團(tuán)將展出基于百靈大模型研發(fā)的最新AI應(yīng)用，打造人人可享的AI。在這里，您將看到螞蟻大模型全棧技術(shù)布局大圖，以及螞蟻AI在各行各業(yè)的應(yīng)用。主要包括AI生活管家“支付寶智能助理”，以及AI金融管家和AI就醫(yī)助理等，參會(huì)觀眾可沉浸式體驗(yàn)AIGC應(yīng)用。

AI生活管家「支付寶智能助理」

首次展示的「支付寶智能助理」基于螞蟻集團(tuán)自研的百靈大模型進(jìn)行研發(fā)，致力于成為人人可用的AI生活管家。它依托支付寶這一國(guó)內(nèi)最大的服務(wù)型App，用戶在首頁(yè)下拉就能喚起，問(wèn)一問(wèn)就能獲得出行、健康、政務(wù)、金融等領(lǐng)域的超8000項(xiàng)數(shù)字生活服務(wù)，不僅“有腦有嘴能對(duì)話”，更是“有手有腳能辦事”。

同時(shí)，伴隨AI走向產(chǎn)業(yè)共建，支付寶智能助理也將成為專業(yè)智能體生態(tài)的平臺(tái)入口。用戶通過(guò)與智能助理的對(duì)話，就能一鍵連接生活、金融、醫(yī)療等垂直行業(yè)的AI智能體，獲得更專業(yè)豐富的服務(wù)。

互動(dòng)體驗(yàn)1：WAIC大會(huì)智能助理

本屆世界人工智能大會(huì)，支付寶創(chuàng)造性地將AI融入展會(huì)服務(wù)，打造“AI逛展搭子”，為觀眾提供智能觀展的新體驗(yàn)。觀眾抵達(dá)會(huì)場(chǎng)后，在支付寶首頁(yè)下拉，便能喚起智能助理，獲取本屆大會(huì)的核心亮點(diǎn)、場(chǎng)館導(dǎo)覽、論壇議程等資訊，還能快速預(yù)定酒店、呼叫網(wǎng)約車、搜尋附近的餐館及充電寶、定制本地游玩攻略等，AI助理在手，逛展不發(fā)愁。

AI技術(shù)的創(chuàng)新應(yīng)用，不僅提升了公眾的看展體驗(yàn)，更解決了吃、住、行、游、購(gòu)、娛等展會(huì)之外的多元需求。

互動(dòng)體驗(yàn)2：讓AI替你點(diǎn)單，支付寶智能助理與咖啡機(jī)器人“夢(mèng)幻聯(lián)動(dòng)

為了讓支付寶智能助理的服務(wù)能力得到具象化展示，螞蟻展區(qū)搭建了智能助理與咖啡機(jī)器人的“夢(mèng)幻聯(lián)動(dòng)”。在展覽現(xiàn)場(chǎng)你可以在螞蟻咖啡體驗(yàn)店，對(duì)AI助理大屏說(shuō)“幫我點(diǎn)一杯熱美式”，咖啡機(jī)將接受智能助理信息開(kāi)始制作，1分鐘后就能收到通過(guò)智能助理下單、機(jī)器人制作的一杯咖啡，真正實(shí)現(xiàn)“有手有腳能辦事”。

AI點(diǎn)單這一新功能，已在支付寶App開(kāi)啟測(cè)試，首批支持星巴克、瑞幸、喜茶、霸王茶姬、蜜雪冰城等11個(gè)茶飲品牌的支付寶小程序。用戶通過(guò)支付寶智能助理下達(dá)指令，比如“我想點(diǎn)一杯星巴克的中杯冰拿鐵”，AI便會(huì)進(jìn)入小程序自動(dòng)下單，用戶確認(rèn)并付款后，就能到附近的線下門店取到咖啡。

支付寶AI點(diǎn)單的功能，并非簡(jiǎn)單通過(guò)調(diào)用接口來(lái)實(shí)現(xiàn)，而是基于原生多模態(tài)大模型的技術(shù)，讓智能助理具備屏幕感知與仿真執(zhí)行能力，就像讓AI有了“眼睛”和“手腳”，過(guò)去用戶多次點(diǎn)擊才能完成的操作，未來(lái)只需要一句話，AI就能幫你辦好。據(jù)支付寶介紹，這一名為ACT（Transformer for Adctions）的智能服務(wù)技術(shù)，目前仍在測(cè)試中，未來(lái)將持續(xù)調(diào)整優(yōu)化，并在快餐點(diǎn)單、醫(yī)院掛號(hào)、門票預(yù)定等場(chǎng)景中落地應(yīng)用。

AI金融管家

金融管家，可以幫助用戶用一部手機(jī)就獲得高質(zhì)量的行情解讀、持倉(cāng)分析、投教陪伴等個(gè)性化的服務(wù)，降低金融專業(yè)服務(wù)的獲得門檻。目前已經(jīng)服務(wù)了4300萬(wàn)用戶，而且支小寶的服務(wù)水平已經(jīng)趨近于真人行業(yè)專家，未來(lái)將讓每個(gè)投資者都擁有一個(gè)「私人理財(cái)專家」。

AI就醫(yī)助理

AI就醫(yī)助理是利用AI大模型、數(shù)字人等技術(shù)，助力醫(yī)療機(jī)構(gòu)為患者的提供覆蓋就醫(yī)前、中、后的“AI陪伴就診”服務(wù)。此前，螞蟻聯(lián)合浙江衛(wèi)健委推出了全國(guó)首個(gè)AI就醫(yī)助理“安診兒”， 運(yùn)用了亞運(yùn)同款數(shù)字人技術(shù)，讓每個(gè)患者在就診全程都有貼心的數(shù)字陪診員。這一方案也正在全國(guó)醫(yī)院、醫(yī)療機(jī)構(gòu)落地。

此外，螞蟻還展示了研發(fā)助手CodeFuse、遙感大模型及大雁系統(tǒng)、AI創(chuàng)意海報(bào)、AI表情包、AI靈活就業(yè)等不同場(chǎng)景的應(yīng)用，服務(wù)普通人生活的方方面面。

在沉浸式的數(shù)字人中心，游客可和全國(guó)首個(gè)陪診數(shù)字人安診兒、政務(wù)數(shù)字人小贛事、10億人參與的亞運(yùn)數(shù)字人、央視數(shù)字主播等會(huì)面，體驗(yàn)虛實(shí)結(jié)合的數(shù)字生活服務(wù)，觀賞虛擬人小藝帶來(lái)的唱跳表演。

AI鑒真產(chǎn)品首次亮相 共建安全可信的AI

AI鑒真中心

如果說(shuō)AI的A面是應(yīng)用，那么它的B面就是反欺詐和AI安全。用AI打敗AI，也從技術(shù)想象走到了真實(shí)場(chǎng)景里。

在螞蟻集團(tuán)“AI鑒真中心”，將展出包括多模態(tài)AI鑒真、“諜影重重”深度偽造（Deepfake）互動(dòng)，為普通人揭開(kāi)“聲音模擬、AI換臉”的真相，在展區(qū)現(xiàn)場(chǎng)來(lái)一把“人機(jī)對(duì)抗”，進(jìn)一步了解到反深偽技術(shù)的發(fā)展，守護(hù)人們的安全。

互動(dòng)1：AIGC鑒真

該互動(dòng)模擬了蟻天鑒AIGC檢測(cè)和證照深度合成檢測(cè)兩大能力，對(duì)抗聲音模擬、證件偽造等AI濫用風(fēng)險(xiǎn)場(chǎng)景的過(guò)程?！腹舳恕鼓M了常見(jiàn)偽造手法，涵蓋證照、視頻等多樣化素材可供選擇，可對(duì)「防御端」檢測(cè)模型進(jìn)行攻擊。該產(chǎn)品依托生成模型構(gòu)建TB級(jí)樣本，實(shí)時(shí)攻防對(duì)抗，快速精準(zhǔn)鑒別圖像、視頻、音頻、文本內(nèi)容的真?zhèn)尾⑿纬蓹z測(cè)報(bào)告，從而幫助用戶識(shí)別和評(píng)估相關(guān)素材是否被篡改或深度生成，防御AI技術(shù)的潛在濫用。

互動(dòng)方式：現(xiàn)場(chǎng)觀眾在裝置前，可以選擇互動(dòng)裝置上的證照、視頻等多樣化素材，該互動(dòng)會(huì)先對(duì)這些素材做一番偽造模擬生成；上述步驟完成之后，該互動(dòng)能對(duì)上述偽造的素材（如圖像、視頻、音頻、憑證）快速進(jìn)行精準(zhǔn)鑒別，并形成檢測(cè)報(bào)告。

互動(dòng)2：“諜影重重”深度偽造（Deepfake）互動(dòng)——“AI換臉”對(duì)抗

Deepfake，指的是基于深度學(xué)習(xí)算法，從大量的視頻和圖像數(shù)據(jù)中學(xué)習(xí)，偽造出逼真的面部動(dòng)畫(huà)和語(yǔ)音。

Deepfake 不僅增加了公眾識(shí)別視頻真?zhèn)蔚碾y度，也進(jìn)一步滋生了詐騙、色情等違法犯罪活動(dòng)的風(fēng)險(xiǎn)和隱患。 在2024年世界人工智能大會(huì)上，螞蟻集團(tuán)特設(shè)“諜影重重之 Deepfake 互動(dòng)展”，用戶上傳一張照片就可以生成仿真視頻。通過(guò)場(chǎng)景化的體驗(yàn)，讓觀眾了解Deepfake的使用場(chǎng)景和領(lǐng)先的反深偽技術(shù)。

ZOLOZ作為螞蟻數(shù)科的安全科技品牌，搭建了端云一體的技術(shù)體系，會(huì)對(duì)攝像頭狀態(tài)、設(shè)備及網(wǎng)絡(luò)環(huán)境、輸入圖像等進(jìn)行嚴(yán)格審查，確保軟硬件環(huán)境安全無(wú)風(fēng)險(xiǎn)。此外，ZOLOZ會(huì)通過(guò)GAN模型，生成超 30 萬(wàn)測(cè)試樣本并進(jìn)行判別訓(xùn)練，每個(gè)月還會(huì)對(duì)其進(jìn)行超過(guò)20000次的攻防測(cè)評(píng)，模擬上百種偽造攻擊情況，以保持技術(shù)的領(lǐng)先性。

互動(dòng)方式：用戶上傳一張自己的照片，通過(guò)AI換臉合成一張?zhí)摷偃四樢曨l，嘗試使用合成后的視頻去刷臉，該互動(dòng)能夠鑒別出該視頻是否是AI合成，進(jìn)而阻止風(fēng)險(xiǎn)行動(dòng)。

大會(huì)首發(fā)大模型安全產(chǎn)品“蟻天鑒2.0”亮相展區(qū)

本次大會(huì)首發(fā)的國(guó)內(nèi)首個(gè)大模型安全一體化解決方案“蟻天鑒”2.0屆時(shí)將在展區(qū)展示，觀眾能第一時(shí)間參觀了解這項(xiàng)產(chǎn)品的最新能力。

蟻天鑒是業(yè)內(nèi)首個(gè)實(shí)現(xiàn)產(chǎn)業(yè)級(jí)應(yīng)用的大模型安全評(píng)測(cè)與防御一體化解決方案，可保障大模型的生產(chǎn)和使用更加安全、可控、可靠。目前，“蟻天鑒”的檢測(cè)與防御產(chǎn)品已開(kāi)放給20余家外部機(jī)構(gòu)和企業(yè)使用，曾被評(píng)為2023年世界人工智能大會(huì)“鎮(zhèn)館之寶”。隨著AI技術(shù)向大模型和Agent范式發(fā)展，蟻天鑒升級(jí)到2.0版本：

1）在大模型安全評(píng)測(cè)上：打造了大模型安全評(píng)測(cè)“智能體Agent”，并新增大模型X光、大模型基礎(chǔ)設(shè)施檢測(cè)等兩大評(píng)測(cè)能力。蟻天鑒2.0依托“智能體”，針對(duì)大模型的幻覺(jué)、算法和軟件系統(tǒng)安全及AIGC濫用的危害，提供全方位智能化的自動(dòng)化評(píng)測(cè)體系，漸進(jìn)式挖掘大模型潛在的弱點(diǎn)和漏洞。目前，蟻天鑒2.0有超300萬(wàn)高質(zhì)量評(píng)測(cè)題庫(kù)，支持50萬(wàn)/日飽和式誘導(dǎo)攻擊，實(shí)現(xiàn)1工作日內(nèi)完成評(píng)測(cè)，全流程自動(dòng)化率＞99%。

新增的兩項(xiàng)評(píng)測(cè)能力：一是「大模型X-ray」，即大模型X光?？舍槍?duì)大模型的內(nèi)在神經(jīng)元進(jìn)行X光掃描來(lái)做探查和判斷，讓研究人員了解大模型內(nèi)部在發(fā)生什么、定位可能引發(fā)風(fēng)險(xiǎn)的神經(jīng)元、并進(jìn)行編輯修正，在模型內(nèi)部治理幻覺(jué)，實(shí)現(xiàn)從源頭識(shí)別和抑制風(fēng)險(xiǎn)。二是「大模型基礎(chǔ)設(shè)施評(píng)測(cè)」。從攻擊者視角出發(fā)，深入掃描模型算法組件及模型軟件系統(tǒng)，可及時(shí)準(zhǔn)確發(fā)現(xiàn)大模型供應(yīng)鏈及運(yùn)行環(huán)境安全問(wèn)題，保障云到端的應(yīng)用安全可控。

2）面對(duì)新技術(shù)的濫用場(chǎng)景，蟻天鑒還推出了「AI鑒真」解決方案，支持多模態(tài)內(nèi)容真實(shí)性和深度偽造檢測(cè)，可快速精準(zhǔn)鑒別圖像、視頻、音頻、文本內(nèi)容的真?zhèn)?，有效?yīng)對(duì)AI換臉、聲音模擬、證件偽造等各類深度偽造風(fēng)險(xiǎn)場(chǎng)景。圖像識(shí)別準(zhǔn)確率99.9%達(dá)到行業(yè)最高優(yōu)秀級(jí)別（信通院評(píng)測(cè)）。

螞蟻集團(tuán)是國(guó)內(nèi)較早布局大模型安全的廠商。蟻天鑒除了大模型安全評(píng)測(cè)，還提供大模型安全防御方案。在大模型安全防御上，蟻天鑒2.0構(gòu)建了“內(nèi)置＋外掛”雙重防御護(hù)欄，在提問(wèn)環(huán)節(jié)做預(yù)防，對(duì)回答內(nèi)容進(jìn)行風(fēng)險(xiǎn)過(guò)濾，保障其應(yīng)用安全。

大模型研發(fā)前沿技術(shù)

大模型從智能涌現(xiàn)到應(yīng)用涌現(xiàn)實(shí)現(xiàn)人人可得，需要解決專業(yè)、安全、可信等問(wèn)題，并布局關(guān)鍵技術(shù)。本次會(huì)展中，螞蟻展示了應(yīng)對(duì)大模型大規(guī)模應(yīng)用背后的系列關(guān)鍵技術(shù)。

多模態(tài)：讓大模型能看能聽(tīng)也能說(shuō)，像人一樣感知和交互

本次WAIC期間，螞蟻百靈大模型多模態(tài)能力全面提升——它能“看”會(huì)“聽(tīng)”，能“說(shuō)”會(huì)“畫(huà)”，可支持音、視、圖、文等多模態(tài)理解與生成，可以讓大模型更像人一樣感知和互動(dòng)，支撐智能體體驗(yàn)升級(jí)，其能力未來(lái)將應(yīng)用在支付寶智能助理等多個(gè)AI智能體。

百靈大模型多模態(tài)能力，在中文圖文理解MMBench-CN評(píng)測(cè)集上達(dá)到GPT-4o水平，在信通院多模態(tài)安全能力評(píng)測(cè)達(dá)到優(yōu)秀級(jí)（最高），具備支持規(guī)?；瘧?yīng)用的能力，能支持AIGC、圖文對(duì)話、視頻理解、數(shù)字人等一系列下游任務(wù)。

螞蟻集團(tuán)有著豐富的應(yīng)用場(chǎng)景，百靈大模型的多模態(tài)能力，也已被應(yīng)用在支付寶智能助理、搜索推薦、互動(dòng)娛樂(lè)等場(chǎng)景。在生活服務(wù)，螞蟻集團(tuán)利用多模態(tài)能力實(shí)現(xiàn)了ACT技術(shù)，并應(yīng)用在支付寶智能助理上，可輕松調(diào)起各類服務(wù)。在醫(yī)療領(lǐng)域?yàn)橛脩魧?shí)現(xiàn)復(fù)雜任務(wù)的操作，可以對(duì)超過(guò)100多種復(fù)雜的醫(yī)學(xué)檢驗(yàn)檢測(cè)報(bào)告進(jìn)行識(shí)別和解讀，還可以檢測(cè)毛發(fā)健康和脫發(fā)情況，對(duì)治療提供輔助。

智能認(rèn)知決策技術(shù)與平臺(tái)：為大模型裝上可信大腦

螞蟻科技集團(tuán)與浙江大學(xué)的【智能認(rèn)知決策技術(shù)與平臺(tái)】，實(shí)現(xiàn)了對(duì)大模型、圖學(xué)習(xí)、知識(shí)圖譜、運(yùn)籌優(yōu)化技術(shù)的融合和突破，大幅提升了AI的認(rèn)知、推理和決策能力，特別是解決了AI落地嚴(yán)謹(jǐn)產(chǎn)業(yè)中專業(yè)知識(shí)薄弱、復(fù)雜決策能力不足的關(guān)鍵挑戰(zhàn)，為大模型裝上可信大腦！目前已在醫(yī)療、政務(wù)、金融等行業(yè)機(jī)構(gòu)實(shí)現(xiàn)規(guī)?；瘧?yīng)用。該技術(shù)平臺(tái)也已獲得了2024WAIC的SAIL獎(jiǎng)TOP30。

“隱語(yǔ)cloud”大模型密算平臺(tái)：讓大模型更安全地獲取專業(yè)領(lǐng)域數(shù)據(jù)

大模型向下扎根深入行業(yè)，必須要破解高質(zhì)量數(shù)據(jù)供給的挑戰(zhàn)。當(dāng)下，高質(zhì)量數(shù)據(jù)供給和安全流通，成為大模型進(jìn)入垂直產(chǎn)業(yè)應(yīng)用的首要挑戰(zhàn)。其一，行業(yè)大模型要獲得解決專業(yè)問(wèn)題的能力，首先要經(jīng)過(guò)數(shù)量充足、質(zhì)量高的專業(yè)數(shù)據(jù)訓(xùn)練。然而，專業(yè)數(shù)據(jù)往往分散在不同的機(jī)構(gòu)、企業(yè)中，并且由于價(jià)值大、保密要求高，難以流動(dòng)。此外，在企業(yè)、大模型廠商和用戶之間存在信任壁壘，企業(yè)擔(dān)心數(shù)據(jù)對(duì)外泄露，大模型廠商擔(dān)心模型資產(chǎn)安全，用戶擔(dān)心個(gè)人數(shù)據(jù)和隱私風(fēng)險(xiǎn)。

現(xiàn)階段大模型在垂直行業(yè)應(yīng)用時(shí)，許多企業(yè)通過(guò)私有化部署來(lái)應(yīng)對(duì)數(shù)據(jù)安全挑戰(zhàn)，這不僅增加企業(yè)的運(yùn)維和服務(wù)成本，也影響對(duì)外服務(wù)的效率和質(zhì)量。對(duì)行業(yè)的發(fā)展來(lái)說(shuō)，私有化方案不利于多方數(shù)據(jù)跨領(lǐng)域、跨行業(yè)高效融合，無(wú)法進(jìn)一步激發(fā)大模型的能力。

在本次大會(huì)期間，螞蟻集團(tuán)“隱語(yǔ)cloud”大模型密算平臺(tái)將對(duì)外發(fā)布?！半[語(yǔ)Cloud”大模型密算平臺(tái)，通過(guò)軟硬件結(jié)合的可信隱私計(jì)算技術(shù)，在大模型托管和大模型推理等環(huán)節(jié)實(shí)現(xiàn)數(shù)據(jù)密態(tài)流轉(zhuǎn)，保護(hù)模型資產(chǎn)、數(shù)據(jù)安全和用戶隱私。7月5日下午，浙江螞蟻密算科技有限公司CEO王磊將在《隱私計(jì)算：助力大模型與數(shù)據(jù)可信融合發(fā)展》分論壇發(fā)布該產(chǎn)品，并體系化地分享這套服務(wù)的技術(shù)思路，以及產(chǎn)品特點(diǎn)。

此外，圍繞大模型可靠、經(jīng)濟(jì)、易用的三大問(wèn)題，螞蟻展示了在大模型領(lǐng)域研發(fā)重點(diǎn)：包括1）大模型應(yīng)用的可信框架，實(shí)現(xiàn)行業(yè)規(guī)模應(yīng)用；2）如何讓大模型瘦身，在APP上讓大模型跑起來(lái)；3）綠色計(jì)算為大模型降本增效；4）ACT讓大模型觸手可及，提升易用性。

與此同時(shí)，盡管大模型催生了新一輪技術(shù)創(chuàng)新與產(chǎn)業(yè)變革，與之而來(lái)的安全可信問(wèn)題不容忽視。在科技倫理展區(qū)，您將了解螞蟻集團(tuán)科技倫理的建設(shè)工作。螞蟻集團(tuán)從 2015 年就積極投入可信 AI 的技術(shù)研究。圍繞「安全、合規(guī)、可控、可靠」的目標(biāo)，目前螞蟻集團(tuán)建立了大模型綜合安全治理體系，未來(lái)將保持人力資源和算力資源的持續(xù)投入、高強(qiáng)度投入，加強(qiáng)大模型安全治理，目前大模型倫理建設(shè)人員占整體大模型技術(shù)人員的將近 20%，未來(lái)將繼續(xù)保持高水平和高強(qiáng)度的投入。

在展區(qū)數(shù)字技術(shù)出海模塊，您還可近距離了解螞蟻數(shù)科服務(wù)一帶一路的數(shù)字化升級(jí)案例，OceanBase中國(guó)數(shù)據(jù)庫(kù)服務(wù)全球。

xiesc