「日日新」進化到5.5，商湯AI產(chǎn)品會有哪些具體升級?
生成式AI創(chuàng)新應用自不必說，商湯傳統(tǒng)視覺AI中的核心產(chǎn)品也正發(fā)生變化。
WAIC 2024期間，基于 “日日新5.5”大模型體系能力，商湯“方舟城市開放平臺”進行全新產(chǎn)品架構升級，推出首個“大模型+城市服務”的解決方案及應用實踐「SenseFoundry-VL 方舟多模態(tài)新智平臺」，助力智慧城市服務場景進一步提智提效。
智慧城市走向多模態(tài)大模型賦能管理
「方舟多模態(tài)新智平臺」著力解決傳統(tǒng)視覺業(yè)務所面臨的交互方式單一化、泛化場景看不懂、復雜場景誤報高、大模型應用難上手等問題。在傳統(tǒng)智慧城市解決方案基礎上主要進行三方面升級：
● “需求即指令”。通過Agent技術，「方舟多模態(tài)新智平臺」構建了可理解并處理多種業(yè)務的AI智能體，實現(xiàn)了需求描述向具象指令的高效轉化。這種方式更接近于人類交互，用戶可直接自然語言提問輸入查詢，大模型會理解用戶意圖并給出相應的答案。
例如，在交通運輸場景，交通部門或物流企業(yè)可通過構建物流運力分析智能體，提取車輛位置、車流狀況、天氣等相應信息提取派單信息，最終制定更科學合理的物流車輛運輸時空圖譜。
● “對話即檢索”。依托大模型視圖語義理解能力，可實現(xiàn)圖文資源的智能語義化檢索和對話式研判。讓用戶獲得“所說即所得”、“所問即所應”的體驗。
例如，在劇烈臺風后，城市管理者可通過對話即刻檢索出樹木倒伏、電線桿傾倒等各類危害交通安全的場景，從而進行快速響應處理。
● “提示即提優(yōu)”。依托大模型良好的泛化能力，無需海量定制研發(fā)投入，只需少量正負樣例數(shù)據(jù)和提示詞調(diào)整，即可一鍵生成通用模型和特定模型，部分復雜城市事件的識別準確率高達90%以上，真正實現(xiàn)模型生產(chǎn)和調(diào)優(yōu)的使用易、落地快、成本低。
作為一款“聽得懂、會交流、擅優(yōu)化”的多模態(tài)大模型平臺，「方舟多模態(tài)新智平臺」未來有望持續(xù)推動智慧城市+大模型的迭代升級，聚焦多模態(tài)、高效化、個性化、可解釋性和數(shù)據(jù)驅動決策等方向，并拓展至智能交通、公共服務智能化、應急響應、城市服務與決策支持、區(qū)域協(xié)同發(fā)展等應用場景。
已落地一線，實現(xiàn)城市服務十倍提效
目前，「方舟多模態(tài)新智平臺」已在城市服務場景中實際落地。
以城市便民服務為例，該平臺可實現(xiàn)便民窗口服務的智能化分類分撥、智能視頻設備調(diào)取、智能處置建議、智能系統(tǒng)信息查詢等能力。
在某一線城市12345公共服務便民熱線場景中，「方舟多模態(tài)新智平臺」助力12345工單的分類分撥速度提升至原先的10倍以上，并統(tǒng)一了分類標準。在短短一個月內(nèi)，完成超過30萬次的分撥訴求，平均每天處理一萬余次。
借助「方舟多模態(tài)新智平臺」，單個分撥員原本一個月的工作量現(xiàn)在僅需一天即可完成，經(jīng)二次復核，準確率高達90%以上。
這樣的智能化分撥應用不僅切實有效，更極大減輕了政務工作壓力，顯著提升工作效率。
此外，「方舟多模態(tài)新智平臺」支持自然語言調(diào)取10萬路以上前端點位，實現(xiàn)分鐘級精準檢索;升級后的模型架構支持通過簡單提示詞，即刻創(chuàng)建全新場景分析功能，實現(xiàn)1天內(nèi)快速部署上線，3天內(nèi)手動快速調(diào)優(yōu)，部分場景通過二次分析后準確率達90%以上。真正讓大模型迅速落地在各類應用場景中，實現(xiàn)所想即所得。
差異化優(yōu)勢明顯，智慧城市行業(yè)新標桿
與常見行業(yè)方案相比，商湯「方舟多模態(tài)新智平臺」差異化優(yōu)勢明顯，主要體現(xiàn)在三方面：平臺技術布局、硬件選型、業(yè)務應用。
首先，是融合架構的技術布局。視覺領域深厚算法積累+「日日新」領先大模型能力，為「方舟多模態(tài)新智平臺」的全面架構升級奠定扎實基礎。
「方舟多模態(tài)新智平臺」采用的視覺-語言多模態(tài)大模型，集圖文對比、文本理解生成及交錯圖文理解三大能力為一體，在國際權威機構的國產(chǎn)化大模型評測中，位列第一梯隊;同時視覺模型+大模型融合架構，AI智能體等引入，為城市AI應用創(chuàng)新提供全方位的技術支撐。
其二，是國產(chǎn)適配的硬件選型。「方舟多模態(tài)新智平臺」充分研討了國產(chǎn)自主可控的方針政策。目前充分適配了主流的國產(chǎn)芯片和硬件服務器，為大模型國產(chǎn)化落地提供全面的算力保障。
第三，靈活可配的業(yè)務應用。城市場景有復雜性高、碎片化強等特點，「方舟多模態(tài)新智平臺」能根據(jù)智慧城市的具體需求，進行高度定制化開發(fā)。此外，其創(chuàng)新性配套圖文可視化的提示工程設計，也很好地兼顧了方案落地的泛化性及系統(tǒng)應用的低門檻，有效保障AI大模型的落地效果。
伴隨全球數(shù)字化轉型加速，“智慧城市”與“大模型”結合被視為未來城市發(fā)展的關鍵。「方舟多模態(tài)新智平臺」是商湯在助力城市服務智能化發(fā)展中取得的突破性進展，必將作為新質生產(chǎn)力，開啟城市智能化發(fā)展新篇章。
（來源：商湯科技）
