多模態(tài)、AIGC、對(duì)齊、涌現(xiàn)、大模型訓(xùn)練、聯(lián)邦大模型……2023WAIC上一起聊聊
自 ChatGPT 發(fā)布以來,短短半年時(shí)間,我們已經(jīng)見證了大語言模型帶來的方方面面的震撼,搜索、創(chuàng)意創(chuàng)作、代碼生成脫胎換骨。國內(nèi)外有實(shí)力的大廠、初創(chuàng)公司爭先下場布局,力求在這場角逐中奪得先機(jī)。
隨之而來,大模型自身的能力也不斷突破,不再局限于單模態(tài)文本任務(wù),文本生成圖像、視頻、音樂等相關(guān)的研究和應(yīng)用也開始出現(xiàn),多模態(tài)、跨模態(tài)任務(wù)正在得到很好地解決。不過,大模型仍然離不開算力、算法、數(shù)據(jù)三大要素。大模型動(dòng)輒幾十、上百億參數(shù),算力不夠,支撐不起它們的訓(xùn)練與推理。數(shù)據(jù)少或質(zhì)量低,也無法保證最終的效果。
與此同時(shí),行業(yè)落地及商業(yè)化部署、應(yīng)用也成了大模型廠商的必爭之地。廠商們有的推出了行業(yè)大模型,還有的通過集大模型訓(xùn)練、推理、部署應(yīng)用于一體的 AI 開發(fā)平臺(tái),讓企業(yè)基于自身場景需求少壓力甚至無壓力地?fù)肀Т竽P湍芰Α?/FONT>
面對(duì)大語言模型的飛速發(fā)展,我們不禁要問,在 AI 新時(shí)代,如何才能全面掌握并利用大模型的能力,并把握隨之而來的機(jī)遇和挑戰(zhàn)呢?
為了助力 AI 技術(shù)從業(yè)者把握時(shí)代趨勢、重塑開發(fā)思維、探索 AI 能力邊界,由世界人工智能大會(huì)組委會(huì)辦公室指導(dǎo),機(jī)器之心主辦,上海張江(集團(tuán))有限公司作為戰(zhàn)略合作伙伴的2023 WAIC AI 開發(fā)者領(lǐng)袖論壇將于 7 月 8 日在上海張江科學(xué)會(huì)堂舉辦。
以「大模型時(shí)代的 AI 開發(fā)」為題,論壇將全面探討新時(shí)代的「算法革命、算力挑戰(zhàn)、平臺(tái)與數(shù)據(jù)、行業(yè)創(chuàng)新」,分享行業(yè)領(lǐng)袖的智慧。如今確認(rèn)的嘉賓有哪些亮點(diǎn)?屆時(shí)又會(huì)與大家分享哪些前沿 AI 主題和行業(yè)經(jīng)驗(yàn)?zāi)?
●加拿大工程院及加拿大皇家學(xué)院兩院院士、FATE 開源社區(qū)技術(shù)指導(dǎo)委員會(huì)主席楊強(qiáng)是聯(lián)邦學(xué)習(xí)研究集大成者,著有《遷移學(xué)習(xí)》、《聯(lián)邦學(xué)習(xí)》、《隱私計(jì)算》等書籍。他認(rèn)為,如何使聯(lián)邦學(xué)習(xí)平衡優(yōu)化以達(dá)到安全可信和高效高質(zhì)的效果,并且和大模型無縫連接,是今后產(chǎn)業(yè)和學(xué)界關(guān)注的重點(diǎn)。
●從京東離職后,知名 AI 學(xué)者梅濤院士決定投身 AIGC 創(chuàng)業(yè)之旅,憑借在計(jì)算機(jī)視覺和多媒體領(lǐng)域的多年積累,創(chuàng)業(yè)方向確定為生成式視覺多模態(tài)基礎(chǔ)模型與應(yīng)用。對(duì)于生成式 AI 如何從單模態(tài)邁向多模態(tài),他將分享自己獨(dú)到的見解。
●今年 3 月,百度在全球大廠中第一個(gè)做出對(duì)標(biāo) ChatGPT 的產(chǎn)品文心一言,吸引了行業(yè)極大的關(guān)注。在此次大會(huì)上,百度技術(shù)委員會(huì)主席吳華會(huì)為我們帶來哪些洞見?
●科大訊飛的「星火認(rèn)知大模型」想必大家也不陌生。在這場活動(dòng)上,科大訊飛 AI 研究院常務(wù)副院長高建清將為我們解讀星火大模型的技術(shù)進(jìn)展及應(yīng)用創(chuàng)新。
●路特斯科技副總裁、路特斯機(jī)器人公司 CEO 李博,他深耕智能駕駛領(lǐng)域多年,具有超過 15 年的智能駕駛量產(chǎn)及預(yù)研項(xiàng)目的主持和開發(fā)經(jīng)驗(yàn)。大模型時(shí)代,他又將為我們帶來哪些新的思考?
●相信大家對(duì)新浪微博新技術(shù)研發(fā)負(fù)責(zé)人張俊林老師都不陌生,知乎上許多有關(guān)大模型的高贊文章正是出自他的筆下。他對(duì)大模型可以說有極深的理解。這次他將帶我們了解大語言模型帶來的交互方式變革。
●新加坡國立大學(xué)校長青年教授、潞晨科技創(chuàng)始人兼董事長尤洋是 AI 領(lǐng)域的知名青年學(xué)者。其公司開源的面向 AI 大模型時(shí)代的高效深度學(xué)習(xí)系統(tǒng) Colossal-AI 也備受開發(fā)者們關(guān)注。此次他演講的主題落在了 AI 大模型的挑戰(zhàn)與系統(tǒng)優(yōu)化,展現(xiàn) Colossal-AI 如何幫助大模型開發(fā)降本增效。
●不久之前,一款名為“元乘象 Chatlmg”的國產(chǎn) AI 模型吸引了眾多關(guān)注,這出自人民大學(xué)盧志武教授的團(tuán)隊(duì)。在我們的活動(dòng)上,他將就「多模態(tài)通用生成模型的基本框架與最新進(jìn)展」展開探討。
●微軟,是這波大模型浪潮中必須提及的一個(gè)關(guān)鍵詞。在大模型產(chǎn)品應(yīng)用的探索上,微軟 Copilot 可以說是標(biāo)的。此次,我們邀請(qǐng)到了 Office Product Group 技術(shù)負(fù)責(zé)人蔡瑋鑫,為大家分享大語言模型投入大規(guī)模應(yīng)用生產(chǎn)會(huì)面臨哪些挑戰(zhàn)和機(jī)遇。過去一段時(shí)間,蔡瑋鑫領(lǐng)導(dǎo)開發(fā)了微軟 AI 服務(wù)產(chǎn)品 M365 Copilot,將大語言模型與 Microsoft Graph、Microsoft 365 應(yīng)用程序中,釋放開發(fā)者生產(chǎn)力。
●今年,我們還精心策劃了一場云帆獎(jiǎng)得主的圓桌對(duì)話,邀請(qǐng)曦智科技聯(lián)合創(chuàng)始人兼首席技術(shù)官孟懷宇、北京航空航天大學(xué)助理教授周號(hào)益以及新晉云帆獎(jiǎng)得主,共同就大模型時(shí)代范式轉(zhuǎn)變中的機(jī)遇和挑戰(zhàn)展開頭腦風(fēng)暴。
除了目前公布的這些嘉賓,我們還在積極邀請(qǐng)更多的 AI 領(lǐng)袖參與我們的論壇,敬請(qǐng)期待。
演講及圓桌嘉賓簡介
演講嘉賓:楊強(qiáng),加拿大工程院及加拿大皇家學(xué)院兩院院士、FATE 開源社區(qū)技術(shù)指導(dǎo)委員會(huì)主席
嘉賓簡介:加拿大工程院及加拿大皇家學(xué)院兩院院士,微眾銀行首席人工智能官,香港科技大學(xué)計(jì)算機(jī)與工程系講座教授和前系主任,AAAI-2021 大會(huì)主席,國際人工智能聯(lián)合會(huì)(IJCAI)理事會(huì)前主席,香港人工智能與機(jī)器人學(xué)會(huì)(HKSAIR)理事長,智能投研技術(shù)聯(lián)盟(ITL)、開放群島開源社區(qū)(OI)以及FATE開源社區(qū)技術(shù)指導(dǎo)委員會(huì)(TSC)主席,ACM TIST 和 IEEE TRANS on BIG DATA 創(chuàng)始主編,CAAI、AAAI、ACM、IEEE、AAAS 等多個(gè)國際學(xué)會(huì) Fellow。領(lǐng)銜全球遷移學(xué)習(xí)和聯(lián)邦學(xué)習(xí)研究及應(yīng)用,著作包括《遷移學(xué)習(xí)》、《聯(lián)邦學(xué)習(xí)》、《隱私計(jì)算》和《聯(lián)邦學(xué)習(xí)實(shí)戰(zhàn)》等。
演講嘉賓:梅濤博士,加拿大工程院外籍院士,IEEE/IAPR/CAAI Fellow,生成式人工智能初創(chuàng)公司 HiDream.ai 創(chuàng)始人兼首席執(zhí)行官
嘉賓簡介:梅博士是人工智能、計(jì)算機(jī)視覺和多媒體領(lǐng)域的全球知名學(xué)者,他發(fā)表的論文被引用超過三萬余次,先后榮獲 15 項(xiàng)最佳論文獎(jiǎng),擁有 70 多項(xiàng)專利,并主導(dǎo)研發(fā)了多款全球數(shù)百萬日活用戶的商業(yè)產(chǎn)品。他曾擔(dān)任京東集團(tuán)副總裁和微軟研究院資深研究員。
演講嘉賓:吳華,百度技術(shù)委員會(huì)主席
嘉賓簡介:主要從事自然語言處理領(lǐng)域的研究;曾獲國家科技進(jìn)步獎(jiǎng)二等獎(jiǎng)、國家技術(shù)發(fā)明獎(jiǎng)二等獎(jiǎng)、中國專利金獎(jiǎng);被評(píng)為杰出工程師、青年北京學(xué)者等。
演講嘉賓:盧志武,中國人民大學(xué)教授
嘉賓簡介:2005 年畢業(yè)于北京大學(xué)數(shù)學(xué)科學(xué)學(xué)院信息科學(xué)系,獲理學(xué)碩士學(xué)位;2011 年畢業(yè)于香港城市大學(xué)計(jì)算機(jī)系,獲 PhD 學(xué)位。主要研究方向?yàn)闄C(jī)器學(xué)習(xí)與計(jì)算機(jī)視覺。設(shè)計(jì)中文通用多模態(tài)預(yù)訓(xùn)練模型文瀾 BriVL,并發(fā)表于 Nature Communications。
演講嘉賓:李博,路特斯科技副總裁、路特斯機(jī)器人公司 CEO
嘉賓簡介:曾先后任職于吉利汽車研究院、阿里巴巴達(dá)摩院以及本田技術(shù)研究所。超過 15 年智能駕駛量產(chǎn)及預(yù)研項(xiàng)目的主持和開發(fā)經(jīng)驗(yàn),對(duì)智能駕駛系統(tǒng) EE 架構(gòu)、軟硬件計(jì)算平臺(tái)、視覺算法和基礎(chǔ)算子、路徑規(guī)劃及運(yùn)動(dòng)控制、智能駕駛系統(tǒng)開發(fā)、仿真及測試驗(yàn)證等方面有全面深入的研究,具有豐富的工程應(yīng)用以及團(tuán)隊(duì)管理經(jīng)驗(yàn)。畢業(yè)于東京工業(yè)大學(xué)綜合理工學(xué)科信息處理專業(yè),獲博士學(xué)位。國內(nèi)外專利 20 余篇。
演講嘉賓:高建清,科大訊飛 AI 研究院常務(wù)副院長
嘉賓簡介:先后在語音識(shí)別、語音合成、自然語言處理等領(lǐng)域主導(dǎo)完成了多項(xiàng)原創(chuàng)性研究成果,帶領(lǐng)團(tuán)隊(duì)研發(fā)出國內(nèi)首個(gè)電話自助客服系統(tǒng),科大訊飛第二、三代語音識(shí)別系統(tǒng),成功孵化了以訊飛聽見、智能錄音筆、智能辦公本為代表的多款暢銷辦公產(chǎn)品,主導(dǎo)研發(fā)的技術(shù)成功應(yīng)用于教育、醫(yī)療、汽車、客服、智能硬件等行業(yè)。同時(shí),近年來承擔(dān)國家及省部委項(xiàng)目 8 項(xiàng),并發(fā)表高水平論文 10 余篇,獲得授權(quán)發(fā)明專利 40 余項(xiàng)。
演講嘉賓:張俊林,新浪微博新技術(shù)研發(fā)負(fù)責(zé)人
嘉賓簡介:中國中文信息學(xué)會(huì)理事,中科院軟件所博士。目前擔(dān)任新浪微博新技術(shù)研發(fā)負(fù)責(zé)人,在此之前在阿里巴巴擔(dān)任資深技術(shù)專家,負(fù)責(zé)新技術(shù)團(tuán)隊(duì)。他是技術(shù)書籍《這就是搜索引擎:核心技術(shù)詳解》、《大數(shù)據(jù)日知錄:架構(gòu)與算法》的作者,目前主要研發(fā)興趣集中在推薦系統(tǒng)及自然語言處理。
演講嘉賓:尤洋,新加坡國立大學(xué)校長青年教授,潞晨科技創(chuàng)始人兼董事長
嘉賓簡介:潞晨科技創(chuàng)始人尤洋教授,是加州伯克利大學(xué)博士,新加坡國立大學(xué)計(jì)算機(jī)系的校長青年教授。他曾創(chuàng)造 ImageNet、 BERT、AlphaFold、ViT 訓(xùn)練速度的世界紀(jì)錄,相關(guān)技術(shù)被廣泛應(yīng)用于谷歌,微軟,英特爾,英偉達(dá)等科技巨頭。他曾獲 IPDPS 最佳論文、ICPP 最佳論文、AAAI 杰出論文、清華大學(xué)優(yōu)秀畢業(yè)生,以及當(dāng)時(shí)清華大學(xué)計(jì)算機(jī)系數(shù)額最高的西貝爾獎(jiǎng)學(xué)金等。他在 2017 年獲得美國計(jì)算機(jī)協(xié)會(huì)(ACM)官網(wǎng)上唯一頒給在讀博士生的 ACM-IEEE CS George Michael Memorial HPC Fellowship。他獲得頒發(fā)給伯克利優(yōu)秀畢業(yè)生的 Lotfi A. Zadeh Prize 。他被 UC Berkeley 提名為 ACM Doctoral Dissertation Award 候選人(81 名 UC Berkeley EECS 2020 博士畢業(yè)生中選 2 人)。他曾任職于谷歌、微軟、英偉達(dá)、英特爾、IBM 等,在 2021 年被選入福布斯 30 歲以下精英榜(亞洲)并獲得 IEEE-CS 超算杰出新人獎(jiǎng)。
演講嘉賓:蔡瑋鑫,技術(shù)負(fù)責(zé)人,微軟 Office Product Group
嘉賓簡介:Weixin Cai is a Tech Lead Manager at Microsoft Office Product Group with over 9 years of experience in researching and productionizing AI models. He has received a Ph.D. in Biostatistics from University of California, Berkeley, and later worked as a Quantitative Researcher at Citadel. He was the scientist #1 of the M365 Copilot feature from Microsoft, where he leads a cross-functional team in developing the LLM applications that transform the productivity of millions of users.His work is published as papers and talks at major NLP, Machine Learning, and Statistics conferences.
對(duì)話嘉賓:孟懷宇,曦智科技聯(lián)合創(chuàng)始人、首席技術(shù)官
嘉賓簡介:孟懷宇博士為曦智科技聯(lián)合創(chuàng)始人兼首席技術(shù)官。他擁有麻省理工學(xué)院(MIT)電子工程學(xué)博士學(xué)位,主要研究方向?yàn)榧晒庾訉W(xué)在人工智能、電子通信、數(shù)字通信、生物傳感等方向的應(yīng)用,在頂級(jí)期刊發(fā)表論文 10 余篇,申請(qǐng)全球?qū)@?200 項(xiàng),已獲授權(quán)超 30 項(xiàng)。博士期間,他參與研發(fā)了全球首個(gè)片上光互聯(lián)技術(shù),其學(xué)術(shù)成果發(fā)表于《自然》雜志上。孟懷宇博士于 2018 年作為聯(lián)合創(chuàng)始人加入了全球光電混合計(jì)算領(lǐng)軍企業(yè)曦智科技,現(xiàn)任公司首席技術(shù)官,致力于利用集成硅光技術(shù)突破目前由于摩爾定律停滯帶來的算力提升瓶頸,為大數(shù)據(jù)和人工智能提供更高效、更節(jié)能的算力升級(jí)解決方案。
對(duì)話嘉賓:周號(hào)益,北京航空航天大學(xué)助理教授
嘉賓簡介:面向國家重大需求,長期從事人工智能、序列大數(shù)據(jù)研究。在 AIJ、NeurIPS、KDD、IJCAI 等累計(jì)發(fā)表 20 篇論文,獲 AAAI 2021最佳論文獎(jiǎng)、IEEE IWQoS 2022 最佳論文獎(jiǎng)、WAIC 2022 青年優(yōu)秀論文提名獎(jiǎng)。主持國家自然科學(xué)青年基金、科技部重點(diǎn)研發(fā)課題、CAAI-華為學(xué)術(shù)獎(jiǎng)勵(lì)基金等項(xiàng)目;成果獲國家電網(wǎng)大數(shù)據(jù)中心科技進(jìn)步一等獎(jiǎng)、網(wǎng)信辦中國開源創(chuàng)新大賽一等獎(jiǎng)、工信部工業(yè)互聯(lián)網(wǎng)創(chuàng)新成果轉(zhuǎn)化一等獎(jiǎng)。入選 CAAI 學(xué)會(huì)優(yōu)博、CCF 青年發(fā)展計(jì)劃、ACM China 北京優(yōu)博、WAIC「云帆獎(jiǎng)」等。
(世界人工智能大會(huì))