近日,云從科技正式中標中國郵政儲蓄銀行山東省分行(以下簡(jiǎn)稱(chēng)“郵儲銀行山東分行”)基于多模態(tài)大模型的文檔影像信息提取模型構建技術(shù)服務(wù)項目,將共同打造金融行業(yè)大模型——文檔多模態(tài)大模型。
這是云從科技在多模態(tài)大模型領(lǐng)域的又一標桿案例,也是郵儲銀行山東分行對云從科技實(shí)力的充分肯定。
此次合作的重點(diǎn)在于解決金融場(chǎng)景中的文檔影像處理難題。
金融場(chǎng)景的文檔影像類(lèi)型眾多,包括卡證、票據、合同、表格、報告等,不同類(lèi)型的文檔還存在大量的子類(lèi)型,存在版式復雜多樣化、內容表達差異大、上下文信息跨度大、真實(shí)數據收集困難等問(wèn)題。
傳統的OCR和文檔解析往往需要針對某一具體子類(lèi)型進(jìn)行定制開(kāi)發(fā),導致開(kāi)發(fā)成本高昂且缺乏泛化能力,同時(shí)對文檔的語(yǔ)義理解能力低,難以應對這些挑戰。
為了克服這些困難,云從科技與郵儲銀行山東分行攜手合作,深入挖掘行業(yè)痛點(diǎn)。針對傳統OCR和文檔解析的缺陷進(jìn)行了優(yōu)化升級,研發(fā)基于從容大模型的文檔多模態(tài)大模型。
文檔多模態(tài)大模型的出現將極大提升不同版式間的泛化性能,使其能夠適應各種復雜的文檔版式,并且可以有效處理無(wú)固定版式的票據、卡證、合同、表格、報告等。
不僅降低定制開(kāi)發(fā)成本,還可以提高大模型在不同場(chǎng)景下的適用性。
此外,通過(guò)語(yǔ)言、視覺(jué)等不同模態(tài)之間的關(guān)聯(lián),文檔多模態(tài)大模型具有出色的定位能力和多答案文本抽取能力,能夠準確提取非連續答案。
在數據方面,文檔多模態(tài)大模型采用自研的文檔合成工具,實(shí)現了數據模擬生成的功能。對于難例場(chǎng)景,利用數據合成和處理工具也能夠進(jìn)行適配訓練,從而快速而靈活地優(yōu)化模型效果,解決了業(yè)務(wù)數據保密和成本方面的痛點(diǎn)。
作為一家致力于引領(lǐng)新一代人工智能浪潮的企業(yè),云從科技憑借其世界領(lǐng)先、自主可控的大模型核心技術(shù),在語(yǔ)言、視覺(jué)等多個(gè)領(lǐng)域屢創(chuàng )世界紀錄。未來(lái),云從科技將繼續秉承創(chuàng )新精神,為金融行業(yè)提供更優(yōu)質(zhì)的技術(shù)和解決方案,推動(dòng)行業(yè)的智能化進(jìn)程。
9月1日,2022世界人工智能大會(huì )(WAIC)正式啟幕。云從科技基于人機協(xié)同操作系統CWOS,聚焦“人機協(xié)同時(shí)代的人·車(chē)·路·城”主題,為大眾描繪人機協(xié)同下的智能網(wǎng)聯(lián)汽車(chē)領(lǐng)域的美好藍圖。
7月7日,在2023世界人工智能大會(huì )“聚焦·大模型時(shí)代AIGC新浪潮”論壇上,大模型生態(tài)合作共同體正式發(fā)起,云從科技與百度、清華大學(xué)等國內代表性大模型單位成為首批創(chuàng )始成員單位
打開(kāi)貨柜,取出一瓶飲料,再順手拿走兩袋零食,關(guān)門(mén)離開(kāi)。 對人來(lái)說(shuō),這是一次普通購物。對機器而言,要準確回答“拿了幾件、拿了什么”,仍要面對不少難題。 手部和身體遮擋商品、相似包裝難以區分、柜內燈光產(chǎn)生反光、拿取動(dòng)作快速連貫、多件商品同時(shí)移動(dòng)……用戶(hù)還可能拿起商品查看后重新放回。 如何讓機器真正看懂一段完整的交易視頻?
周一到周五9:30-18:00(北京時(shí)間)

商務(wù)合作:business@cloudwalk.com

媒體合作:Media@cloudwalk.com

渠道合作:business_partner@cloudwalk.com

人才招聘:zhaopin@cloudwalk.com