近日,在2025年華為中國合作伙伴大會上,華為攜手景聯(lián)文科技發(fā)布面向AI數(shù)據(jù)湖的數(shù)據(jù)工程聯(lián)合解決方案。該方案基于端到端高效、可靠、共享、易管理的AI數(shù)據(jù)湖,旨在將海量多模態(tài)數(shù)據(jù)資源高效轉(zhuǎn)化成高質(zhì)量AI算料,為行業(yè)智能升級注入充沛的數(shù)據(jù)動能。
景聯(lián)文科技CEO劉云濤
“AI-ready的前提是Data-ready,大模型的好壞取決于數(shù)據(jù)的好壞。高質(zhì)量數(shù)據(jù)集的供給是AI行業(yè)化落地的關鍵要素,也是促進數(shù)據(jù)要素繁榮交易的根基。”景聯(lián)文科技CEO劉云濤強調(diào),“精準全面的數(shù)據(jù)治理能力,結(jié)合可靠高效的數(shù)據(jù)基礎設施,在智能化升級中不可或缺?!?span style="display:none">Ljh即熱新聞——關注每天科技社會生活新變化gihot.com
普遍來說,面向AI的數(shù)據(jù)需要經(jīng)歷三大環(huán)節(jié),即:從海量原始數(shù)據(jù)提煉為結(jié)構(gòu)化數(shù)據(jù)集,然后經(jīng)標注成為語料集,最終構(gòu)成知識庫、支撐模型訓練及業(yè)務應用。在這個過程中,當下正面臨多重挑戰(zhàn):
● 首先,數(shù)據(jù)擁有方動力不足:大部分數(shù)據(jù)持有者缺少便捷安全的數(shù)據(jù)匯聚托管系統(tǒng),普遍陷入“不愿、不敢、不會”的困境,數(shù)據(jù)共享壁壘高筑。
● 其次,語料開發(fā)難:原始數(shù)據(jù)種類多、格式雜、時效高,如文本、圖像、音視頻等多模態(tài)原始數(shù)據(jù),增加了語料處理的復雜性。同時,行業(yè)專用語料往往包含大量特有的垂類知識、表達方式,加劇了精準標注的難度。
● 最后,數(shù)據(jù)可信流動難:數(shù)據(jù)作為風險資源,如果在流通中缺少端到端安全管控,則易遭受被篡改、被擴散的風險。此外,區(qū)域間數(shù)據(jù)基礎設施發(fā)展程度不均,且兼容性和互操作性不足,導致數(shù)據(jù)跨域流通效率低下。
景聯(lián)文科技與華為強強聯(lián)合,依托景聯(lián)文科技深耕多年的數(shù)據(jù)工程能力、以及華為數(shù)據(jù)存儲行業(yè)領先的技術(shù)優(yōu)勢,推出面向AI數(shù)據(jù)湖的數(shù)據(jù)工程聯(lián)合解決方案:
● 全流程數(shù)據(jù)工程:景聯(lián)文科技Solar Data平臺采用AI Agent理念,與全閃數(shù)據(jù)湖存儲緊密協(xié)同,支持異構(gòu)數(shù)據(jù)的高效加工,實現(xiàn)對30+格式的自動或半自動化清洗、解析、預處理、特征提取與初步分析,并基于AI預標注與專業(yè)手工標注結(jié)合,最終整合為高質(zhì)量的數(shù)據(jù)產(chǎn)品,全流程效率提升70%。
● 數(shù)據(jù)流通與資源調(diào)度:通過華為DME(Omni-Dataverse)全局文件系統(tǒng),結(jié)合可信數(shù)據(jù)空間,實現(xiàn)多源數(shù)據(jù)無縫歸集,讓全局數(shù)據(jù)可視、可管、可流,保障數(shù)據(jù)交換過程的可信、可證、可控?;谌A為DCS的統(tǒng)一資源調(diào)度,實現(xiàn)Solar Data平臺計算、存儲、網(wǎng)絡等資源的彈性服務與統(tǒng)一管理。并通過ModelEngine AI使能工具鏈框架,實現(xiàn)高效模型編排與應用對接,加速數(shù)據(jù)集開發(fā)進程。
● 先進數(shù)據(jù)底座:基于華為OceanStor Pacific分布式存儲底座建設統(tǒng)一數(shù)據(jù)底座,在先進介質(zhì)、協(xié)議互通、負載優(yōu)化、分布式并行客戶端等領域軟硬協(xié)同創(chuàng)新,打造業(yè)界領先的高密綠色數(shù)據(jù)基礎設施,助力海量數(shù)據(jù)更持久地存儲、更高效地訪問。
華為數(shù)據(jù)存儲將持續(xù)深化與業(yè)界伙伴的合作,攜手促進AI時代應用生態(tài)的蓬勃壯大,秉持“以數(shù)據(jù)為中心”的產(chǎn)業(yè)理念,發(fā)揮數(shù)據(jù)在數(shù)字經(jīng)濟的核心驅(qū)動力作用。
來源:北國網(wǎng)
本文鏈接:http://jphkf.cn/news-14-7946-0.html華為攜手景聯(lián)文科技發(fā)布面向AI數(shù)據(jù)湖的數(shù)據(jù)工程聯(lián)合解決方案
聲明:本網(wǎng)頁內(nèi)容由互聯(lián)網(wǎng)博主自發(fā)貢獻,不代表本站觀點,本站不承擔任何法律責任。天上不會到餡餅,請大家謹防詐騙!若有侵權(quán)等問題請及時與本網(wǎng)聯(lián)系,我們將在第一時間刪除處理。
點擊右上角微信好友
朋友圈
點擊瀏覽器下方“”分享微信好友Safari瀏覽器請點擊“
”按鈕
點擊右上角QQ
點擊瀏覽器下方“”分享QQ好友Safari瀏覽器請點擊“
”按鈕