愛數(shù)認知智能開發(fā)框架KWeaver正式開源

　　近日,16周年慶活動現(xiàn)場,愛數(shù)正式開源了認知智能開發(fā)框架KWeaver。KWeaver脫胎于愛數(shù)認知智能框架AnyDATA Framework 2,具有快速的開發(fā)能力、全面的開放性、高性能等特性,以成熟的數(shù)據(jù)知識化方法論和系列認知智能應用組件賦能數(shù)據(jù)科學家和應用開發(fā)者,以此降低領域認知智能應用開發(fā)的復雜度與人才門檻。開源后,KWeaver將作為普惠技術進一步賦能產(chǎn)業(yè),人人都可以在 GitHub 上獲取。

　　GitHub 項目地址:https://github.com/AISHU-Technology/kweaver

　　愛數(shù)在數(shù)據(jù)產(chǎn)業(yè)的布局與創(chuàng)新

　　2021年,愛數(shù)推出新愿景——以數(shù)據(jù)重塑生產(chǎn)力,共創(chuàng)智能世界。“數(shù)據(jù)”和“智能”作為愛數(shù)成長的兩個關鍵詞,很好地呼應了愛數(shù)的業(yè)務定位 Data+AI,即AI驅(qū)動,數(shù)據(jù)賦能。這個愿景背后,也蘊涵著愛數(shù)更高層次的追求:不僅要成長為一個典范企業(yè),還應肩負起社會責任,讓技術驅(qū)動社會進步,用數(shù)據(jù)賦能人類生產(chǎn)力的提升。

　　在“Data”層面,愛數(shù)很早就開始了數(shù)據(jù)產(chǎn)業(yè)的布局,實現(xiàn)數(shù)據(jù)產(chǎn)業(yè)從0到1的創(chuàng)新。2019年愛數(shù)發(fā)布大數(shù)據(jù)基礎設施戰(zhàn)略,加速布局數(shù)據(jù)產(chǎn)業(yè);2021年～2022年愛數(shù)基于領域認知智能技術成立北方大數(shù)據(jù)交易中心,搭建全國數(shù)據(jù)交易網(wǎng)絡體系;2022年愛數(shù)宣布以開源賦能產(chǎn)業(yè),減低總體社會成本,實現(xiàn)客戶、伙伴等多方的可信協(xié)作。

　　在“AI”層面,愛數(shù)認知智能技術在近兩年也取得了較快的進展。2021年,愛數(shù)發(fā)布以領域知識網(wǎng)絡為核心技術的AnyDATA ONE,并與復旦大學成立聯(lián)合實驗室開展認知智能的研究。之后,又和天津大學成立聯(lián)合實驗室開展數(shù)據(jù)智能技術的研究。目前,愛數(shù)正在全球范圍招募人工智能博士,在長沙籌建人工智能研究院,以此推動領域認知智能技術的發(fā)展。

　　在此背景下,愛數(shù)一方面希望通過KWeaver的開源,整合全球智慧,將各行各業(yè)、各個領域不同的解題思路和方法模型融入愛數(shù)的認知智能框架,激發(fā)更多的創(chuàng)新與應用;另一方面也希望通過開源,讓愛數(shù)積累的技術成果走出愛數(shù),面向更多的數(shù)據(jù)科學家、應用開發(fā)者和領域?qū)＜?為行業(yè)擁抱AI提供更多的可能。

　　領域認知驅(qū)動需要開源

　　經(jīng)過幾十年的發(fā)展,人工智能從計算智能發(fā)展到感知智能,又從感知智能發(fā)展到認知智能。作為第三代人工智能,認知智能非常重要的特點之一,就是需要通過領域認知進行驅(qū)動。

　　“第三代人工智能的目標是要真正模擬人類的智能行為,我們必須充分地利用知識、數(shù)據(jù)、算法和算力,把四個因素充分利用起來,這樣才能夠解決不完全信息、不確定性環(huán)境和動態(tài)變化環(huán)境下面的問題,才能達到真正的人工智能。—— 張鈸院士”

　　在此背景下,領域認知智能成為新的解題思路,這也是愛數(shù)自2021年推出認知智能戰(zhàn)略后,聯(lián)合復旦大學、天津大學等高等院校專家不斷實踐摸索出的技術成果。領域認知智能,面向某一領域內(nèi)具體的業(yè)務問題,通過獲取領域內(nèi)的數(shù)據(jù)實現(xiàn)數(shù)據(jù)知識化形成領域知識網(wǎng)絡,再基于領域智商評估領域知識的質(zhì)量,在此基礎上利用知識進行理解、推理和決策,從而開發(fā)出滿足用戶場景需求的領域認知智能應用,輔助人們解決特定的問題,提升生產(chǎn)力。

　　“認知智能的核心能力是“理解”和“解釋”,體現(xiàn)在機器能夠理解數(shù)據(jù)、理解語言進而理解現(xiàn)實世界的能力,體現(xiàn)在機器能夠解釋數(shù)據(jù)、解釋過程進而解釋現(xiàn)象的能力,體現(xiàn)在推理、規(guī)劃等等一系列人類所獨有的認知能力上。

　　——《知識圖譜與認知智能》,肖仰華,復旦大學教授,復旦愛數(shù)聯(lián)合研究研究中心主任”

　　然而,各行各業(yè)領域的眾多、專業(yè)領域之間的高壁壘,唯有通過開源,才能更加容易地讓不同行業(yè)、不同領域的開發(fā)者開發(fā)領域認知智能,從而也讓 KWeaver 不斷提升領域認知能力。對于愛數(shù)而言,一方面需要借助開源整合全球智慧;另一方面也可以通過開源開放自身的技術成果與積累,實現(xiàn)AI普惠全球。

　　愛數(shù)KWeaver項目:開源的認知智能開發(fā)框架

　　KWeaver是開源的認知智能開發(fā)框架,為數(shù)據(jù)科學家、應用開發(fā)者和領域?qū)＜姨峁┚哂锌焖俚拈_發(fā)能力、全面的開放性和高性能的知識網(wǎng)絡生成及認知智能應用開發(fā)的工具與平臺。KWeaver名稱中,K代表的是Knowledge知識,Weaver代表編織者,意為將所有領域知識編織在一起,從而實現(xiàn)領域認知智能。

　　KWeaver面向數(shù)據(jù)科學家、應用開發(fā)者、領域?qū)＜胰�類用戶提供三種能力。

　　快速的開發(fā)能力:KWeaver提供可視化的知識網(wǎng)絡工作臺,可視化的認知智能應用開發(fā)調(diào)試工具,豐富的數(shù)據(jù)加工及模型訓練工具,以及所見即所得的API文檔;

　　全面的開放性: KWeaver源代碼是開源且技術透明的,這意味著參與項目的用戶可以查看全部技術細節(jié),同時還支持多元異構數(shù)據(jù)源對接,提供SDK兼容更多的第三方知識抽取模型,提供 API 和 Web 組件的整合方式;

　　高性能:得益于愛數(shù)多年在云原生領域的積累,KWeaver的開發(fā)基于云原生技術,提供橫向擴展能力,采用分布式的計算引擎實現(xiàn)海量數(shù)據(jù)接入的處理能力。

　　通過KWeaver實現(xiàn)領域認知驅(qū)動涉及到兩個關鍵步驟。

　　第一是領域知識獲取。首先建立領域認知模型,基于模型進行數(shù)據(jù)加工抽取知識,對于不同來源的數(shù)據(jù),加工的方式也會有很大不同,部分數(shù)據(jù)可以直接抽取,部分數(shù)據(jù)則需要通過深度學習模型,例如文本知識。加工完成后生成領域知識網(wǎng)絡。

　　第二是領域知識利用。基于知識網(wǎng)絡進行認知智能應用的開發(fā),利用數(shù)據(jù)科學的方法開發(fā)模型,并將模型應用到推理、理解等具體場景。顯然,在數(shù)據(jù)領域認知智能并非替代原有的深度學習或機器學習,而是將兩者結(jié)合發(fā)揮更大的作用。KWeaver也會內(nèi)置很多基于深度學習的知識抽取模型。

       本次正式開源前,KWeaver已經(jīng)伴隨愛數(shù)AnyDATA經(jīng)歷了近3年的孵化和打磨,結(jié)合AnyShare、AnyRobot、AnyFabric等產(chǎn)品的能力實現(xiàn)諸多創(chuàng)新。如結(jié)合AnyShare在知識管理方面形成行業(yè)知識卡片、行業(yè)標簽、知識搜索等應用;結(jié)合AnyRobot在智能運維方面實現(xiàn)可持續(xù)進化的運維知識庫,以及運維中小概率事件的故障定位和根因分析;結(jié)合AnyFabric幫助用戶更好地編織數(shù)據(jù),以資產(chǎn)圖譜的形式讓用戶更直觀全面的觀察和分析業(yè)務能力、數(shù)據(jù)質(zhì)量等等。

　　16年專注,16年探索。從備份一體機到大數(shù)據(jù)基礎設施,從人工智能到領域認知智能,從傳統(tǒng)商業(yè)模式到KWeaver的正式開源,愛數(shù)始終在朝著“以數(shù)據(jù)重塑生產(chǎn)力,共創(chuàng)智能世界”的愿景不斷成長。未來,愛數(shù)將以更開放、包容的心態(tài),通過更多的開源計劃實現(xiàn)技術共享,為數(shù)據(jù)產(chǎn)業(yè)的繁榮發(fā)展貢獻自己應盡的力量。