CNET科技資訊網(wǎng) 12月7日 北京消息:12月5日,2016 Strata+Hadoop World大數(shù)據(jù)峰會(huì)在新加坡開幕。作為全球大數(shù)據(jù)領(lǐng)域的開發(fā)者大會(huì),本屆Strata+Hadoop World 峰會(huì)吸引了全球知名的大數(shù)據(jù)廠家、人工智能、物聯(lián)網(wǎng)以及各垂直行業(yè)的大數(shù)據(jù)從業(yè)人員參展。萬達(dá)網(wǎng)絡(luò)科技集團(tuán)聯(lián)合大數(shù)據(jù)業(yè)界領(lǐng)袖Cloudera研發(fā)的一站式“大數(shù)據(jù)+區(qū)塊鏈”解決開源方案——大力神項(xiàng)目(Project Hercules),也在此次峰會(huì)上首次發(fā)布。該項(xiàng)目突破性地實(shí)現(xiàn)了基于各種數(shù)據(jù)中心或云環(huán)境的大數(shù)據(jù)+區(qū)塊鏈基礎(chǔ)架構(gòu)服務(wù),為行業(yè)用戶提供集成的大數(shù)據(jù)處理、分析支持以及區(qū)塊鏈應(yīng)用的構(gòu)建與管理。
調(diào)研顯示,目前市場(chǎng)對(duì)大數(shù)據(jù)和區(qū)塊鏈的技術(shù)需求非?;鸨?,但市場(chǎng)上還沒有任何一個(gè)一站式的開源套件可以提供完整的業(yè)務(wù)支持;與此同時(shí),大量區(qū)塊鏈應(yīng)用還在試驗(yàn)期,尚未考慮到區(qū)塊鏈應(yīng)用落地對(duì)大數(shù)據(jù)的需求。此次推出的大力神項(xiàng)目希望解決這些問題,讓每個(gè)企業(yè)都可以在已有的大數(shù)據(jù)集群上便捷地部署和管理區(qū)塊鏈應(yīng)用。
一直以來,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)不僅打造智慧生活開放平臺(tái),同時(shí)在技術(shù)上參與全球分布式計(jì)算、大數(shù)據(jù)和區(qū)塊鏈等前端領(lǐng)域的相關(guān)研發(fā)與標(biāo)準(zhǔn)化規(guī)范工作。今年10月18日,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)作為中國(guó)區(qū)塊鏈代表企業(yè)現(xiàn)身“中國(guó)區(qū)塊鏈技術(shù)和產(chǎn)業(yè)發(fā)展論壇成立大會(huì)暨首屆開發(fā)者大會(huì)”,發(fā)布合作撰寫的“中國(guó)區(qū)塊鏈白皮書”,并牽頭論壇開源推進(jìn)工作組。會(huì)上,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)首席數(shù)據(jù)官和首席架構(gòu)師蔡棟講述了集團(tuán)的開源戰(zhàn)略,未來集團(tuán)將加大和業(yè)界知名高科技公司合作的力度,同時(shí)保持對(duì)區(qū)塊鏈技術(shù)的開放、共享策略。11月中旬,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)還參與區(qū)塊鏈和分布式賬本技術(shù)應(yīng)用參考架構(gòu)設(shè)計(jì)與編寫,與國(guó)際標(biāo)準(zhǔn)聯(lián)動(dòng)完善國(guó)內(nèi)技術(shù)規(guī)范。今后,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)將更積極展開國(guó)密算法的引入、硬件加密加速卡定制開發(fā),繼續(xù)打造安全、自主、可控的區(qū)塊鏈應(yīng)用開放平臺(tái)。
本次大力神項(xiàng)目的發(fā)布,正是順應(yīng)萬達(dá)網(wǎng)絡(luò)科技集團(tuán)的開源戰(zhàn)略,其Cloudera認(rèn)證版本將于今年晚些時(shí)候推出,屆時(shí)全世界所有基于CDH大數(shù)據(jù)集群平臺(tái)的開發(fā)者都可以按需快速部署和使用超級(jí)賬本項(xiàng)目(Project Hyperledger)中的Fabric區(qū)塊鏈應(yīng)用。CDH是Cloudera發(fā)行的100%開源大數(shù)據(jù)平臺(tái)分發(fā)版,可以針對(duì)企業(yè)級(jí)用戶的各項(xiàng)需求快速部署各項(xiàng)先進(jìn)功能的大數(shù)據(jù)集群。大力神項(xiàng)目提供一系列全自助式的便捷功能,方便開發(fā)者選取適合的業(yè)務(wù)場(chǎng)景進(jìn)行針對(duì)性開發(fā),支持開展進(jìn)一步交互的功能,并支持集成式的數(shù)據(jù)導(dǎo)出、分析和實(shí)時(shí)風(fēng)控等功能。大力神項(xiàng)目可以讓企業(yè)用戶能夠根據(jù)其自身基礎(chǔ)架構(gòu)布局和其行業(yè)特性設(shè)置個(gè)性化業(yè)務(wù)場(chǎng)景方案。
大力神項(xiàng)目的源代碼會(huì)托管在GitHub上,通過工信部區(qū)塊鏈技術(shù)與產(chǎn)業(yè)發(fā)展論壇開源社區(qū)開放測(cè)試用戶申請(qǐng),后續(xù)進(jìn)階版本發(fā)布后,將會(huì)面向全部企業(yè)用戶,針對(duì)特定Cloudera CDH版本分發(fā)認(rèn)證套件版本。
在2017年一季度上海召開的首屆超級(jí)賬本亞洲黑客馬拉松上海站上,萬達(dá)網(wǎng)絡(luò)科技集團(tuán)將公開展示大力神項(xiàng)目,并提供給黑客、軟件開發(fā)者、業(yè)務(wù)產(chǎn)品經(jīng)理等用戶使用,展現(xiàn)萬達(dá)網(wǎng)絡(luò)網(wǎng)絡(luò)科技集團(tuán)強(qiáng)大的研發(fā)和定制實(shí)力,以及海量應(yīng)用場(chǎng)景。在2017年3月份的Strata+Hadoop World硅谷圣荷塞峰會(huì)上,也將有更多的開源產(chǎn)品發(fā)布。
好文章,需要你的鼓勵(lì)
新加坡國(guó)立大學(xué)研究團(tuán)隊(duì)開發(fā)了SPIRAL框架,通過讓AI與自己對(duì)弈零和游戲來提升推理能力。實(shí)驗(yàn)顯示,僅訓(xùn)練AI玩簡(jiǎn)單撲克游戲就能讓其數(shù)學(xué)推理能力提升8.6%,通用推理提升8.4%,且無需任何數(shù)學(xué)題目作為訓(xùn)練材料。研究發(fā)現(xiàn)游戲中的三種推理模式能成功轉(zhuǎn)移到數(shù)學(xué)解題中,為AI訓(xùn)練提供了新思路。
同濟(jì)大學(xué)團(tuán)隊(duì)開發(fā)的GIGA-ToF技術(shù)通過融合多幀圖像的"圖結(jié)構(gòu)"信息,創(chuàng)新性地解決了3D相機(jī)噪聲問題。該技術(shù)利用圖像間的不變幾何關(guān)系,結(jié)合深度學(xué)習(xí)和數(shù)學(xué)優(yōu)化方法,在合成數(shù)據(jù)集上實(shí)現(xiàn)37.9%的精度提升,并在真實(shí)設(shè)備上展現(xiàn)出色泛化能力,為機(jī)器人、AR和自動(dòng)駕駛等領(lǐng)域提供更可靠的3D視覺解決方案。
伊利諾伊大學(xué)研究團(tuán)隊(duì)通過對(duì)比實(shí)驗(yàn)發(fā)現(xiàn),經(jīng)過強(qiáng)化學(xué)習(xí)訓(xùn)練的視覺語(yǔ)言模型雖然表現(xiàn)出"頓悟時(shí)刻"現(xiàn)象,但這些自我糾錯(cuò)行為并不能實(shí)際提升推理準(zhǔn)確率。研究揭示了AI模型存在"生成-驗(yàn)證差距",即生成答案的能力強(qiáng)于驗(yàn)證答案質(zhì)量的能力,且模型在自我驗(yàn)證時(shí)無法有效利用視覺信息,為AI多模態(tài)推理發(fā)展提供了重要啟示。
MIT等頂尖機(jī)構(gòu)聯(lián)合提出SparseLoRA技術(shù),通過動(dòng)態(tài)稀疏性實(shí)現(xiàn)大語(yǔ)言模型訓(xùn)練加速1.6倍,計(jì)算成本降低2.2倍。該方法使用SVD稀疏性估計(jì)器智能選擇重要計(jì)算部分,在保持模型性能的同時(shí)顯著提升訓(xùn)練效率,已在多個(gè)任務(wù)上驗(yàn)證有效性。