omniture

才云科技發(fā)布國內(nèi)首個(gè)谷歌級(jí)深度學(xué)習(xí)在容器集群上的實(shí)踐案例

2016-06-06 10:44 9313
6月4日,于上海光大會(huì)展中心舉行的@Container容器大會(huì)上海站,才云科技正式發(fā)布了國內(nèi)首個(gè)基于容器集群的分布式深度學(xué)習(xí)TensorFlow系統(tǒng)Clever。

上海2016年6月6日電 /美通社/ -- 6月4日,于上海光大會(huì)展中心舉行的@Container容器大會(huì)上海站,才云科技正式發(fā)布了國內(nèi)首個(gè)基于容器集群的分布式深度學(xué)習(xí)TensorFlow系統(tǒng)Clever。美國谷歌于今年4月底最新發(fā)布的TensorFlow 0.8,成功實(shí)現(xiàn)了與Kubernetes云平臺(tái)的結(jié)合。在谷歌內(nèi)部,TensorFlow已經(jīng)成功地應(yīng)用到了谷歌搜索、廣告、地圖、翻譯等眾多產(chǎn)品之中,并突破了語音識(shí)別,圖像識(shí)別,自然語言處理等多個(gè)領(lǐng)域的機(jī)器學(xué)習(xí)瓶頸。TensorFlow代表了美國大規(guī)模深度學(xué)習(xí)的最新進(jìn)展。才云科技作為國內(nèi)首家支持分布式TensorFlow的云平臺(tái),引領(lǐng)了國內(nèi)大數(shù)據(jù)市場(chǎng)的新發(fā)展。

才云科技首席科學(xué)家、前美國谷歌高級(jí)工程師鄭澤宇,在@Container容器大會(huì)上做了《谷歌級(jí)深度學(xué)習(xí)在Kubernetes上的實(shí)踐》分享。演講中,鄭澤宇為大家詳細(xì)解讀了深度學(xué)習(xí)在谷歌的最新實(shí)踐以及TensorFlow與才云科技容器云平臺(tái)的融合,并現(xiàn)場(chǎng)為大家演示了如何使用才云科技公有云平臺(tái)(caicloud.io)的分布式深度學(xué)習(xí)系統(tǒng)(見下圖)。

才云科技Caicloud.io 機(jī)器學(xué)習(xí)界面
才云科技Caicloud.io 機(jī)器學(xué)習(xí)界面

近兩年,Docker、“容器”作為新型軟件交付工具在國內(nèi)迅速普及,企業(yè)都逐漸把容器技術(shù)應(yīng)用在開發(fā)環(huán)境中,大型容器集群管理方案和實(shí)踐也越來越多的被應(yīng)用于國內(nèi)企業(yè)生產(chǎn)實(shí)踐。才云科技主推的谷歌級(jí)容器集群管理平臺(tái)caicloud.io與基于此平臺(tái)向上的各類容器SaaS云服務(wù),已經(jīng)形成一股高能新引力。這使得才云科技首席科學(xué)家鄭澤宇的演講現(xiàn)場(chǎng)全場(chǎng)爆滿,一“站”難求。

深度學(xué)習(xí)在谷歌中的應(yīng)用

谷歌內(nèi)部早在2011年就開始了對(duì)大規(guī)模并行化深度學(xué)習(xí)DistBelief系統(tǒng)的搭建。通過該系統(tǒng),谷歌實(shí)現(xiàn)了在語音識(shí)別,圖像識(shí)別,自然語言處理等多個(gè)領(lǐng)域的突破。在語音識(shí)別方面,此系統(tǒng)將谷歌語音搜索應(yīng)用的錯(cuò)誤率降低了25%;在圖像識(shí)別方面,此系統(tǒng)為谷歌贏得了ImageNet 的圖像識(shí)別競賽并成功的超越了人類表現(xiàn);在自然語言處理方面,谷歌翻譯通過此系統(tǒng)進(jìn)一步提升了翻譯結(jié)果。基于DistBelief系統(tǒng),谷歌于2015年底開源了一套更加靈活,效率更高的深度學(xué)習(xí)系統(tǒng) -- TensorFlow。AlphaGo的開發(fā)團(tuán)隊(duì)DeepMind也于上個(gè)月宣布完全轉(zhuǎn)移到了TensorFlow這套系統(tǒng)。

TensorFlow  Hadoop、Spark

因底層計(jì)算模型迥異,Hadoop、Spark和TensorFlow有完全不同的擅長和特點(diǎn)。Hadoop和Spark的底層計(jì)算框架均基于Map-Reduce,TensorFlow底層則基于矩陣運(yùn)算。Hadoop和Spark適用于數(shù)據(jù)的清理、轉(zhuǎn)化和統(tǒng)計(jì),TensorFlow則更專注于數(shù)值計(jì)算。比如TensorFlow不容易實(shí)現(xiàn)統(tǒng)計(jì)單詞出現(xiàn)個(gè)數(shù)的功能,但可以在短短幾行代碼中實(shí)現(xiàn)深度學(xué)習(xí)算法。

才云科技在國內(nèi)首推支持分布式TensorFlow系統(tǒng)

為了適應(yīng)海量數(shù)據(jù)的需求,才云在6月4日推出Clever 機(jī)器學(xué)習(xí)系統(tǒng)成為國內(nèi)首家支持分布式TensorFlow系統(tǒng)。基于此系統(tǒng),才云一方面將進(jìn)一步提供更加方便的機(jī)器學(xué)習(xí)算法實(shí)驗(yàn)框架,為科研人員提供更好的支持;另一方面也將著力打造深度學(xué)習(xí)應(yīng)用SaaS平臺(tái),使得更多的人能夠享受到機(jī)器學(xué)習(xí)帶來的技術(shù)革新。

消息來源:才云Caicloud
China-PRNewsire-300-300.png
全球TMT
微信公眾號(hào)“全球TMT”發(fā)布全球互聯(lián)網(wǎng)、科技、媒體、通訊企業(yè)的經(jīng)營動(dòng)態(tài)、財(cái)報(bào)信息、企業(yè)并購消息。掃描二維碼,立即訂閱!
collection