天堂国产午夜亚洲专区-少妇人妻综合久久蜜臀-国产成人户外露出视频在线-国产91传媒一区二区三区

當(dāng)前位置:主頁(yè) > 科技論文 > 自動(dòng)化論文 >

基于Docker和Kubernetes的深度學(xué)習(xí)容器云平臺(tái)的設(shè)計(jì)與實(shí)現(xiàn)

發(fā)布時(shí)間:2020-06-07 15:35
【摘要】:隨著人工智能技術(shù)蓬勃發(fā)展,新興科學(xué)技術(shù)已經(jīng)滲透到新時(shí)代人類的日常生活和國(guó)家發(fā)展,人民切實(shí)感受到了科技帶來(lái)的力量。深度學(xué)習(xí)作為人工智能強(qiáng)有力的助推器,在科技發(fā)展中顯得尤為重要。就目前國(guó)內(nèi)計(jì)算機(jī)科學(xué)行業(yè)形勢(shì)來(lái)看,我國(guó)在人工智能領(lǐng)域的建樹(shù)與歐美發(fā)達(dá)國(guó)家相比仍有很大差距,缺少核心技術(shù),仍處于追趕期。發(fā)展受阻的因素有很多,比如計(jì)算資源維護(hù)成本高昂,行業(yè)門檻相對(duì)較高,以及人才匱乏等,這些都是阻礙人工智能在中國(guó)發(fā)展的絆腳石。為盡可能從技術(shù)和成本上降低人工智能的門檻,提升國(guó)內(nèi)中小企業(yè)以及個(gè)人開(kāi)發(fā)者的效率,本文利用容器技術(shù)、容器編排技術(shù)、以及如Tensorflow、Caffe、Pytorch等用于機(jī)器學(xué)習(xí)、深度學(xué)習(xí)的框架,來(lái)打造一個(gè)穩(wěn)定、易用、易擴(kuò)展的深度學(xué)習(xí)平臺(tái)。平臺(tái)提供模型開(kāi)發(fā),模型訓(xùn)練,模型服務(wù)三大功能,可以實(shí)現(xiàn)秒級(jí)創(chuàng)建任務(wù)開(kāi)發(fā)環(huán)境,一鍵運(yùn)行模型訓(xùn)練批處理任務(wù)和一鍵發(fā)布模型服務(wù)。同時(shí)平臺(tái)提供GPU分時(shí)復(fù)用、任務(wù)管理、分布式存儲(chǔ)、以及任務(wù)監(jiān)控與報(bào)警。此外,平臺(tái)提供多種計(jì)算資源選擇,可以自由控制所用資源多少,是一個(gè)完備的深度學(xué)習(xí)平臺(tái)。本人參與了深度學(xué)習(xí)平臺(tái)的開(kāi)發(fā)全過(guò)程,具體內(nèi)容如下:(1)協(xié)助產(chǎn)品經(jīng)理完成平臺(tái)用戶需求分析整理,精簡(jiǎn)出最關(guān)鍵的需求;(2)與架構(gòu)師一起對(duì)平臺(tái)進(jìn)行總體設(shè)計(jì),并對(duì)部分關(guān)鍵組件提前調(diào)研;(3)實(shí)現(xiàn)鏡像倉(cāng)庫(kù)的搭建、維護(hù),以及鏡像編制;(4)完成調(diào)度系統(tǒng)Minion-proxy以及狀態(tài)機(jī)的的設(shè)計(jì)與實(shí)現(xiàn);(5)完成存儲(chǔ)系統(tǒng)與平臺(tái)的對(duì)接;(6)完成三種模型任務(wù)的實(shí)現(xiàn)。當(dāng)前系統(tǒng)已經(jīng)正式發(fā)布商用,已有超過(guò)500位用戶。平臺(tái)簡(jiǎn)單易用,使用戶告別了復(fù)雜的環(huán)境配置,提高了資源利用率,大大降低了開(kāi)發(fā)成本。平臺(tái)還有完備的技術(shù)手冊(cè)和各階段實(shí)例,極大地方便了用戶的使用。
【圖文】:

架構(gòu)圖,架構(gòu),操作系統(tǒng),虛擬機(jī)技術(shù)


機(jī)的操作系統(tǒng);而虛擬機(jī)技術(shù)是在宿主機(jī)的操作系統(tǒng)上又虛擬出一套用于虛擬機(jī)逡逑的操作系統(tǒng),這樣無(wú)形中增加了開(kāi)銷[8】。此外,Docker具有快速啟動(dòng)、容易編寫逡逑鏡像文件等天然優(yōu)勢(shì),是當(dāng)今互聯(lián)網(wǎng)云服務(wù)應(yīng)用部署的載體[9]。圖2-1為Docker的逡逑架構(gòu)圖。逡逑圖2邋-邋]邋Docker架構(gòu)圖逡逑Figure邋2邋-邋1邋Docker邋Architecture邋Diagram逡逑7逡逑

計(jì)算服務(wù),舉例說(shuō)明,定制化,計(jì)算機(jī)視覺(jué)


逡逑圖2_2是三種服務(wù)的舉例說(shuō)明。其中IaaS層提供CPU服務(wù)器以及GPU服逡逑務(wù)器支持,其中包括物理機(jī)和虛擬機(jī);PaaS層包含了基于IaaS層而構(gòu)建的各種逡逑即時(shí)可用的服務(wù),如存儲(chǔ)服務(wù)、計(jì)算服務(wù)、數(shù)據(jù)資源服務(wù)、以及算法模型服務(wù)等;逡逑SaaS層則是基于PaaS層的多種服務(wù)整合而成的、可以對(duì)外提供更高級(jí)輸出能力逡逑的服務(wù),如計(jì)算機(jī)視覺(jué)服務(wù)、語(yǔ)言處理服務(wù)、OCR服務(wù)等等,一般提供API接逡逑口供移動(dòng)軟件或Web服務(wù)進(jìn)行調(diào)用,提供第三方開(kāi)發(fā)接入能力;將這些SaaS服逡逑務(wù)進(jìn)行定制化打包,,即可把云服務(wù)連接到現(xiàn)實(shí)場(chǎng)景中。如安防場(chǎng)景可能需要對(duì)視逡逑頻進(jìn)行視覺(jué)分析,對(duì)應(yīng)的垂直解決方案就是由定制化訓(xùn)練的計(jì)算機(jī)視覺(jué)服務(wù)所提逡逑供的。逡逑垂耀%方案逡逑SAAS逡逑i邐—,g11fi'—i逡逑邐邐邐——邋邐—邐邐—邐邐邐邐—邋邋邋邋邋邋逡逑1AAS逡逑—、逡逑IIESSI邋BSSI邋IES9I邋IBE9逡逑:、邋—邋邋邋邋邋邋邋邋—.—邐邐————...邋—邋邋邋邋.
【學(xué)位授予單位】:北京交通大學(xué)
【學(xué)位級(jí)別】:碩士
【學(xué)位授予年份】:2019
【分類號(hào)】:TP393.09;TP18

【參考文獻(xiàn)】

相關(guān)期刊論文 前1條

1 喻占武;鄭勝;李忠民;胡濱;;基于對(duì)象存儲(chǔ)的海量空間數(shù)據(jù)存儲(chǔ)與管理[J];武漢大學(xué)學(xué)報(bào)(信息科學(xué)版);2008年05期

相關(guān)碩士學(xué)位論文 前2條

1 陳星;基于CGroup的云數(shù)據(jù)庫(kù)資源管理策略研究[D];華中科技大學(xué);2016年

2 王斌斌;基于Protobuf的RPC系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)[D];電子科技大學(xué);2016年



本文編號(hào):2701630

資料下載
論文發(fā)表

本文鏈接:http://www.sikaile.net/kejilunwen/zidonghuakongzhilunwen/2701630.html


Copyright(c)文論論文網(wǎng)All Rights Reserved | 網(wǎng)站地圖 |

版權(quán)申明:資料由用戶28b12***提供,本站僅收錄摘要或目錄,作者需要?jiǎng)h除請(qǐng)E-mail郵箱bigeng88@qq.com