公有云技術日益成熟和穩定，各種服務越來越完善，逐漸被各行業的客戶所接受。越來越多的專業計算的客戶也開始將目光轉向公有云來解決算力不足的問題。想要充分的利用云的優勢，高效的完成計算任務，需要從應用優化到底層架構適配一套端到端的解決方案。本期速石科技產品總監張先軍將與大家分享速石專業計算云平臺如何從各個層面幫助客戶多快好省的完成計算任務的。
張先軍：速石科技產品總監，超過12年的IT行業經驗，曾在EMC，HP， 華為3com任職，熟悉虛擬化和云計算技術，專注于企業級IT產品定義和解決方案設計。
首先先來介紹一下某客戶分享的一個他們常用的計算任務。這個任務輸入有數個大小從幾百MB到GB的規模的文件，在計算過程中，文件會被轉換和切割，最終會形成百萬級別的計算任務?？蛻粢呀泴υ撚嬎闳蝿兆隽艘恍﹥灮?，如多進程并行化的改造。這樣的計算規模，在本地的一臺高配的機器上，運行100萬個計算任務需要50天左右的時間。這還要祈禱中間千萬不要出現斷電什么意外情況。客戶提供了一個約1萬計算任務的測試文件，在某公有云上啟動了一臺和本地配置相似的實例，實測用了約11小時。這些任務都屬于計算密集型應用，任務運行起來CPU的占有率都在95%以上。在我們做測試的云上起這樣的實例大約需要18元一小時。這樣算下去，如果算50天的話，也是一筆不小的成本。所以，客戶的需求很明顯，如何將本地的算力無縫擴展到云，利用云端的超大資源池優勢，又快又省的完成計算？
Fastone Compiler
速石Fastone compiler框架，它能自動分析各個任務間的依賴關系，將當前傳統應用轉換成云原生應用的工作流，轉換過程可快速完成。經過了Fastone compiler的轉換，計算任務就可以被充分的并行化，集群化，充分利用云端超大規模計算資源池的優勢了。
Fastone Virtual Cloud
那么怎么在云端建立超大規模資源池呢，用什么云，用哪個云，這些由Fastone Virtual Cloud來搞定。它自動整合本地和云端資源成統一資源池，多云支持，自動按需在云端啟動計算任務所需的超大規模資源池。為了讓應用能無縫的在本地和云之間流動，我們使用了容器來封裝應用。
成本
再來看看成本，主流云廠商有類似的AWS spot instance的技術，讓用戶可以以很低的價格使用本來很貴的實例。如果使用的人很多，云廠商資源不足或者有人出價更高等情況，這些運行實例可能會被強行中斷。本來要跑50天呢，說斷就斷的話，誰敢用啊。所以速石專業計算云平臺使用機器學習算法自動預測spot instance的供需及價格情況，自動調整和遷移受影響的任務和資源，用戶再也不用擔心spot被搶了。
速石專業計算平臺融合以上各種技術，對用戶完全透明。對專業用戶來說，通過計算平臺運行任務只需要：傳應用，傳數據，提交任務。然后就可以坐等結果了。速石專業計算平臺的設計理念是：屏蔽底層復雜的IT細節，讓專業的人專注于專業的事。
最后讓我們來看看結果，本次測試通過速石專業的計算平臺執行一萬個計算任務，同時，為了測試的擴展性，我們通過策略指定了運行任務的CPU Core數。下圖是最終的結果。從圖中可以看出，經過優化后，成本降低的同時，計算時間大大下降，計算效率隨著系統算力的上升而線性上升。以540 core的運行結果為例。最終的運算時間是45分鐘，效率約提升了14倍。讓我們來算一下成本，當時的spot實例的價格穩定維持在4.26元左右，計算成本約為：4.26 x 15 x 45 / 60 = 48元（注：忽略了少量的存儲及其它成本）。計算一下沒有改造過的計算成本：11 x 18.141 = 200元。成本下降了76%。按照這樣的線性擴展能力，百萬級別的任務計算在一小時內完成也不是不可能了。
看到這里，您是否初步了解了速石專業計算平臺強大的功能了呢。有關該產品的更多詳細信息，請關注速石微信公眾號。
- END -
關于我們：
速石科技專為有高算力需求的企業級用戶提供一站式算力運營解決方案，幫助用戶提升10-20倍業務運算效率，降低成本達到75%以上，加快市場響應速度。目前主要應用領域包括藥物研發、基因測序分析、半導體行業的EDA仿真及電路設計、汽車行業的自動駕駛開發、虛擬碰撞試驗以及AI人工智能。
想了解更多，可添加小F微信（ID：imfastone）
文章推薦：
>>AWS、阿里云、Azure、Google Cloud、華為云、騰訊云 各種云服務器價格收費對比（上）
