谷歌云為拜耳作物科學(xué)將Kubernetes引擎擴展到15000個節(jié)點

谷歌云今天發(fā)布的一項新的案例研究顯示，這家科技巨頭的云部門，特別是它的谷歌Kubernetes引擎，可以迅速擴大規(guī)模，以滿足密集的數(shù)據(jù)處理需求。

該案例涉及到拜耳作物科學(xué)數(shù)據(jù)科學(xué)家，他們需要大量的數(shù)據(jù)處理能力來處理基因型數(shù)據(jù)，以決定向客戶提供哪些產(chǎn)品——在這個案例中是種子。數(shù)據(jù)處理之前是在BCS決定切換到谷歌云的前提下完成的。

通過與BCS的數(shù)據(jù)科學(xué)家合作，谷歌能夠?qū)KE提升到15000個節(jié)點——是開源Kubernetes所支持節(jié)點的三倍——以提供更好的數(shù)據(jù)處理能力。至少對BCS來說，結(jié)果是顯著的，它允許該公司在四天內(nèi)處理完整個數(shù)據(jù)集，而以前需要兩周的時間。

在案例研究中,Maciek Ro?acki,產(chǎn)品經(jīng)理在谷歌云,解釋說,可伸縮性是一個核心的產(chǎn)品要求。隨著越來越多的企業(yè)采用GKE，公司一直在努力推動GKE集群的極限，使其超越支持的極限。

據(jù)稱，額外的規(guī)模對運營大型互聯(lián)網(wǎng)服務(wù)的公司有利。其好處包括簡化基礎(chǔ)設(shè)施管理，特別是對于批處理，縮短數(shù)據(jù)處理時間，以及吸收資源需求的大幅增長。

“這15000 -節(jié)點的成就更重要的,當(dāng)你考慮到IT系統(tǒng)的可伸縮性不僅僅是它支持多少個節(jié)點,“Ro?acki說?！耙粋€可擴展的系統(tǒng)需要能夠使用大量的資源，并仍然滿足其目的?！?/p>

使GKE用戶運行的工作負(fù)載需要超過5000在一個集群節(jié)點,Ro?acki解釋說,Googleengaged一群設(shè)計合作伙伴為一個封閉的早期訪問計劃。

“由于其掌握的15000個節(jié)點,BCS也節(jié)省了大量的時間,“Ro?acki補充道。在15000個節(jié)點上有240,000個cpu, BCS每小時可以處理約15,000,000,000個基因型。這給BCS提供了進行模型修訂、快速再處理整個數(shù)據(jù)積壓或快速添加基于新數(shù)據(jù)集的推斷的靈活性，因此他們的數(shù)據(jù)科學(xué)家可以繼續(xù)工作，而不是等待批作業(yè)完成?！?/p>