SciPlus 科研云是由上海科技創(chuàng)新資源數(shù)據(jù)中心主導研發(fā)的,順應科學數(shù)據(jù)特點的、具有分布式存儲、并行計算和大數(shù)據(jù)計算的容器云平臺。
經過一年多的努力,SciPlus 科研云已經初步完善云平臺的研究和建設,核心是聚焦支撐服務,為科學研究賦能?;诜植际皆朴嬎慵夹g構建的 SciPlus 科研云,具有資源共享、彈性收縮等云平臺共性,專注于管理、存儲,將計算資源和數(shù)據(jù)資源合理高效地整合到云端。
伴隨以互聯(lián)網、云計算和大數(shù)據(jù)為代表的數(shù)字經濟的迅速發(fā)展,科學數(shù)據(jù)已經成為傳播速度最快、影響面最廣、開發(fā)應用居前列的最大科技資源,科技創(chuàng)新進入了數(shù)據(jù)驅動時代,即先有大量的已知數(shù)據(jù),再通過計算得出未知理論。
科學數(shù)據(jù)作為一種關鍵戰(zhàn)略資源,重要性日益凸顯。但我國科學數(shù)據(jù)管理面臨問題:數(shù)據(jù)利用率低,數(shù)據(jù)流失嚴重,很多數(shù)據(jù)直接遞交進入國際數(shù)據(jù)庫;很多科研機構課題組缺乏對于數(shù)據(jù)長期保存的能力;對國際數(shù)據(jù)依賴大,在全球科學數(shù)據(jù)庫擁有數(shù)量的國家排名中位置不高。
上??萍紕?chuàng)新數(shù)據(jù)資源中心通過對國內科研需求的調研以及國際上科學數(shù)據(jù)共享建設的學習,決心建立滿足海量數(shù)據(jù)處理及存儲、共享、應用于一體的,包含機房、軟硬件基礎設施、操作系統(tǒng)等在內的區(qū)域性綜合型技術中心。
作為上??萍紕?chuàng)新數(shù)據(jù)資源中心的重要技術合作伙伴,青云QingCloud 具備成熟的軟件定義能力,以高密度、高彈性及異構環(huán)境支持,提供廣泛兼容且更高效的科學計算環(huán)境,實現(xiàn)數(shù)據(jù)靈活調用,服務科研協(xié)作協(xié)同,將容器技術用于無狀態(tài)型大量數(shù)據(jù)的并發(fā)式處理及流式處理。
SciPlus 科研云包括多云異構云管平臺、通用分布式計算框架、流式編程計算框架。多云異構云管平臺可以統(tǒng)籌和整合各方資源,形成聯(lián)邦云計算平臺。通用分布式計算框架是一種基于分布式存儲技術的容器技術,具有三個統(tǒng)一特性,即統(tǒng)一資源池、統(tǒng)一計算平臺、統(tǒng)一基礎設施技術棧,可按需擴展存儲能力,此計算框架還可以為不同計算任務及數(shù)據(jù)進行安全隔離。流式編排計算框架為復雜多步驟科學計算提供彈性支持,提升計算資源利用率,并根據(jù)計算資源使用情況,自動調度計算模塊,科研人員通過可視化界面了解計算過程,并隨時調整計算步驟。
上??萍紕?chuàng)新數(shù)據(jù)資源中心與青云QingCloud 一起積極創(chuàng)新應用模式,使用前瞻性技術,構建云基礎設施,為形成滿足未來科學發(fā)展的,集科學數(shù)據(jù)匯交、存儲、計算、共享與應用等功能于一體的區(qū)域性、綜合型、國際化的科學數(shù)據(jù)中心共同努力。青云QingCloud 在云原生時代貢獻力量,與上??萍紕?chuàng)新中心共同迎接挑戰(zhàn)、承擔使命,推動產學研深入結合,讓科學數(shù)據(jù)真正流動起來,并發(fā)揮促進國家科技創(chuàng)新和經濟社會發(fā)展的重要基礎作用。