袁紹龍 發(fā)表于:13年10月29日 00:33 [原創(chuàng)] DOIT.com.cn
2013年10月29日,桂林。中國HPC 2013大會在桂林香格里拉酒店正式召開。本次會議由中國計算機學會主辦,中國計算機學會高性能計算專業(yè)委員會和桂林電子科技大學承辦。會議吸引了海內外多家學術機構科研人員、廠商與合作伙伴以及國內媒體人員參加。在本次大會上,來自美國新澤西州立大學的Manish Parashar Rutgers教授分享了主題《Big Data Challenges Simulation-Based Science》的主題演講。Manish Parashar Rutgers教授認為,傳統(tǒng)的HPC的數(shù)據(jù)傳輸途徑在大數(shù)據(jù)面前將面臨著挑戰(zhàn),我們需要重新思考數(shù)據(jù)管理傳輸途徑,并設計盡可能的工作流架構空間。

圖一:美國新澤西州立大學教授Manish Parashar Rutgers發(fā)表演講。

圖二:科學計算與大數(shù)據(jù)的愿景。

圖三:通過仿真進行科學發(fā)現(xiàn),科學仿真研究運行在高端計算系統(tǒng),并且伴隨有大量的數(shù)據(jù)產生。

圖四:傳統(tǒng)數(shù)據(jù)傳輸途徑面臨著挑戰(zhàn),主要包括數(shù)據(jù)分析挑戰(zhàn)、IO挑戰(zhàn)、數(shù)據(jù)移動挑戰(zhàn)以及能耗挑戰(zhàn)等。Manish Parashar Rutgers教授認為我們需要重新思考數(shù)據(jù)傳輸途徑。

圖五:混合數(shù)據(jù)傳輸需要CPU和IO速度之間的間隙、動態(tài)配置和執(zhí)行數(shù)據(jù)分析、提升IO寫性能。

圖六:設計盡可能大的數(shù)據(jù)流架構空間。

圖七:數(shù)據(jù)管理與分析示意圖。

圖八:為混合數(shù)據(jù)傳輸設計的共享數(shù)據(jù)空間。
