首頁科技 > 正文

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

2021-07-06由 美通社 發表于 科技

北京2021年7月5日 美通社 —— 6月26日,由

浪潮資料與開源基礎設施基金會聯合籌備

,以“來自中國的貢獻”為主題的OpenInfra Q2 meetup正式拉開帷幕。

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

會上,來自開源基礎設施基金會及木蘭開源社群的代表分別就國內開源發展態勢和企業技術貢獻等內容展開深入分享與探討。

來自浪潮資料、烽火通訊、九州雲以及英特爾國內的資深技術專家

,分享並深入剖析了各家在開源社群貢獻新開源專案的未來的開源專案並深入探討了開源社群未來的發展願景。

開源不止理想 更多落地實踐待關注

“伴隨雲計算發展對行業的深度賦能,如何圍繞創新實踐案例以及落地場景來搭建行之有效的開源開放技術,是基金會關注的重要方向之一,因為開源軟體不止是理想與風花雪月,更重要的是在商業實踐方面紮根落地。”開源基礎設施基金會李昊陽總結道。

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

開源基礎設施基金會 李昊陽

基於此今年8月如約而至的OpenInfra  Days China的主題將會鎖定“下一個十年的開源基礎設施”,集中面向5G新基建、工業智慧化轉型、雲原生基礎設施以及雲網融合與開源治理等話題深度延展,“當然,我們依然是將OpenStack、邊緣計算、硬體加速網路與儲存等技術作為開源社群長期發展的重要目標。”李昊陽進一步補充道。

開放、融合、敏捷、智慧:詳解OpenStack社群貢獻實踐與最佳化

過去一年時間,人們驚喜地發現,越來越多的企業和組織積極參與到了開源基礎設施社群。以浪潮資料為例,一直堅持初心,從實踐中來到實踐中去,將來自客戶的真實需求及在研發專案上的創新實踐以貢獻開源專案或highlights的形式回饋開源社群並初具技術領導力。

浪潮資料研發部總經理亓開元在活動致辭中表示,一直以來浪潮秉承

“開放、融合、敏捷、智慧”

的理念,主要圍繞高效能、高併發、高可用、資源融合、多雲融合、雲數智融合以及智慧運維與智慧服務等方面持續進行最佳化創新,為各行各業提供數字轉型、智慧升級、融合創新基礎設施。

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

浪潮資料研發部總經理亓開元

“尤其在標準化的基準測試工作方面,以大規模的測試驗證與SpecCloud基準測試為代表,雲海研發團隊從中不斷技術完善並自我創新。透過500節點以及1000節點兩次大規模測試認證,不但檢驗了雲海OS在大規模場景下的

敏捷交付、極致擴充套件性、效能最佳化以及智慧運維

等能力,更為業界在大規模落地實踐中提供了參考設計的規範和高可用、高效率、高可靠的規格。”亓開元說。

在技術創新、產品研發以及社群貢獻方面,浪潮資料始終努力推進OpenStack產業化程序,連續近幾個版本社群貢獻國內第一併將對標Horizon的全新OpenStack Dashboard專案貢獻木蘭社群進行孵化,為更多使用OpenStack專案的企業提供幫助。

在工信部信通院組織的大規模能力評測中,浪潮雲海Insight憑藉其叢集聯邦技術、跨機房排程和超大規模叢集的管控能力,不但一次性通過了

5000+節點

的大規模叢集測試,成績更是優異並穩居行業內

Top3

充分證明以OpenStack為核心構建的雲基礎設施,不僅滿足傳統核心應用的需求,還在極大程度上滿足新興的大資料、機器學習在上雲過程中的複雜場景要求,以雲海OS產品為代表的商業版產品廣泛應用於

金融、政府、教育、銀行

等諸多領域,並獲得一致好評。

在活動中,以浪潮資料雲計算架構師張百林為代表的浪潮雲海OS技術研發團隊還深入分享了OpenStack社群貢獻實踐與最佳化。

詳解了如何貢獻社群,如何參與社群峰會等基本情況,

還著重結合浪潮雲海1000節點大規模雲數智融合實踐

,全面介紹了在高可用、計算儲存功能方面的最佳化實踐,內容涵蓋計算、儲存、網路等方面,重點對批次建立虛機等待網絡卡超時和訊息佇列DHCP Agent訊息積壓等致使虛擬機器建立失敗、Qcow2格式映象啟動虛擬機器慢、大規模主機故障疏散錯亂等主要疑難問題進行了深入的闡釋,對比分析OpenStack社群原生計算、儲存、高可用等功能的最佳化及價值體現,並提出未來基於OpenStack技術創新達成的規劃目標。

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

浪潮資料雲海OS技術研發團隊

浪潮資料雲計算高階研發工程師宋文平:

基於非同步IO和多佇列的磁碟效能最佳化,有效提升了vGPU效能並降低GPU損耗,最佳化資源同步機制,效能提升高達30%。

浪潮資料雲計算高階研發工程師蘇正偉:

針對大規模主機故障這個比較難解決的問題,我們透過引入設計了自適應的恢復控制規則,透過排隊、熔斷、限流、降級重試等方式,做到發生故障時優先保障高價值的雲主機優先疏散,透過熔斷和限流在雲平臺不具備故障恢復時來確保雲平臺的穩定性和高可靠性。

浪潮資料雲計算高階研發工程師海鑫:

在雲端儲存方向,cinder模組透過自研智慧映象快取演算法,在提高快取命中率的同時可降低映象卷建立耗時80%。manila模組新增檔案儲存型別修改,使用者訊息查詢增強、限制共享例項大小等功能,極大地提高了平臺易用性。

源於開源、饋於開源:實力詮釋Venus專案核心技術

浪潮資料雲計算架構師逄立業為與會技術研發人員詳盡介紹了

Venus專案的關鍵架構與核心技術

OpenInfra Q2 meetup震撼收官 浪潮資料全景呈現社群硬核技術貢獻

浪潮資料雲計算架構師逄立業

Venus作為浪潮貢獻OpenStack社群的日誌管理專案,可以一站式滿足OpenStack日誌的採集、清洗、索引、分析、告警、視覺化、生成報告等需求,幫助運維人員快速檢索問題,掌握平臺的執行健康度。

簡單來說在檢索工作上,主要提供了簡單易用的檢索方式,可以做到檢索一切日誌資料,定位日誌上下文;分析上主要實現日誌關聯、欄位數值統計,提供多場景、多維度的視覺化分析報表;告警層面則將搜尋轉化為主動告警,實現海量日誌中錯誤的“大海撈針”;定位主要是透過建立知識圖譜和呼叫的鏈式關係,結合演算法實現故障的快速定位。

以日誌預處理為例。對於日誌資料,OpenStack社群從開始開發就制定了嚴格的日誌規範,大部分模組都遵守此規範,即社群規定的日誌格式為 。此種日誌很容易進行預處理,拆分成多種維度進行索引。

如今開源到OpenStack社群的Venus專案現已具備基本的日誌分析處理功能,總結一下主要為:

全文/多維度檢索:針對全文或已索引維度進行關鍵詞檢索(可模糊匹配)

多維度統計/展示:對已索引的一個或多個維度的日誌條數進行統計並展示

典型錯誤分析:整合典型的錯誤分析,例如MariaDB連線錯誤等

錯誤日誌告警:當週期內錯誤日誌條數超過閾值,進行告警並通知

呼叫鏈分析:對系統中的呼叫,根據global_requestid進行流程分析

API執行狀態/耗時:對記錄API呼叫狀態的模組,可以統計API執行的狀態和時間消耗

整體而言,Venus透過集合廣大使用者在日誌領域的需求和實踐,提供各場景日誌分析並整合演算法和知識圖譜實現故障的快速定位,構建完備的日誌運維場景,並在未來計劃引用機器學習演算法,快速定位IT故障及根因,提高運維效率以及平臺管理的水平。

活動中,英特爾亞太研發有限公司資料平臺事業部解決方案架構師高仲、九州雲研發工程師高瀚翔以及烽火通訊的架構師李煜琦,還分別就OpenCloud根植於開源生態的實踐與創新、Skyline開發核心的理念以及易擴充套件、易定製、易衍生、易融合的多雲管理架構等內容展開了深入解析。

一直以來,浪潮雲海都透過對開源開放技術的攻堅,突破開源版本在效能、大規模管理能力方面的瓶頸。面向未來,浪潮資料將持續秉承

“源於開源、饋於開源”

的理念,打造雲海OS硬核技術實力,圍繞智算作業系統核心引擎的產品定位,以OpenStack、Kubernetes等開放基礎設施為底座,持續構建起雲數智一體化解決方案,助力業界共同構建開放統一的智慧基礎設施,推動企業數字化、智慧化轉型。

頂部