成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

江蘇鴻程大數據:基于鯤鵬DevKit開發數據報告生成平臺,數據庫查詢效率提升30%?

開發 開發工具
鯤鵬原生開發是指使用鯤鵬DevKit的原生開發能力,如鯤鵬開發框架(含場景化SDK)、編譯調試工具、云測服務、調優&診斷工具等,在鯤鵬平臺上開發新軟件/新功能,充分發揮鯤鵬架構優勢

政府和企業在撰寫數據報告時,常面臨報告編寫工作量大、撰寫耗時長、數據指標計算分析繁雜、易于出錯等問題,迫切需要一個能夠實現各種復雜報告的一鍵生成、自動推送的“神器”,讓工作人員從冗長復雜的報表填坑工作中解放出來。隨著大數據和人工智能技術的逐漸成熟,一鍵式報告生成平臺應運而生,通過對業務數據的自動化分析計算,構建出數據指標與文本生成規則,靈活生成各類數據分析報告,全面提升政府和企業工作效率,實現高效科學決策。?

江蘇鴻程大數據技術與應用研究院(以下簡稱:鴻程大數據)成立于2019年1月,是依托南京大學軟件新技術國家重點實驗室、國家高新技術企業,致力于大數據及人工智能等領域的科技創新,深耕全鏈路大數據,人工智能自動化建模等技術,服務于政府、金融、互聯網等國計民生行業。?

鴻程大數據自主研發的一鍵式自動化數據報告生成平臺,通過大數據分析、智能文本引擎,“一鍵式”解決數據的“查詢—分析—結論”問題,有效提高編寫報告的效率和數據分析深度,助力用戶快速決策。該平臺可提供數據報告自動生成、規則引擎靈活定義、數據多維查詢展示、多源整合數據接入、智能歸因分析推薦等多種配置,能快速響應業務需求,解決數據量大、來源多、種類復雜、難融合等問題,適用政府企業等多行業場景需求。?


如今,各種應用數據海量、高速增長的態勢數據類型越發繁多,報告生成平臺的部署日益復雜,且考慮到安全風險系數遞增等因素,承載一鍵式自動化數據分析報告生成平臺的底層基礎設施也面臨更多挑戰:?

  1. 高可用:報告的生成需要實時將查詢數據提供給分析引擎,平臺運轉的連續性是其重要保障,因此對性能要求很高;?
  2. 低時延:高并發訪問場景下需要實現對https高并發請求實時響應,保障https請求在毫秒級完成。?

鯤鵬天然的多核多并發、高安全等優勢,能夠很好的滿足一鍵報告生成平臺海量數據處理、低時延、高可靠等要求,并提供完善的鯤鵬DevKit開發套件以及專業服務,能夠幫助用戶快速完成應用的遷移、開發、編譯和調優;基于以上考慮,鴻程大數據選擇鯤鵬作為一鍵式自動化數據分析報告生成平臺的數字底座,以滿足海量數據的融合與計算,為用戶提供更加高效便捷的數據采集與管理。?


一鍵式自動化數據報告生成平臺賬架構圖?

基于鯤鵬代碼遷移工具1人天/應用快速遷移一鍵式自動化數據分析報告生成平臺?

項目初期,技術人員需要將一鍵報告生成平臺快速遷移到鯤鵬,該應用涉及代碼10+行,且需要依賴大數據底座,涉及底層基礎運行時(runtime)、基礎開發庫數十個,引入開源依賴Jar包20+個,經分析,人工編譯這些依賴包并驗證依賴包相關聯的各組件約需要10人/天才能完成,人力投入成本較大。而利用鯤鵬DevKit提供的代碼遷移工具針對20+個開源Jar包進行依賴掃描,代碼修改建議一鍵替換,平均1人天/應用完成原有業務遷移。?


【通過鯤鵬DevKit代碼遷移工具掃描獲取遷移報告】?

基于鯤鵬開發框架快速開發基于KAE加解密引擎的https訪問功能,頁面訪問時延減少約30%?

在遷移完成之后,為了進一步防止信息泄露,保障用戶數據安全,鴻程大數據選擇在鯤鵬平臺上開發基于OpenSSL加解密的https訪問功能。由于原有X86平臺的開發經驗和兼容生態并不能直接復制到鯤鵬平臺之上,開發人員在應用開發過程中也遇到了多重挑戰:?

  • 不熟悉鯤鵬平臺的編譯選項和函數,不清楚如何在編程過程中充分發揮架構優勢,提高開發效率,增強軟件性能;?
  • 手動查找鯤鵬依賴文件兼容版本效率低,無法快速獲取鯤鵬兼容生態?

基于上述挑戰,鴻程大數據開發人員在新功能的開發過程中,使用了鯤鵬DevKit提供的鯤鵬開發框架,在工具的幫助下快速創建應用工程,并一鍵引入鯤鵬加速庫-KAE加解密模塊,使能鯤鵬處理器的加解密加速引擎,系統對外服務的平均頁面響應時延由92毫秒降低為69.3毫秒,系統響應時延性能提升30%?


【鯤鵬硬件加速工程工程創建】?

https訪問功能需要在保障數據安全性的同時,盡可能降低時間上的損耗,以滿足應用頁面高效響應的需求,因此該功能對性能要求極高。開發人員在新功能的開發過程中,還使用了鯤鵬DevKit提供的性能分析工具,對系統占用CPU、內存、網絡、IO等指標進行分析和調優。技術人員使用系統性能分析功能發現應用系統進行數據分析時,對應進程會在多個CPU核上來回切換,導致CPU核會跨NUMA節點訪問內存產生性能損耗。針對此問題,開發人員根據工具的優化建議改進程序,將進程與物理核進行綁定,避免CPU核跨NUMA節點帶來性能損失。優化后MySQL數據庫的tpmC提升22%,并行任務執行不會產生性能瓶頸。?


使用鯤鵬開發框架及鯤鵬DevKit性能分析工具優化前后性能對比圖?


經過上述幾項性能提升,使得一鍵式自動化數據分析報告生成平臺整體數據處理能力提升約22%,頁面響應時間減少30%,極大的提高了報告生成效率,提升了用戶體驗,為用戶節省更多時間成本。?

江蘇鴻程「一鍵式自動化數據分析報告生成平臺」目前已應用于政府、企業、金融等相關領域。該方案也在鯤鵬應用創新大賽2022江蘇初創賽道獲得了一等獎榮譽。這不僅驗證了該平臺的高性能、高兼容性、完整性和成熟度等技術優勢,也標志著江蘇鴻程技術與應用研究院有限公司產品在鯤鵬計算應用創新、產業融合、市場應用方面達到領先水平。?

作為鯤鵬計算產業生態重要伙伴,江蘇鴻程已與江蘇鯤鵬·N騰生態創新中心建立長期合作關系。未來,還將進一步融合相關資源打造更具競爭力的行業解決方案,促進行業數字化轉型。?

鯤鵬原生開發是指使用鯤鵬DevKit的原生開發能力,如鯤鵬開發框架(含場景化SDK)、編譯調試工具、云測服務、調優&診斷工具等,在鯤鵬平臺上開發新軟件/新功能,充分發揮鯤鵬架構優勢,從而獲得開發效率/運行性能提升。鯤鵬DevKit將持續增強開發體驗、優化工具能力,提升鯤鵬開發效率,助力千行百業數字化轉型。?




責任編輯:張誠
相關推薦

2024-12-13 10:50:00

數據開發攜程

2023-02-23 10:17:41

鯤鵬

2022-12-07 21:28:40

2022-06-30 17:22:08

開發者

2023-10-27 17:45:53

鯤鵬

2023-03-07 14:19:36

鯤鵬

2022-12-08 09:14:38

2023-03-01 15:39:30

鯤鵬

2016-09-04 15:14:09

攜程實時數據數據平臺

2018-09-03 13:49:33

大數據房租租金

2023-02-27 17:45:53

數據處理

2022-06-29 16:40:48

科學計算

2023-08-29 10:53:36

2022-07-25 17:27:19

數據庫

2014-12-18 11:19:00

移動行業數據報告騰訊
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 亚洲精品在线免费观看视频 | 中文区中文字幕免费看 | 九九色综合 | 午夜成人免费视频 | 国产精品99久久久久久久vr | 嫩草懂你的影院入口 | 久久夜夜| 一级做a爰片性色毛片16美国 | 国产精品久久久久久久久久东京 | 国产精品黄色 | 亚洲一区二区欧美 | 中文字幕视频在线 | 精品国产一区二区三区性色 | 国产精品久久久久久久久久久久冷 | 国产免费麻豆视频 | 91精品国产综合久久国产大片 | 在线播放一区 | 91一区| 亚洲高清在线观看 | com.国产| 97精品国产手机 | 高清国产午夜精品久久久久久 | 在线国产视频 | 蜜臀久久99精品久久久久久宅男 | 国产9久 | 久久免费大片 | 天天综合久久 | 欧美不卡一区二区 | 91在线观看免费视频 | 国内自拍偷拍 | 久久久精品一区二区三区四季av | 99免费精品| 久久久国产一区二区三区 | 日本中文字幕一区 | 中文字幕乱码一区二区三区 | 国产精品不卡 | 国产污视频在线 | 日本一区二区高清不卡 | 欧美欧美欧美 | 亚洲成人精品一区二区 | 国产精品成人一区二区三区夜夜夜 |