成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

Alibaba Cloud Linux 2 開源后又有什么新動作?

開發 開發工具
2019 年 4 月,Alibaba Cloud Linux 2 (Aliyun Linux 2) 正式開源。時至今日,已經走過三個月的里程。

 2019 年 4 月,Alibaba Cloud Linux 2 (Aliyun Linux 2) 正式開源。時至今日,已經走過三個月的里程。在這段時間內,這個剛誕生不久的為阿里云 ECS 環境定制優化的 Linux 操作系統發行版的裝機量穩步上升。本文將重點介紹 Alibaba Cloud Linux 2 的特性更新及開發過程中的決策過程與質量保證細節。

[[271466]]

 

圖:Alibaba Cloud Linux 2 (官網產品名:Aliyun Linux 2) 在 阿里云 ECS 上過去一個月 vcpu 保有量增長示意圖 (僅展示趨勢,不代表絕對數值)

1. 開源與背景

2019 年 4 月正式對外開源的 Alibaba Cloud Linux 2 是下一代 Alibaba Cloud Linux (官網產品名 Aliyun Linux)操作系統發行版,以 CentOS 7、社區長期支持版 (LTS) 內核、其他社區版用戶態軟件及阿里巴巴多個開源內部產品等多個來源為上游,為云上應用程序環境提供 Linux 社區的最新增強功能,在提供云上最佳用戶體驗的同時,也針對阿里云基礎設施做了深度的優化和定制。

Alibaba Cloud Linux 2 開源的重要亮點是自帶的阿里云云內核(Cloud Kernel),同時也是開放在 GitHub 上的 Alibaba Cloud Linux Kernel 項目[1],它是開發團隊全體成員傾力打造的一款內核產品,旨在將阿里巴巴操作系統團隊多年技術積累分享給社區,也歡迎志同道合的開發者一同參與內核開發協作,共同創造更加有益的價值。

開源歷史

Alibaba Cloud Linux 2 的開發團隊是阿里巴巴操作系統團隊,前身是淘寶內核組,團隊成員大多是活躍在內核社區的開發者,九年來積累了深厚的操作系統和內核開發底蘊。

Alibaba Cloud Linux 產品是阿里技術商業化和開源思想完美結合的范例。在阿里云 ECS 產品中作為官方鏡像之一,Alibaba Cloud Linux 與 CentOS, Ubuntu 等社區發行版一同作為選項提供給客戶,并為 ECS 環境定制了多項特性和性能優化;不僅如此,Alibaba Cloud Linux 更天生帶著開源的基因。開放源碼是一種共享的黑客精神,從開放源碼運動誕生至今,無數優秀的開源產品給數以百萬計的軟硬件產品和云產品提供了強大的基礎系統底座支撐。站在這些巨人的肩膀上,我們繼承開源的精神,創造了 Alibaba Cloud Linux 產品,現在,又推出了 Alibaba Cloud Linux 2 操作系統發行版,并以相同協議開源,將我們的工作成果回饋到社區。

2017 年,基于 CentOS 7.3 源碼重新制作的 Aliyun Linux 17.01 上線,定制提供了較新的 4.4 版本內核,并完成整個操作系統發行版開源;

2018 年 10 月, Alibaba Cloud Linux 2 項目需求評審啟動,11 月項目正式立項;

2019 年 3 月 1 日, Alibaba Cloud Linux 2 Beta 發布,邀請天使客戶參與公測;

2019 年 4 月 2 日, Alibaba Cloud Linux 2 GA 正式發布,在 ECS 公有云產品官方鏡像列表上架;

同時, Alibaba Cloud Linux 2 發行版源碼在阿里 OPSX 軟件倉庫上架開源,內核源碼在 GitHub 開源。

2. 功能與優勢

2.1 初始版本功能

Alibaba Cloud Linux 2 最主要的功能更新是內核更新,基于內核社區長期支持(LTS)的 4.19 版本定制,在 CPU、內存、文件系統、IO、網絡、cgroup 等子系統上增加了大量適用于云場景的新特性、性能改進和重大缺陷修復,支持:

CPU:多項 CPU 安全修復,CPU 負載預測功能改進以增強調度均衡性;

內存:TLB 相關優化,writeback 相關優化,OOM-Killer 可靠性優化,空閑頁面跟蹤(Idle Page Tracking)特性支持;

文件系統:Ext4, XFS, Btrfs, NFS, Overlayfs 等重要文件系統的新特性支持及優化;

IO: 全新的異步 I/O 優化,異步 I/O 輪詢特性支持;

網絡:BBR,零拷貝 TCP API 支持,XDP 及 AF_XDP 機制支持;

cgroup: cgroup v2 支持, 基于 cgroup v2 的 cgroup writeback 支持, 和 blkio latency 支持。

此外,和內核相關的功能和改進還有:

內核啟動參數和系統配置參數調優,提升啟動速度和錯誤恢復相關的能力;

提供操作系統崩潰后的內核轉儲(Kdump)能力,用戶可以根據需要在線打開或者關閉該功能而無需重啟操作系統;

提供內核熱補丁升級(Live Patching)能力。

2.2 更新與發展

★ 2.2.1 系統鏡像更新

過去三個月,Alibaba Cloud Linux 2 發布了兩個鏡像更新。最新版本的系統的鏡像 ID 為 aliyun_2_1903_64_20G_alibase_20190619.vhd。

在最初發布的版本中,我們只允許用戶通過 ECS 控制臺購買的方式創建新的虛擬機。從 20190517 版本開始,我們提供了可獨立下載的系統鏡像文件,用戶可以更方便地基于 Alibaba Cloud Linux 2 系統鏡像創建并使用自己的虛擬機。我們希望藉由此方式,讓用戶更積極地參與到 Alibaba Cloud Linux 2 的使用中。

當前的獨立系統鏡像文件為 qcow2 格式,運行時支持基于 QEMU/KVM 的虛擬化環境,在虛擬機中使用 virtio 驅動。獨立鏡像下載后初始化需要依賴 cloud-init 機制,詳情請參考獨立鏡像說明文檔[2]。

★ 2.2.2 軟件包更新

除了鏡像迭代, Alibaba Cloud Linux 2 還持續保持系統 YUM 源的更新,用戶可以在操作系統內通過 yum update 命令維持軟件包的最新狀態。

內核方面的更新,我們持續基于社區 LTS 4.19 內核 rebase 代碼,加上自研功能和 Bug 修復。每三到四個星期,我們會快速迭代發布一個新的內核包。在迭代周期內,除了完成必要的穩定性測試,我們也會積極修復內核BUG并反饋到內核社區。在接下來的章節會詳述。

在操作系統發行版基礎系統(BaseOS)功能方面,除了常規同步上游社區的修復與更新,我們選擇性地更新了多個用戶態軟件包,以匹配最新的內核功能及其他日常使用需求,并且對這些包進行了必要的測試和獨立的維護。更新的軟件包包括但不限于:crash, e2fsprogs, xfsprogs, iproute 等。

此外,我們還與阿里巴巴內部其他團隊合作,持續將阿里巴巴的開源成果集成到 Alibaba Cloud Linux 2 中并輸出給用戶。目前集成并保持更新的阿里巴巴內部軟件有:

Alibaba Dragonwell:Ali-JDK 的開源版本,6月下旬剛剛發布 GA 版本,我們及時跟進集成并完成了軟件測試后,輸出到 Alibaba Cloud Linux 2;

PouchContainer:阿里巴巴開發的高效容器引擎;

Dragonfly client:開源的基于P2P鏡像及文件分發系統;

Tengine:在 Nginx 的基礎上,針對大訪問量網站的需求,添加了很多高級功能和特性的 Web 服務器項目;

aliyun-cli:開源的用于管理阿里云資源的工具;

ossfs:用于將阿里云 OSS buckets 掛載到本地的工具;

eBCC:社區版 BCC 的功能擴展。

用戶可以在操作系統內通過 yum install 命令直接安裝對應的軟件包。

★ 2.2.3 Cloud Kernel 社區貢獻

Alibaba Cloud Linux 2 是一個建立在社區協作基礎上的開源操作系統發行版項目,同時也非常重視回饋社區。

Cloud Kernel 是 Alibaba Cloud Linux 2 最重要的開源內核,也是在 GitHub 上的開源項目。如前所述,我們保持三周到四周的迭代周期,在每個迭代都保持對外推送最新開發補丁。在迭代開發過程中,我們多次測得 4.19 版本 的 LTS 內核的 BUG,并及時向社區報告,或者通過定位將主線內核的修復移植回 LTS 內核,或者主動向社區提交補丁。

對于測試中發現的 LTS 內核 BUG,我們首先會根據已劃分的內核領域進行初步判斷,如果難以直接定位,則會進行 bisect 尋找最有可能出現問題的代碼。經過初步的分析之后,根據問題的難易程度,我們會選擇直接向社區提交修復補丁或者進行討論。

有一種常見的情況是,某個內核 BUG 在主線內核中已經修復,但是由于種種原因,該修復沒有出現在 4.19 LTS 內核中,這種情況下,我們會選擇先將主線內核修復的代碼 cherry-pick 到 Cloud Kernel 的開發分支中,并且向 4.19 LTS 內核的維護者、以及對應內核子系統的維護者發送一封 backport 請求的郵件,提示維護者及時將該修復移植回來。

截止6月30日,團隊在開發 Cloud Kernel 過程中,向內核社區提交并被接收的內核補丁有 19 個。此外,我們還積極向知名的社區測試套件 LTP, xfstests 等項目貢獻了多個修復補丁以及新測試用例。

除此之外,Cloud Kernel 還與 Intel 0-day 項目等開源項目達成合作,0-day 項目團隊主動向 Cloud Kernel 推送了多個修復建議及補丁,均已被接受合入開發分支。

★ 2.2.4 內核重要功能更新

由于 Aliyun Linux 2 的內核需要運行在通用的 ECS 系統上,或者用戶自定義的基于 QEMU/KVM 的虛擬機中,保持內核功能的通用性一直是我們在增加 Cloud Kernel 功能時的原則。在開發自研內核功能時,我們會對功能進行充分的評估,如果該功能的實現方式過于 Hack,或者引入該功能會造成內核維護成本急劇上升,我們會從架構的完整性考慮而酌情放棄該功能的開發。下面是兩個近期自研的內核功能的例子:

(a) cgroup writeback v1

在4月份 GA 版本發布中,我們提到了基于 cgroup-v2 的 cgroup writeback 功能是 LTS 4.19 內核的一項重要更新;發布后,我們收到多個客戶反饋,亟需此功能在 cgroup-v1 上的實現。在深入分析之后,我們意識到,cgroup writeback 功能天生適合 cgroup-v2 的平坦結構,卻也不是不可能在 cgroup-v1 上實現。關鍵點在于在使用 cgroup-v1 時,需要人為保證對應的 blkcg 和 memcg 兩個 cgroup 保持合理對應的映射關系。在梳理清楚 cgroup 映射關系限制條件后,我們完成了 cgroup writeback v1 在 Cloud Kernel 上的實現,并在 GitHub 上發布[3] 對應的更新;同時為了保證用戶對于使用時的映射關系約束有足夠的了解,我們在內核中默認將此功能保持關閉,并制作了相關文檔[4]說明。

(b) TCP TIME-WAIT 狀態超時接口

這個功能允許用戶動態調整 TCP 連接的 TIME-WAIT 狀態超時時間,允許其被設置為小于默認的 60s 值,從而在大量短連接應用中,提高應用性能。這個功能實際上是早期版本的 Taobao Kernel 已經實現并對外提供的功能,在決定是否要將此功能在 Aliyun Linux 2 上重新移植一遍時,我們重新評估了該功能的風險。在翻閱了 RFC 793 標準中 “The TCP Quiet Time Concept” 相關的概念后,我們認為該功能不符合 TCP "Quiet Time" 的概念,在不知曉該風險的情況下使用可能會造成系統不穩定;但是由于該功能確實被客戶需要,且功能結構、代碼實現較為獨立,維護成本和風險可控。所以我們在內部實現時,顯性備注了接口使用風險后,將功能在 GitHub 上發布[5]。

3. 研發過程中的質量保證

Alibaba Cloud Linux 2 使用了大量社區的功能,核心組件 Cloud Kernel 沒有使用 Red Hat 內核版本,而是使用了基于內核社區 4.19 LTS 版本。眾所周知,社區版的內核的穩定性一直為人所詬病,我們在采用此版本內核時,也有一樣的擔心。因此在研發過程中,我們對 Cloud Kernel 進行了積極的測試。

首先,得益于阿里巴巴操作系統團隊中有多個內核子系統維護者、內核測試套件的維護者或前維護者,我們對于開源社區主流的測試套件對內核子系統的覆蓋率及測試細節掌握較為全面。通過這些開源測試套件,我們發現了不少社區版內核的問題,并為社區貢獻了多個補丁。

其次,在研發過程中,我們遵循“自己吃自己的狗糧”的原則,要求研發同學自行完成單元測試用例開發,并且集成到內部測試平臺中進行回歸測試。在測試平臺的選擇上,基于研發開發測試代碼的便利性原則,我們選擇了成熟的測試框架 Beaker[6],這是一個源自 Red Hat 的社區開源測試框架項目,可以很方便地集成測試代碼,并且輸出直觀的測試結果。我們將自己開發完成的測試代碼放到 Beaker 測試平臺上,進行自動化的每晚構建回歸測試(Nightly Regression Testing)。在每個迭代中,我們也發現了不少內核回歸缺陷,都及時向社區提交了補丁或者參與了修復討論,為穩定 4.19 LTS 內核做出了自己的貢獻。

此外,在阿里巴巴操作系統團隊內部有專業的質量保證團隊。質量保證團隊的測試平臺集成了 40多個測試套件,覆蓋了功能性測試、性能測試、冒煙及穩定性測試等各方面。在 Alibaba Cloud Linux 2 迭代周期進入交付測試階段,會由質量保證團隊負責相關測試,測試結果經過 Review 通過后,則可進行迭代發布。

4. Alibaba Cloud Linux 2 后續計劃

持續開發新特性,也積極將開源社區的最新成果帶給 Alibaba Cloud Linux 2 用戶,并回饋開源社區;

進一步完善相關文檔,包括初學者文檔,吸引更多用戶參與操作系統與內核開發;

分享操作系統及內核相關的技術文章,籌建線上與線下活動,增強操作系統與內核領域的交流。

5. 結語

操作系統最近幾個月成為了熱門的話題,此時推出這樣一篇介紹 Alibaba Cloud Linux 2 發行版的技術文章還顯得比較應景。作為一個技術人,在日常的工作中,堅持技術的錘煉,樂于思考與分享,對操作系統和內核領域不斷鉆研,才能立足于瞬息萬變的技術之潮中,并且游刃有余。

Alibaba Cloud Linux 2 由阿里巴巴操作系統團隊負責開發,誠招有志之士參與,共同在云上操作系統領域探索更多的可能。簡歷可發至 caspar@linux.alibaba.com

附:本文所用鏈接

[1] Cloud Kernel GitHub Page:

https://github.com/alibaba/cloud-kernel

[2] 獨立鏡像說明文檔:

https://github.com/alibaba/cloud-kernel/wiki/Aliyun-Linux-2-On-Premise-Image

[3] cgroup writeback v1 發布:

https://github.com/alibaba/cloud-kernel/releases/tag/alk-release-12

[4] cgroup writeback v1 功能說明文檔:

https://github.com/alibaba/cloud-kernel/wiki/cgroup-writeback-v1-interface

[5] tcp_tw_timeout 接口發布:

https://github.com/alibaba/cloud-kernel/releases/tag/alk-release-13

[6] Beaker 測試平臺:

https://beaker-project.org/

【本文為51CTO專欄作者“阿里巴巴官方技術”原創稿件,轉載請聯系原作者】

 

戳這里,看該作者更多好文

責任編輯:武曉燕 來源: 51CTO專欄
相關推薦

2017-10-25 16:04:35

2021-10-14 15:03:47

網絡安全谷歌攻擊

2021-06-04 14:25:29

鴻蒙HarmonyOS應用

2021-11-15 12:14:49

零信任網絡安全網絡攻擊

2009-12-10 08:57:44

Linux新版驅動

2023-09-21 18:16:57

Linux內核系統

2022-06-13 15:49:38

LinuxLinux 5.19

2023-06-25 14:58:08

C++語言Rust

2013-12-27 11:02:07

微信認證收費

2013-12-25 10:24:42

微信認證收費微信店鋪系統

2023-10-31 17:57:52

C++編程語言

2017-04-12 23:01:47

2012-04-06 13:51:01

RIM黑莓

2020-03-31 18:50:33

微軟Windows操作系統

2021-11-16 22:56:05

Windows 11Windows微軟

2025-01-06 09:43:36

SpringAI?模型
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 久久久91精品国产一区二区三区 | 武道仙尊动漫在线观看 | 国产黄色大片在线免费观看 | 成人亚洲网站 | 麻豆精品国产91久久久久久 | 精品久久一 | 日韩国产一区二区 | 亚洲精品一区二区三区四区高清 | 精品乱码一区二区三四区视频 | 中文成人无字幕乱码精品 | 精品欧美一区二区三区久久久 | 成人在线观看黄 | 国产精品成人一区二区三区 | 精品一区国产 | 日韩一区二区三区四区五区 | 欧美三级电影在线播放 | 成人午夜视频在线观看 | 丁香久久| 午夜影院在线播放 | 欧美国产视频 | 91精品国产色综合久久 | 中文字幕亚洲欧美日韩在线不卡 | 亚洲美女视频 | 国产一级片一区二区三区 | 日本福利视频 | 国产精品久久久久久久久久免费看 | 992人人草 | 成人免费网站www网站高清 | 久久精品天堂 | 亚洲国产成人av | 91免费福利视频 | 欧美日韩不卡合集视频 | 国产精品午夜电影 | 欧美一级免费观看 | 亚洲成人久久久 | 视频国产一区 | 国产原创视频 | 91视频免费 | 免费黄色的视频 | 午夜理伦三级理论三级在线观看 | 国产精品久久777777 |