QEMU架構(gòu)淺析-創(chuàng)新互聯(lián)

一、QEMU簡(jiǎn)介及與KVM等虛擬化的關(guān)系

QEMU是“Quick Emulator”的縮寫，是一個(gè)用C語言編寫的開源虛擬化軟件。本文的目的是描述本人所理解的QEMU技術(shù)架構(gòu)的見解，并以此拋磚引玉。眾所周知，QEMU的源代碼開發(fā)文檔非常稀少，描述內(nèi)部結(jié)構(gòu)和工作機(jī)理的文檔更是鳳毛麟角，一般的開發(fā)人員想要從事QEMU的開發(fā)工作，通常只能從源代碼入手。因此，對(duì)于技術(shù)人員來說，了解QEMU是一項(xiàng)艱巨的任務(wù)。

北湖網(wǎng)站建設(shè)公司創(chuàng)新互聯(lián)公司,北湖網(wǎng)站設(shè)計(jì)制作，有大型網(wǎng)站制作公司豐富經(jīng)驗(yàn)。已為北湖上千多家提供企業(yè)網(wǎng)站建設(shè)服務(wù)。企業(yè)網(wǎng)站搭建\成都外貿(mào)網(wǎng)站制作要多少錢，請(qǐng)找那個(gè)售后服務(wù)好的北湖做網(wǎng)站的公司定做！

QEMU有幾種虛擬化模式。首先，它可以使用基于內(nèi)核的虛擬機(jī)（KVM）執(zhí)行x86處理器硬件虛擬化，以幾乎比擬硬件本機(jī)的速度執(zhí)行運(yùn)算任務(wù)。其次，它可以通過機(jī)器代碼的實(shí)時(shí)轉(zhuǎn)換來模擬其他處理器以用于虛擬機(jī)運(yùn)行不同平臺(tái)的操作系統(tǒng)。最后，它可以使用實(shí)時(shí)轉(zhuǎn)換為其他架構(gòu)運(yùn)行簡(jiǎn)單的程序，類似于Linux中的Wine。因?yàn)镼EMU沒有圖形用戶界面（GUI），而其提供的核心能力又是關(guān)鍵而重要的，因此通常用作更復(fù)雜的虛擬化管理器的一部分。比如，我們經(jīng)常使用的開源VirtualBox、Xen等虛擬化產(chǎn)品，其核心底層的虛擬化部分就有集成和使用QEMU，此外，主流的KVM虛擬化也是集成和使用QEMU的主力虛擬化管理器系統(tǒng)。

從KVM的角度來說，KVM（Kernel Virtual Machine）是Linux的一個(gè)內(nèi)核驅(qū)動(dòng)模塊，它能夠讓Linux主機(jī)成為一個(gè)Hypervisor（虛擬機(jī)監(jiān)控器）。在支持VMX（Virtual Machine Extension）功能的x86處理器中，Linux在原有的用戶模式和內(nèi)核模式中新增加了客戶模式，并且客戶模式也擁有自己的內(nèi)核模式和用戶模式，虛擬機(jī)就是運(yùn)行在客戶模式中。KVM模塊的職責(zé)就是打開并初始化VMX功能，提供相應(yīng)的接口以支持虛擬機(jī)的運(yùn)行。KVM通過調(diào)用Linux本身內(nèi)核功能，實(shí)現(xiàn)對(duì)CPU的底層虛擬化和內(nèi)存的虛擬化，使Linux內(nèi)核成為虛擬化層。KVM在2007年2月被導(dǎo)入Linux 2.6.20內(nèi)核中。從存在形式來看，它包括兩個(gè)內(nèi)核模塊：kvm.ko和kvm_intel.ko（或kvm_amd.ko），本質(zhì)上，KVM是管理虛擬硬件設(shè)備的驅(qū)動(dòng)，該驅(qū)動(dòng)使用字符設(shè)備/dev/kvm（由KVM本身創(chuàng)建）作為管理接口，主要負(fù)責(zé)vCPU的創(chuàng)建、虛擬內(nèi)存的分配、vCPU寄存器的讀寫以及vCPU的運(yùn)行。

從QEMU的角度來說，QEMU（Quick Emulator)本身并不包含或依賴KVM模塊，而是一套由Fabrice Bellard編寫的模擬計(jì)算機(jī)的自由軟件。QEMU虛擬機(jī)是一個(gè)純軟件的實(shí)現(xiàn)，可以在沒有KVM模塊的情況下獨(dú)立運(yùn)行，但是性能比較低。QEMU有整套的虛擬機(jī)實(shí)現(xiàn)，包括處理器虛擬化、內(nèi)存虛擬化以及I/O設(shè)備的虛擬化。在不需要KVM加速的情況下，QEMU通過一個(gè)特殊的“重編譯器”對(duì)特定的處理器的二進(jìn)制代碼進(jìn)行翻譯，從而具有了跨平臺(tái)的通用性。QEMU有兩種工作模式：系統(tǒng)模式，可以模擬出整個(gè)電腦系統(tǒng)，另一種是用戶模式，可以運(yùn)行不同與當(dāng)前硬件平臺(tái)的其他平臺(tái)上的程序（比如在x86平臺(tái)上運(yùn)行跑在ARM平臺(tái)上的程序）。目前最新版本是4.x。從QEMU角度來看，虛擬機(jī)運(yùn)行期間，QEMU通過KVM模塊提供的系統(tǒng)調(diào)用接口進(jìn)行內(nèi)核設(shè)置，由KVM模塊負(fù)責(zé)將虛擬機(jī)置于處理器的VMX模式運(yùn)行。QEMU使用了KVM模塊的虛擬化功能，為自己的虛擬機(jī)提供硬件虛擬化加速以提高虛擬機(jī)的性能。

而現(xiàn)在流行的KVM虛擬化平臺(tái)，就是在修改了QEMU代碼，把他模擬CPU、內(nèi)存的代碼換成KVM，而網(wǎng)卡、顯示器等留著，因此QEMU+KVM就成了一個(gè)完整的虛擬化平臺(tái)。由于KVM運(yùn)行在內(nèi)核空間，只是內(nèi)核模塊，QEMU運(yùn)行在用戶空間，實(shí)際模擬創(chuàng)建，管理各種虛擬硬件（磁盤，網(wǎng)卡，顯卡等）。從KVM的角度來說，用戶沒法直接跟內(nèi)核模塊交互，需要借助用戶空間的管理工具，因此需要借助QEMU這個(gè)運(yùn)行在用戶空間的工具。KVM和QEMU相輔相成，QEMU通過KVM達(dá)到了硬件虛擬化的速度，而KVM則通過QEMU來模擬設(shè)備并實(shí)現(xiàn)和內(nèi)核空間的KVM的交互，雖然這個(gè)交互并不僅僅只有QEMU能夠辦到。此外，由于QEMU模擬IO設(shè)備效率不高的原因，現(xiàn)在常常采用半虛擬化的virtio方式來虛擬IO設(shè)備。

綜上，理解了QEMU和KVM的關(guān)系，也就理解了VirtualBox、Xen等虛擬化產(chǎn)品集成和使用QEMU的關(guān)系了。

二、QEMU架構(gòu)及組成

QEMU的架構(gòu)如下圖所示，由幾個(gè)基本的組件組成：

圖 QEMU架構(gòu)圖

如圖所示，QEMU由以下幾個(gè)部分組成：

l?Hypervisor控制仿真

l?Tiny Code Generator（TCG）在虛擬機(jī)器代碼和宿主機(jī)代碼之間進(jìn)行轉(zhuǎn)換。

l?軟件內(nèi)存管理單元（MMU）處理內(nèi)存訪問。

l?磁盤子系統(tǒng)處理不同的磁盤映像格式

l?設(shè)備子系統(tǒng)處理網(wǎng)卡和其他硬件設(shè)備

下面將對(duì)這些組件介紹。

2.1 Hypervisor管理程序

Hypervisor（虛擬機(jī)管理程序）是一種創(chuàng)建和運(yùn)行虛擬機(jī)的虛擬機(jī)監(jiān)視器。 QEMU中的Hypervisor（虛擬機(jī)管理程序）從磁盤映像加載二進(jìn)制機(jī)器代碼，使用TCG將其轉(zhuǎn)換為本機(jī)機(jī)器代碼，連接到虛擬或?qū)嶋H設(shè)備，并啟動(dòng)軟件MMU，然后開始在磁盤映像中模擬操作系統(tǒng)。其中，TCG和軟件MMU是實(shí)現(xiàn)虛擬化CPU和內(nèi)存的關(guān)鍵。

而集成KVM后，QEMU將使用Linux內(nèi)核的KVM功能以純模式執(zhí)行虛擬機(jī)。KVM基本上是Linux內(nèi)核中的Hypervisor（虛擬機(jī)管理程序）。它可以并行運(yùn)行多個(gè)操作系統(tǒng)。QEMU可以在KVM中啟動(dòng)一個(gè)新線程以執(zhí)行模擬操作系統(tǒng)，然后KVM控制執(zhí)行。從這部分來說，KVM的Hypervisor（虛擬機(jī)管理程序）替換掉了QEMU的Hypervisor（虛擬機(jī)管理程序）。

3.2微代碼生成器（TCG）

在QEMU中，Tiny Code Generator（TCG）將源處理器機(jī)器代碼轉(zhuǎn)換為虛擬機(jī)運(yùn)行所需的機(jī)器代碼塊（如x86機(jī)器代碼塊）。從物理硬件的架構(gòu)和角度上來說，不可能在一個(gè)處理器上運(yùn)行為另一個(gè)處理器的指令集架構(gòu)（ISA）編譯的機(jī)器代碼，例如，x86處理器上的ARM機(jī)器代碼。因此，引入中間環(huán)節(jié)對(duì)不同的處理器指令集架構(gòu)（ISA）進(jìn)行翻譯和轉(zhuǎn)換是實(shí)現(xiàn)虛擬化通用性的技術(shù)途徑和解決方案。在Tiny Code Generator（TCG）中，這些已經(jīng)翻譯的代碼塊放在轉(zhuǎn)換緩存中，并通過跳轉(zhuǎn)指令將源處理器的指令集（ISA）和目標(biāo)處理器的指令集（ISA）鏈接在一起。當(dāng)Hypervisor（虛擬機(jī)管理程序）在執(zhí)行代碼時(shí)，存放于轉(zhuǎn)換緩存中的鏈接指令可以跳轉(zhuǎn)到指定的代碼塊，并且執(zhí)行可以在不同的已翻譯代碼塊上運(yùn)行，直到需要翻譯新塊為止。在執(zhí)行的過程中，如果遇到了需要翻譯的代碼塊，執(zhí)行動(dòng)作就會(huì)暫停并回會(huì)跳回到Hypervisor（虛擬機(jī)管理程序），Hypervisor（虛擬機(jī)管理程序）就會(huì)使用和協(xié)調(diào)TCG對(duì)需要進(jìn)行二進(jìn)制翻譯的源處理器指令集（ISA）進(jìn)行轉(zhuǎn)換和翻譯并存儲(chǔ)到轉(zhuǎn)換緩存中。

下圖顯示了QEMU的TCG工作原理：

圖.微代碼生成器工作原理

在TCG在運(yùn)行的過程中存在一個(gè)小缺點(diǎn)，即它無法正確運(yùn)行自修改代碼，因?yàn)樗鼪]有將修改后的代碼頁進(jìn)行標(biāo)記，再次運(yùn)行時(shí)需要重新翻譯。這影響了QEMU的二進(jìn)制運(yùn)行效率，從另外一個(gè)角度來說，這也增加了一定的安全性。自修改代碼在軟件世界中容易被漏洞利用。特別是緩沖區(qū)溢出攻&擊等內(nèi)存損壞漏洞，這些漏洞利用威脅代理（例如后門）提供的特殊代碼覆蓋易受攻&擊的應(yīng)用程序代碼，如果已經(jīng)被覆蓋的代碼已經(jīng)被運(yùn)行（并因此被緩存），出了正常運(yùn)行的會(huì)導(dǎo)致漏洞攻&擊利用外，更多的時(shí)候則會(huì)導(dǎo)致TCG運(yùn)行和翻譯失敗，從而導(dǎo)致程序復(fù)現(xiàn)異?；虮罎?。

此外，在翻譯的過程中，如果新處理器使用的寄存器多于x86處理器并且具有許多復(fù)雜指令，那么對(duì)TCG進(jìn)行編程以處理和適應(yīng)新的CPU仿真就可能需要大量的工作。目前來說，QEMU所支持的大部分處理器都擁有部分相同的指令集。例如，“MOV”指令幾乎存在于所有處理器中，并且可以簡(jiǎn)單地復(fù)制，除非CPU寄存器中存在一些位大小差異。例如，在32位處理器上模擬64位處理器可能需要許多額外的指令，這也需要更多時(shí)間在TCG轉(zhuǎn)換器中進(jìn)行編程。

在QEMU的源代碼中，有一個(gè)名為'tcg'的子目錄，其中包含將機(jī)器指令轉(zhuǎn)換為相應(yīng)的x86機(jī)器指令的代碼。此代碼是一個(gè)用C編寫的簡(jiǎn)單翻譯狀態(tài)機(jī)。還有用于內(nèi)存訪問和跳轉(zhuǎn)的特殊轉(zhuǎn)換，因?yàn)樗鼈兛梢陨蓪?duì)軟件內(nèi)存管理單元的調(diào)用。而虛擬化CPU和內(nèi)存也往往是在一起的，因?yàn)閺谋举|(zhì)上來說，CPU的工作就是對(duì)內(nèi)存的區(qū)域數(shù)據(jù)進(jìn)行搬運(yùn)，CPU是內(nèi)存的搬運(yùn)工。在QEMU保護(hù)代碼塊之外的其他內(nèi)存區(qū)域。機(jī)器代碼中的跳轉(zhuǎn)和分支也必須到達(dá)正確的存儲(chǔ)器地址。

所以通過二進(jìn)制翻譯技術(shù)，針對(duì)CPU的仿真和虛擬化就非常簡(jiǎn)單了。TCG和Hypervisor（虛擬機(jī)管理程序）能夠?qū)崿F(xiàn)基于CPU的仿真，其中，其CPU仿真流程如下圖所示：

從上圖我們可以看到，針對(duì)CPU的仿真和虛擬化其實(shí)就是將源處理器的指令集（ISA）轉(zhuǎn)換和翻譯成目標(biāo)處理器的指令集（ISA）。CPU仿真和虛擬化就是通過中間的轉(zhuǎn)換和翻譯來實(shí)現(xiàn)的，由此，針對(duì)CPU的虛擬化的第一種技術(shù)就完全實(shí)現(xiàn)了。這種二進(jìn)制翻譯技術(shù)是最早的CPU虛擬化技術(shù)，誕生了VMware這樣的虛擬化巨頭，也誕生了QEMU這樣的開源虛擬化鼻祖。

2.3硬件設(shè)備

虛擬機(jī)的硬件設(shè)備要求可以通過直接連接主機(jī)中的實(shí)際物理設(shè)備或通過QEMU中的硬件設(shè)備仿真來實(shí)現(xiàn)。與硬件相關(guān)的大多數(shù)QEMU代碼位于目錄“hw”中。

在QEMU中，存在兩種使用硬件設(shè)備的方式：直通模式使用主機(jī)實(shí)際物理設(shè)備和QEMU的設(shè)備驅(qū)動(dòng)仿真實(shí)現(xiàn)的模擬虛擬設(shè)備。如果采用直通方式使用實(shí)際的物理設(shè)備，那么就會(huì)搶占主機(jī)的設(shè)備使用權(quán)，并且其他虛擬機(jī)也將無法使用該物理設(shè)備。在直通模式中，虛擬機(jī)可以直接訪問USB總線或PCI總線，并可以直接與設(shè)備通信。一般情況下，采用直通模式的物理設(shè)備都是很難進(jìn)行QEMU仿真的設(shè)備，比如網(wǎng)絡(luò)攝像頭、串行和并行端口等。其他設(shè)備因?yàn)榇蟛糠痔摂M機(jī)都會(huì)使用，而且很難與主機(jī)共享，例如網(wǎng)絡(luò)設(shè)備，因此大都會(huì)使用QEMU模擬仿真的虛擬設(shè)備。比如在虛擬機(jī)的網(wǎng)絡(luò)設(shè)備中，可通過模擬網(wǎng)卡來解決，從而在網(wǎng)絡(luò)堆棧上添加額外的層。此外，QEMU可以選擇連接到Linux內(nèi)核中的“virtio”半虛擬化驅(qū)動(dòng)程序，這意味著Linux內(nèi)核處理虛擬機(jī)和硬件設(shè)備之間的輸入/輸出，而不采用QEMU的模擬設(shè)備進(jìn)行中轉(zhuǎn)和傳輸（僅用作中介）。

2.4磁盤映像

QEMU可以處理幾種不同的磁盤映像格式。選格式為raw或qcow2。Raw是一種非常簡(jiǎn)單的格式，它將文件系統(tǒng)中的字節(jié)逐字節(jié)存儲(chǔ)在文件中。大多數(shù)其他仿真器都支持此格式。Qcow2是QEMU自己的圖像格式，對(duì)小圖像很有用。并且支持磁盤映像壓縮以及捕獲磁盤映像狀態(tài)的快照。還支持另外兩種格式：在VirtualBox中使用的vdi和在VMWare中使用的vmdk。

QEMU的磁盤映像通過其存儲(chǔ)IO協(xié)議棧來進(jìn)行支持，其存儲(chǔ)協(xié)議棧如下圖所示：

圖 QEMU存儲(chǔ)協(xié)議棧

從QEMU的存儲(chǔ)協(xié)議棧來說，應(yīng)用程序和虛擬機(jī)內(nèi)核的工作類似于裸機(jī)。虛擬機(jī)通過仿真硬件與QEMU交互，并將IO執(zhí)行情況的控制流和數(shù)據(jù)流交互給QEMU，QEMU代表虛擬機(jī)對(duì)磁盤鏡像文件執(zhí)行I / O操作。而從主機(jī)內(nèi)核層面上，主機(jī)內(nèi)核會(huì)將虛擬機(jī)I / O視為一種用戶空間的應(yīng)用程序IO請(qǐng)求進(jìn)行正常的執(zhí)行處理。

2.5軟件MMU

傳統(tǒng)處理器中的內(nèi)存管理單元（MMU）處理對(duì)計(jì)算機(jī)內(nèi)存位置的訪問。當(dāng)處理器想要訪問某個(gè)存儲(chǔ)器地址時(shí)，MMU獲取該地址的內(nèi)容。此內(nèi)容可以來自處理器芯片上的本地快速緩存，來自隨機(jī)存取存儲(chǔ)器（RAM）或來自光盤。它甚至可以做出一些關(guān)于緩存某些內(nèi)存位置的控制決定。

QEMU有一個(gè)基于軟件的MMU，其工作方式與硬件MMU類似。它使用地址轉(zhuǎn)換緩存，其中包含訪客地址、主機(jī)地址和偏移值，以提高轉(zhuǎn)換速度。它還允許智能鏈接代碼塊，以便在沒有內(nèi)存故障的情況下實(shí)現(xiàn)更快的執(zhí)行，其中必須重新加載和重新轉(zhuǎn)換內(nèi)存塊。

在尋找在QEMU中運(yùn)行的虛擬機(jī)的漏洞時(shí)，軟件MMU是否正在進(jìn)行翻譯和正確放置塊會(huì)是其測(cè)試和Fuzz的重點(diǎn)。

三、總結(jié)

其實(shí)搞清楚QEMU的技術(shù)架構(gòu)和實(shí)現(xiàn)細(xì)節(jié)，我們需要弄明白QEMU的架構(gòu)和組成，以及每個(gè)組件的作用及運(yùn)行機(jī)制。此外，我們還需要了解每個(gè)組成組件之間的相互交互關(guān)系，從數(shù)據(jù)流的角度來看，其主要是控制流和數(shù)據(jù)流；從IO角度來看，其主要是網(wǎng)絡(luò)IO和存儲(chǔ)IO，從技術(shù)實(shí)現(xiàn)機(jī)制來看，其主要是虛擬化CPU和內(nèi)存以及存儲(chǔ)、網(wǎng)絡(luò)協(xié)議棧的實(shí)現(xiàn)。本文有許多的未盡事宜，待請(qǐng)后續(xù)補(bǔ)充。

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn，海內(nèi)外云服務(wù)器15元起步，三天無理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

名稱欄目：QEMU架構(gòu)淺析-創(chuàng)新互聯(lián)
轉(zhuǎn)載源于：http://bm7419.com/article30/dssepo.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供App設(shè)計(jì)、企業(yè)網(wǎng)站制作、微信小程序、搜索引擎優(yōu)化、外貿(mào)網(wǎng)站建設(shè)、響應(yīng)式網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)