Linux操作系统常见问题汇总
1.系統(tǒng)啟動流程。
uboot -> kernel -> 根文件系統(tǒng)。
uboot第一階段屬于匯編階段:
定義入口(start.S):uboot中因為有匯編階段參與,因此不能直接找main.c。
設(shè)置異常向量:當(dāng)硬件發(fā)生故障的時候CPU會強制PC指針指向?qū)?yīng)的異常入口執(zhí)行代碼。
設(shè)置CPU為SVC模式(設(shè)置CPU速度、時鐘頻率和中斷控制寄存器)。
初始化內(nèi)存控制器(MMU),實現(xiàn)虛擬地址到物理地址的映射。
跳轉(zhuǎn)到lowlevel_init函數(shù),關(guān)看門狗,供電鎖存,時鐘初始化。
初始化堆棧,DDR。
uboot第二階段屬于C語言階段:
uboot的第二階段就是要初始化剩下的還沒被初始化的硬件。主要是SoC外部硬件(譬如iNand、網(wǎng)卡芯片····)、uboot本身的一些東西(uboot的命令、環(huán)境變量等····)。
調(diào)用一系列的初始化函數(shù):init_sequence里的init函數(shù)是一個函數(shù)指針數(shù)組,數(shù)組中存儲了很多個函數(shù)指針,會去調(diào)用其他初始化函數(shù)。
cpu_init(CPU內(nèi)部的初始化),board_init(x210開發(fā)板相關(guān)的初始化),interrupt_init(初始化定時器),env_init(環(huán)境變量有關(guān)的初始化),
init_baudrate(初始化串口通信的波特率),serial_init(初始化串口),display_banner(用來串口輸出顯示uboot的信息)。
uboot啟動內(nèi)核:
啟動內(nèi)核第一步:加載內(nèi)核到DDR中,boot只需要從SD卡的kernel分區(qū)去讀取內(nèi)核鏡像到DDR中即可。
啟動內(nèi)核第二步:校驗內(nèi)核格式(zImage格式,uImage格式)。
啟動內(nèi)核第三步:內(nèi)核傳參。
內(nèi)核啟動過程:
內(nèi)核啟動的匯編階段:
__lookup_processor_type:讀取出硬件的CPU ID號,__lookup_machine_type:本函數(shù)校驗的是機器碼,
__vet_atags:用來校驗uboot通過tag給內(nèi)核傳的參數(shù)。
內(nèi)核啟動C語言階段:
lockdep_init:鎖定依賴,是一個內(nèi)核調(diào)試模塊,處理內(nèi)核自旋鎖死鎖問題相關(guān)的。
boot_init_stack_canary:用來防止棧溢出。
cgroup_init_early:control group,內(nèi)核提供的一種來處理進程組的技術(shù)。
local_irq_disable:屏蔽當(dāng)前CPU上的所有中斷。
lock_kernel:獲得大內(nèi)核鎖,該鎖可以用來鎖定整個內(nèi)核。
page_address_init:函數(shù)初始化高端內(nèi)存頁表池的鏈表。
打印內(nèi)核版本信息。
最后會執(zhí)行init進程,init進程剛開始運行的時候是內(nèi)核態(tài),然后他自己運行了一個用戶態(tài)下面的程序后把自己強行轉(zhuǎn)成了用戶態(tài)。
init進程會去掛載根文件系統(tǒng),打開控制臺,訪問一個設(shè)備,就要去打開這個設(shè)備對應(yīng)的文件描述符。譬如/dev/fb0這個設(shè)備文件就代表LCD顯示器設(shè)備。
根文件系統(tǒng):
根文件系統(tǒng)是特殊用途的文件系統(tǒng),文件系統(tǒng)是一些代碼,是一套軟件,這套軟件的功能就是對存儲設(shè)備的扇區(qū)進行管理,將這些扇區(qū)的訪問變成了對目錄和文件名的訪問.
2.什么是操作系統(tǒng)
操作系統(tǒng)是運行在計算機上最重要的一種軟件,它管理計算機的資源和進程以及所有的硬件和軟件。它為計算機硬件和軟件提供了一種中間層,使應(yīng)用軟件和硬件進行分離。
3.操作系統(tǒng)的主要功能
進程管理: 進程管理的主要作用就是任務(wù)調(diào)度,在單核處理器下,操作系統(tǒng)會為每個進程分配一個任務(wù)。
內(nèi)存管理:內(nèi)存管理主要是操作系統(tǒng)負(fù)責(zé)管理內(nèi)存的分配、回收。
設(shè)備管理:根據(jù)確定的設(shè)備分配原則對設(shè)備進行分配,使設(shè)備與主機能夠并行工作。
文件管理:有效地管理文件的存儲空間,合理地組織和管理文件系統(tǒng)。
提供用戶接口:操作系統(tǒng)提供了訪問應(yīng)用程序和硬件的接口。
4.操作系統(tǒng)的主要目的
- 管理計算機資源,這些資源包括 CPU、內(nèi)存、磁盤驅(qū)動器、打印機等。
- 提供一種圖形界面,就像我們前面描述的那樣,它提供了用戶和計算機之間的橋梁。
- 為其他軟件提供服務(wù),操作系統(tǒng)與軟件進行交互,以便為其分配運行所需的任何必要資源。
5.什么是進程,什么是線程?
進程是系統(tǒng)中正在運行的一個程序,程序一旦運行就是進程,進程可以看成程序執(zhí)行的一個實例。
線程是CPU獨立運行和獨立調(diào)度的基本單位,一個進程可以擁有多個線程,線程是進程的一個實體,是進程的一條執(zhí)行路徑。
6.進程和線程之間的區(qū)別是什么
因為進程擁有獨立的堆??臻g和數(shù)據(jù)段,所以每當(dāng)啟動一個新的進程必須分配給它獨立的地址空間,系統(tǒng)開銷比較大。
而線程不一樣,線程擁有獨立的堆??臻g,但是共享數(shù)據(jù)段,它們彼此之間使用相同的地址空間,共享大部分?jǐn)?shù)據(jù),比進程更節(jié)儉,開銷比較小,切換速度也比進
程快,效率高。
通信機制上面,正因為進程之間互不干擾,相互獨立,進程的通信機制相對很復(fù)雜,譬如管道,信號,消息隊列,共享內(nèi)存,套接字等通信機制,而線程由于
共享數(shù)據(jù)段所以通信機制很方便。
7.多進程和多線程的優(yōu)缺點
進程優(yōu)點:每個進程互相獨立,不影響主程序的穩(wěn)定性,子進程崩潰沒關(guān)系;
進程缺點:需要跨進程邊界,如果有大數(shù)據(jù)量傳送,就不太好,適合小數(shù)據(jù)量傳送、密集運算多進程調(diào)度開銷比較大。
線程優(yōu)點:能適當(dāng)提高程序的執(zhí)行效率,能適當(dāng)提高資源的利用率。
線程缺點:每個線程與主程序共用地址空間,受限于2GB地址空間;
8.什么時候使用進程,什么時候使用線程
當(dāng)頻繁創(chuàng)建和銷毀的時候,當(dāng)然是線程。
當(dāng)考慮的安全性的問題時候,是進程.
提高cpu利用率,是線程。
9.線程在一定條件下,狀態(tài)會發(fā)生變化。線程一共有以下5種狀態(tài)
新建狀態(tài):新創(chuàng)建了一個線程對象。
就緒狀態(tài):線程只等待獲取CPU的使用權(quán)。
運行狀態(tài):就緒狀態(tài)的線程獲取了CPU使用權(quán)。
阻塞狀態(tài):阻塞狀態(tài)是線程因為某種原因放棄CPU使用權(quán),暫時停止運行。
死亡狀態(tài):線程執(zhí)行完了或者因遇到error或exception退出了run()方法,該線程結(jié)束生命周期。
10.孤兒進程,僵尸進程和守護進程
孤兒進程:指的是在其父進程執(zhí)行完成或被終止 后仍繼續(xù)運行的一類進程。
僵尸進程:如果子進程退出,而父進程并沒有調(diào)用 wait() 或 waitpid()去回收的一類進程。
守護進程:是運行在后臺的一種特殊進程。守護進程一般在系統(tǒng)啟動時開始運行,除非強行終止,否則直到系統(tǒng)關(guān)機都保持運行。
11.進程之間通信的途徑有哪些?
無名管道( pipe ):管道是一種半雙工的通信方式,數(shù)據(jù)只能單向流動,而且只能在具有親緣關(guān)系的進程間使用。
有名管道 (named pipe) :有名管道也是半雙工的通信方式,但是它允許無親緣關(guān)系進程間的通信。
高級管道(popen):將另一個程序當(dāng)做一個新的進程在當(dāng)前程序進程中啟動,則它算是當(dāng)前程序的子進程,這種方式我們成為高級管道方式。
消息隊列( message queue ) :消息隊列是由消息的鏈表,存放在內(nèi)核中并由消息隊列標(biāo)識符標(biāo)識。消息隊列克服了信號傳遞信息少、管道只能承載無格式字節(jié)流以及緩沖區(qū)大小受限等缺點。
共享內(nèi)存( shared memory ) :共享內(nèi)存就是映射一段能被其他進程所訪問的內(nèi)存,這段共享內(nèi)存由一個進程創(chuàng)建,但多個進程都可以訪問。
套接字( socket ) :套解口也是一種進程間通信機制,與其他通信機制不同的是,它可用于不同機器間的進程通信。
12.進程上下文
進程上文:其是指進程由用戶態(tài)切換到內(nèi)核態(tài)是需要保存用戶態(tài)時cpu寄存器中的值,進程狀態(tài)以及堆棧上的內(nèi)容,即保存當(dāng)前進程的進程上下文,
以便再次執(zhí)行該進程時,能夠恢復(fù)切換時的狀態(tài),繼續(xù)執(zhí)行。
進程下文:其是指切換到內(nèi)核態(tài)后執(zhí)行的程序,即進程運行在內(nèi)核空間的部分。
13.LINUX中的虛擬地址空間
防止不同進程同一時刻在物理內(nèi)存中運行而對物理空間的爭奪采用虛擬地址空間。虛擬內(nèi)存使得不同進程運行過程中,
每個進程只把自己目前需要的虛擬內(nèi)存空間映射存儲到物理空間中。
實際上,每個進程創(chuàng)建時,內(nèi)核只為進程創(chuàng)建虛擬內(nèi)存的布局,并不立即把虛擬內(nèi)存和磁盤文件
之間的映射拷貝到物理內(nèi)存中,等到運行時才會來拷貝數(shù)據(jù)。
?
14.linux怎么進行內(nèi)存管理?
對內(nèi)存的分配和管理,也就是平時應(yīng)用層malloc和內(nèi)核層vmalloc、kmalloc之類的內(nèi)存申請的管理
虛擬內(nèi)存和物理內(nèi)存之間的轉(zhuǎn)換
15.驅(qū)動中操作物理絕對地址為什么要先ioremap?
因為在內(nèi)核中操作的都是虛擬地址,內(nèi)核訪問不到物理地址,只能通過ioremap映射為虛擬地址,內(nèi)核才能訪問此內(nèi)存空間
16.操作系統(tǒng)為什么要分內(nèi)核態(tài)和用戶態(tài)
為了安全,在CPU的一些指令中,有的指令如果用錯,就會導(dǎo)致整個系統(tǒng)崩壞,分了內(nèi)核態(tài)和
用戶態(tài)之后,當(dāng)用戶需要操作這些指令的時候,內(nèi)核為其提供了API,可以通過系統(tǒng)調(diào)用陷入
內(nèi)核,讓內(nèi)核去執(zhí)行這些操作。
17.死鎖產(chǎn)生的原因
死鎖產(chǎn)生的原因大致有兩個:資源競爭和程序執(zhí)行順序不當(dāng)
18.死鎖產(chǎn)生的必要條件
互斥條件:每個資源都被分配給了一個進程或者資源是可用的。
保持和等待條件:已經(jīng)獲取資源的進程被認(rèn)為能夠獲取新的資源。
不可搶占條件:分配給一個進程的資源不能強制的從其他進程搶占資源,它只能由占有它的進程顯示釋放。
循環(huán)等待:死鎖發(fā)生時,系統(tǒng)中一定有兩個或者兩個以上的進程組成一個循環(huán),循環(huán)中的每個進程都在等待下一個進程釋放的資源。
19.insmod 一個驅(qū)動模塊,會執(zhí)行模塊中的哪個函數(shù)?rmmod呢?這兩個函數(shù)在設(shè)計上要注意哪些?遇到過卸載驅(qū)動出現(xiàn)異常沒?是什么問題引起的?
insmod調(diào)用init函數(shù),rmmod調(diào)用exit函數(shù)。設(shè)計時需要嚴(yán)格記住相關(guān)內(nèi)存的操作后必須在exit中進行釋放,
避免內(nèi)存泄漏。如存儲,ioremap,定時器,工作隊列等等。卸載失敗原因是因為有進程正在使用該模塊,這跟我們在windows下拔出正在使用的U盤類似。
20.linux引入模塊的好處。
該機制有助于縮短模塊的開發(fā)周期。
21.copy_to_user()和copy_from_user()主要用于實現(xiàn)什么功能?一般用于file_operations結(jié)構(gòu)的哪些函數(shù)里面?
由于內(nèi)核空間和用戶空間是不能互相訪問的,如果需要訪問就必須借助內(nèi)核函數(shù)進行數(shù)據(jù)讀寫。
copy_to_user():完成內(nèi)核空間到用戶空間的復(fù)制。
copy_from_user():是完成用戶空間到內(nèi)核空間的復(fù)制。
一般用于file_operations結(jié)構(gòu)里的read,write,ioctl等內(nèi)存數(shù)據(jù)交換作用的函數(shù)。當(dāng)然,如果ioctl沒有用到內(nèi)存數(shù)據(jù)復(fù)制,那么就不會用到這兩個函數(shù)。
?
22.內(nèi)核函數(shù)mmap的實現(xiàn)原理,機制?
mmap函數(shù)實現(xiàn)把一個文件映射到一個內(nèi)存區(qū)域,從而我們可以像讀寫內(nèi)存一樣讀寫文件,他比單純調(diào)用read/write也要快上許多。
在某些時候我們可以把內(nèi)存的內(nèi)容拷貝到一個文件中實現(xiàn)內(nèi)存?zhèn)浞?#xff0c;當(dāng)然,也可以把文件的內(nèi)容映射到內(nèi)存來恢復(fù)某些服務(wù)。
另外,mmap實現(xiàn)共享內(nèi)存也是其主要應(yīng)用之一,mmap系統(tǒng)調(diào)用使得進程之間通過映射同一個普通文件實現(xiàn)共享內(nèi)存。
?
23.用戶空間與內(nèi)核通信方式有哪些?
系統(tǒng)調(diào)用。用戶空間進程通過系統(tǒng)調(diào)用進入內(nèi)核空間,訪問指定的內(nèi)核空間數(shù)據(jù);
)驅(qū)動程序。用戶空間進程可以使用封裝后的系統(tǒng)調(diào)用接口訪問驅(qū)動設(shè)備節(jié)點,以和運行在內(nèi)核空間的驅(qū)動程序通信;
共享內(nèi)存mmap。在代碼中調(diào)用接口,實現(xiàn)內(nèi)核空間與用戶空間的地址映射,在實時性要求很高的項目中為首選,省去拷貝數(shù)據(jù)的時間等資源,但缺點是不好控制;
copy_to_user()、copy_from_user(),是在驅(qū)動程序中調(diào)用接口,實現(xiàn)用戶空間與內(nèi)核空間的數(shù)據(jù)拷貝操作,應(yīng)用于實時性要求不高的項目中。
?
24.Linux驅(qū)動程序的功能是什么?
設(shè)備驅(qū)動連接操作系統(tǒng)和硬件。設(shè)備驅(qū)動程序是一種可以使計算機與設(shè)備進行通信的特殊程序,可以說相當(dāng)于硬件的接口。操作系統(tǒng)只有通過這個接口,
才能控制硬件設(shè)備的工作。安裝在操作系統(tǒng)中的驅(qū)動程序可以完成設(shè)備的初始化和釋放,進行外部數(shù)據(jù)和操作系統(tǒng)的通信和數(shù)據(jù)交互,控制硬件的行為,
并檢查設(shè)備可能出現(xiàn)的故障并報錯。
?
25.Linux驅(qū)動程序的分類有哪些?
Linux將硬件設(shè)備分為3大類,分別是字符設(shè)備、塊設(shè)備和網(wǎng)絡(luò)設(shè)備。字符設(shè)備是指那些能一個字節(jié)一個字節(jié)讀取數(shù)據(jù)的設(shè)備,如鍵盤鼠標(biāo)等,
常見的SPI/I2C/UART默認(rèn)也是字符設(shè)備。塊設(shè)備與字符設(shè)備類似,一般是像磁盤一樣的設(shè)備。網(wǎng)絡(luò)設(shè)備主要負(fù)責(zé)主機之間的數(shù)據(jù)交換。
與字符設(shè)備和塊設(shè)備完全不同,網(wǎng)絡(luò)設(shè)備主要是面向數(shù)據(jù)包的接收和發(fā)送而設(shè)計的。
?
26.linux的鎖機制?
互斥鎖:mutex,保證在任何時刻,都只有一個線程訪問該資源,當(dāng)獲取鎖操作失敗時,線程進入阻塞,等待鎖釋放。
讀寫鎖:rwlock,分為讀鎖和寫鎖,處于讀操作時,可以運行多個線程同時讀。但寫時同一時刻只能有一個線程獲得寫鎖。
自旋鎖:spinlock,在任何時刻只能有一個線程訪問資源。但獲取鎖操作失敗時,不會進入睡眠,而是原地自旋,直到鎖被釋放。
? ? ? ? ? ?這樣節(jié)省了線程從睡眠到被喚醒的時間消耗,提高效率。
條件鎖:就是所謂的條件變量,某一個線程因為某個條件未滿足時可以使用條件變量使該程序處于阻塞狀態(tài)。一旦條件滿足了,即可喚醒該線程(常和互斥鎖配合使用)。
27.設(shè)備驅(qū)動程序中如何注冊一個字符設(shè)備?分別解釋一下它的幾個參數(shù)的含義。
注冊一個字符設(shè)備驅(qū)動有兩種方法:
?1)?void cdev_init(struct cdev *cdev, struct file_operations *fops)
該注冊函數(shù)可以將cdev結(jié)構(gòu)嵌入到自己的設(shè)備特定的結(jié)構(gòu)中。cdev是一個指向結(jié)構(gòu)體cdev的指針,而fops是指向一個類似于file_operations結(jié)構(gòu)(可以是file_operations結(jié)構(gòu),但不限于該結(jié)構(gòu))的指針.
2)?int register_chrdev(unsigned int major, const char *namem , struct file)operations *fopen);
? ? ? ? 該注冊函數(shù)是早期的注冊函數(shù),major是設(shè)備的主設(shè)備號,name是驅(qū)動程序的名稱,而fops是默認(rèn)的file_operations結(jié)構(gòu)(這 ? ? ? 是只限于file_operations結(jié)構(gòu))。對于register_chrdev的調(diào)用將為給定的主設(shè)備號注冊0-255作為次設(shè)備號,并為每個 ?設(shè)備建 ? ? 立一個對應(yīng)的默認(rèn)cdev結(jié)構(gòu)。
28.insmod 一個驅(qū)動模塊,會執(zhí)行模塊中的哪個函數(shù)?rmmod呢?這兩個函數(shù)在設(shè)計上要注意哪些?遇到過卸載驅(qū)動出現(xiàn)異常沒?是什么問題引起的?
?insmod調(diào)用init函數(shù),rmmod調(diào)用exit函數(shù)。這兩個函數(shù)在設(shè)計時要注意什么?卸載模塊時曾出現(xiàn)卸載失敗的情形,原因是存在進程正在使用模塊,檢查代碼后發(fā)現(xiàn)產(chǎn)生了死鎖的問題。
? ? ??要注意在init函數(shù)中申請的資源在exit函數(shù)中要釋放,包括存儲,ioremap,定時器,工作隊列等等。也就是一個模塊注冊進內(nèi)核,退出內(nèi)核時要清理所帶來的影響,帶走一切不留下一點痕跡。
01什么是進程?
標(biāo)準(zhǔn)定義:進程是一個具有一定獨立功能的程序在一個數(shù)據(jù)集合上依次動態(tài)執(zhí)行的過程。進程是一個正在執(zhí)行程序的實例,包括程序計數(shù)器、寄存器和程序變量的當(dāng)前值。
簡單來說進程就是一個程序的執(zhí)行流程,內(nèi)部保存程序運行所需的資源。
在操作系統(tǒng)中可以有多個進程在運行,可對于CPU來說,同一時刻,一個CPU只能運行一個進程,但在某一時間段內(nèi),CPU將這一時間段拆分成更短的時間片,CPU不停的在各個進程間游走,這就給人一種并行的錯覺,像CPU可以同時運行多個進程一樣,這就是偽并行。
02 進程和程序有什么聯(lián)系?
一個進程是某種類型的一個活動,它有程序、輸入、輸出以及狀態(tài)。單個處理器可以被若干進程共享,它使用某種調(diào)度算法決定何時停止一個進程的工作,并轉(zhuǎn)而為另一個進程提供服務(wù)。
- 程序是產(chǎn)生進程的基礎(chǔ)
- 程序的每次運行產(chǎn)生不同的進程
- 進程是程序功能的體現(xiàn)
- 通過多次執(zhí)行,一個程序可對應(yīng)多個進程;通過調(diào)用關(guān)系,一個進程可包括多個程序
03 進程和程序有什么區(qū)別?
進程是動態(tài)的,程序是靜態(tài)的:程序是有序代碼的集合,進程是程序的執(zhí)行。
進程是暫時的,程序是永久的:進程是一個狀態(tài)變化的過程,程序可長久保存。
進程和程序的組成不同:進程的組成包括程序、數(shù)據(jù)和進程控制塊(進程狀態(tài)信息)。
04 進程有什么特點?
動態(tài)性:可動態(tài)的創(chuàng)建和結(jié)束進程
并發(fā)性:可以被獨立的調(diào)度并占用處理機并發(fā)運行
獨立性:不同進程的工作不相互影響
制約性:因訪問共享資源或進程間同步而產(chǎn)生制約
05 進程如何創(chuàng)建?
有什么事件會觸發(fā)進程的創(chuàng)建呢?
系統(tǒng)初始化:當(dāng)啟動操作系統(tǒng)時,通常會創(chuàng)建很多進程,有些是同用戶交互并替他們完成工作的前臺進程,其它的都是后臺進程,后臺進程和特定用戶沒有關(guān)系,但也提供某些專門的功能,例如接收郵件等,這種功能的進程也稱為守護進程。計劃任務(wù)是個典型的守護進程,它每分鐘運行一次來檢查是否有工作需要它完成。如果有工作要做,它就會完成此工作,然后進入休眠狀態(tài),直到下一次檢查時刻的到來。
正在運行的程序執(zhí)行了創(chuàng)建進程的系統(tǒng)調(diào)用:在一個進程中又創(chuàng)建了一個新的進程,這種情況很常見。
用戶請求創(chuàng)建一個新進程:這種情況相信每個人都見過,用電腦時雙擊某個應(yīng)用圖標(biāo),就會有至少一個進程被創(chuàng)建。
一個批處理作業(yè)的初始化:這種情形不常見,僅在大型機的批處理系統(tǒng)中應(yīng)用,用戶在這種系統(tǒng)中提交批處理作業(yè),在操作系統(tǒng)認(rèn)為有資源可運行另一個作業(yè)時,它創(chuàng)建一個新的進程,并運行其輸入隊列中的下一個作業(yè)。
歸根到底:在UNIX系統(tǒng)中,只有fork系統(tǒng)調(diào)用才可以創(chuàng)建新進程,使用方式如下:
#include <stdio.h>
#include <unistd.h>
int main() {pid_t id = fork();if (id < 0) {perror("fork\n");} else if (id == 0) { // 子進程printf("子進程\n");} else { // 父進程printf("父進程\n");}return 0;
}
進程創(chuàng)建之后,父子進程都有各自不同的地址空間,其中一個進程在其地址空間的修改對另一個進程不可見。子進程的初始化空間是父進程的一個副本,這里涉及兩個不同地址空間,不可寫的內(nèi)存區(qū)是共享的,某些UNIX的實現(xiàn)使程序正文在兩者間共享,因為它是不可修改的。
還有一種寫時復(fù)制共享技術(shù),子進程共享父進程的所有內(nèi)存,一旦兩者之一想要修改部分內(nèi)存,則這塊內(nèi)存被復(fù)制確保修改發(fā)生在當(dāng)前進程的私有內(nèi)存區(qū)域。
06 進程為何終止?
有什么事件會觸發(fā)進程的終止呢?
正常退出(自愿):進程完成了工作正常終止,UNIX中退出進程的系統(tǒng)調(diào)用是exit。
出錯退出(自愿):進程發(fā)現(xiàn)了錯誤而退出。可以看如下代碼:
#include <stdio.h>
#include <stdlib.h>
void Func() {if (error) { // 有錯誤就退出程序exit(1);}
}int main() {Func();
}
嚴(yán)重錯誤(非自愿):進程發(fā)生了嚴(yán)重的錯誤而不得不退出,通常是程序的錯誤導(dǎo)致,例如執(zhí)行了一條非法指令,引用不存在的內(nèi)存,或者除數(shù)是0等,出現(xiàn)這些錯誤時進程默認(rèn)會退出。而有些時候如果用戶想自行處理某種類型的錯誤,發(fā)生不同類型錯誤時進程會收到不同類型的信號,用戶注冊處理不同信號的函數(shù)即可。
被其它進程殺死(非自愿):其它進程執(zhí)行kill系統(tǒng)調(diào)用通知操作系統(tǒng)殺死某個進程。
07操作系統(tǒng)如何進行進程管理?
這里就不得不提到一個數(shù)據(jù)結(jié)構(gòu):進程控制塊(PCB),操作系統(tǒng)為每個進程都維護一個PCB,用來保存與該進程有關(guān)的各種狀態(tài)信息。進程可以抽象理解為就是一個PCB,PCB是進程存在的唯一標(biāo)志,操作系統(tǒng)用PCB來描述進程的基本情況以及運行變化的過程,進程的任何狀態(tài)變化都會通過PCB來體現(xiàn)。
PCB包含進程狀態(tài)的重要信息,包括程序計數(shù)器、堆棧指針、內(nèi)存分配狀況、所打開文件的狀態(tài)、賬號和調(diào)度信息,以及其它在進程由運行態(tài)轉(zhuǎn)換到就緒態(tài)或阻塞態(tài)時必須保存的信息,從而保證該進程隨后能再次啟動,就像從未中斷過一樣。后一小節(jié)會具體介紹PCB。
提到進程管理,有一個概念我們必須要知道,就是中斷向量,中斷向量是指中斷服務(wù)程序的入口地址。一個進程在執(zhí)行過程中可能會被中斷無數(shù)次,但是每次中斷后,被中斷的進程都要返回到與中斷發(fā)生前完全相同的狀態(tài)。
中斷發(fā)生后操作系統(tǒng)最底層做了什么呢?
1)硬件壓入堆棧程序計數(shù)器等;
2)硬件從中斷向量裝入新的程序計數(shù)器;
3)匯編語言過程保存寄存器值;
4)匯編語言過程設(shè)置新的堆棧;
5)C中斷服務(wù)例程運行(典型的讀和緩沖輸入);
6)調(diào)度程序決定下一個將運行的進程;
7)C過程返回到匯編代碼;
8)匯編語言過程開始運行新的當(dāng)前進程。
【文章福利】需要C/C++ Linux服務(wù)器架構(gòu)師學(xué)習(xí)資料加群812855908(資料包括C/C++,Linux,golang技術(shù),Nginx,ZeroMQ,MySQL,Redis,fastdfs,MongoDB,ZK,流媒體,CDN,P2P,K8S,Docker,TCP/IP,協(xié)程,DPDK,ffmpeg等)
08進程控制塊中存儲了什么信息?
進程標(biāo)識信息:如本進程的標(biāo)識,本進程的父進程標(biāo)識,用戶標(biāo)識等。
處理機狀態(tài)信息保護區(qū):用于保存進程的運行現(xiàn)場信息:
- 用戶可見寄存器:用戶程序可以使用的數(shù)據(jù),地址等寄存器
- 控制和狀態(tài)寄存器:程序計數(shù)器,程序狀態(tài)字
- 棧指針:過程調(diào)用、系統(tǒng)調(diào)用、中斷處理和返回時需要用到它
進程控制信息:
- 調(diào)度和狀態(tài)信息:用于操作系統(tǒng)調(diào)度進程使用
- 進程間通信信息:為支持進程間與通信相關(guān)的各種標(biāo)識、信號、信件等,這些信息存在接收方的進程控制塊中
- 存儲管理信息:包含有指向本進程映像存儲空間的數(shù)據(jù)結(jié)構(gòu)
- 進程所用資源:說明由進程打開使用的系統(tǒng)資源,如打開的文件等
- 有關(guān)數(shù)據(jù)結(jié)構(gòu)連接信息:進程可以連接到一個進程隊列中,或連接到相關(guān)的其他進程的PCB
09?進程如何進行生命周期管理?
進程創(chuàng)建:
創(chuàng)建進程有三個主要事件:
- 系統(tǒng)初始化
- 用戶請求創(chuàng)建一個新進程
- 一個正在運行的進程執(zhí)行創(chuàng)建進程的系統(tǒng)調(diào)用
進程運行:內(nèi)核選擇一個就緒的進程,讓它占用處理機并運行,這里就涉及到了進程的調(diào)度策略,選擇哪個進程調(diào)度?為什么選擇調(diào)度這個進程呢?(莫慌,下面會介紹哈)
進程等待:
在以下情況下進程會等待(阻塞):
- 請求并等待系統(tǒng)服務(wù),無法馬上完成
- 啟動某種操作,無法馬上完成
- 需要的數(shù)據(jù)沒有到達。
注意:進程只能自己阻塞自己,因為只有進程自身才能知道何時需要等待某種事件的發(fā)生。
進程喚醒:
進程只能被別的進程或操作系統(tǒng)喚醒,喚醒進程的原因有:
- 被阻塞進程需要的資源可被滿足
- 被阻塞進程等待的事件到達
- 將該進程的PCB插入到就緒隊列
進程結(jié)束:
在以下四種情況下進程會結(jié)束:
- 自愿型正常退出
- 自愿型錯誤退出
- 強制型致命錯誤退出
- 強制型被其它進程殺死退出
10進程都有什么狀態(tài)?
不同系統(tǒng)設(shè)置的進程狀態(tài)是不同的,多數(shù)系統(tǒng)中的進程在生命結(jié)束前有三種基本狀態(tài),進程只會處于三種基本狀態(tài)之一:
運行狀態(tài):進程正在處理機上運行時就處在運行狀態(tài),該時刻進程時鐘占用著CPU;
就緒狀態(tài):萬事俱備,只欠東風(fēng),進程已經(jīng)獲得了除處理機之外的一切所需資源,一旦得到處理機就可以運行;就緒態(tài)中的進程其實可以運行,但因為其它進程正在占用著CPU而暫時停止運行;
等待狀態(tài)(阻塞狀態(tài)):進程正在等待某一事件而暫停運行,等待某個資源或者等待輸入輸出完成。除非某種外部事件發(fā)生,否則阻塞態(tài)的進程不能運行;
進程狀態(tài)變化圖如下:
在操作系統(tǒng)發(fā)現(xiàn)進程不能繼續(xù)運行下去時,進程因為等待輸入而被阻塞,進程從運行態(tài)轉(zhuǎn)換到阻塞態(tài)!
調(diào)度程序選擇了另一個進程執(zhí)行時,當(dāng)前程序就會從運行態(tài)轉(zhuǎn)換到就緒態(tài)!
被調(diào)度程序選擇的程序會從就緒態(tài)轉(zhuǎn)換到運行態(tài)!
當(dāng)阻塞態(tài)的進程等待的一個外部事件發(fā)生時,就會從阻塞態(tài)轉(zhuǎn)換到就緒態(tài),此時如果沒有其他進程運行時,則立刻從就緒態(tài)轉(zhuǎn)換到運行態(tài)!
某些系統(tǒng)設(shè)置下進程還會有其它狀態(tài):
創(chuàng)建狀態(tài):進程正在被創(chuàng)建還沒被轉(zhuǎn)到就緒狀態(tài)之前的狀態(tài);
結(jié)束狀態(tài):進程正在從系統(tǒng)中消失時的狀態(tài)。
有些與進程管理相關(guān)的系統(tǒng)調(diào)用讀者有必要了解一下:
pid=fork(); // 創(chuàng)建一個與父進程一樣的子進程
pid=waitpid(); // 等待子進程終止
s=execve(); // 替換進程的核心映像
exit(); // 終止進程運行并返回狀態(tài)值
s=sigaction(); // 定義信號處理的動作
s=sigprocmask(); // 檢查或更換信號掩碼
s=sigpending(); // 獲得阻塞信號集合
s=sigsuspend(); // 替換信號掩碼或掛起進程
alarm(); // 設(shè)置定時器
pause(); // 掛起調(diào)用程序直到下一個信號出現(xiàn)
11什么是進程掛起?為什么會出現(xiàn)進程掛起?
進程掛起就是為了合理且充分的利用系統(tǒng)資源,把一個進程從內(nèi)存轉(zhuǎn)到外存。進程在掛起狀態(tài)時,意味著進程沒有占用內(nèi)存空間,處在掛起狀態(tài)的進程映射在磁盤上。進程掛起通常有兩種狀態(tài):
- 阻塞掛起狀態(tài):進程在外存并等待某事件的出現(xiàn);
- 就緒掛起狀態(tài):進程在外存,但只要進入內(nèi)存即可運行。
有什么與進程掛起相關(guān)的狀態(tài)轉(zhuǎn)換?
進程掛起可能有以下幾種情況:
阻塞到阻塞掛起:沒有進程處于就緒狀態(tài)或就緒進程要求更多內(nèi)存資源時,會進行這種轉(zhuǎn)換,以提交新進程或運行就緒進程;
就緒到就緒掛起:當(dāng)有高優(yōu)先級阻塞進程或低優(yōu)先級就緒進程時,系統(tǒng)會選擇掛起低優(yōu)先級就緒進程;
運行到就緒掛起:對于搶占式分時系統(tǒng),當(dāng)有高優(yōu)先級阻塞掛起進程因事件出現(xiàn)而進入就緒掛起時,系統(tǒng)可能會把運行進程轉(zhuǎn)到就緒掛起狀態(tài);
阻塞掛起到就緒掛起:當(dāng)有阻塞掛起進程有相關(guān)事件出現(xiàn)時,系統(tǒng)會把阻塞掛起進程轉(zhuǎn)換為就緒掛起進程。
有進程掛起那就有進程解掛:指一個進程從外存轉(zhuǎn)到內(nèi)存,相關(guān)狀態(tài)有:
就緒掛起到就緒:沒有就緒進程或就緒掛起進程優(yōu)先級高于就緒進程時,就會進行這種轉(zhuǎn)換;
阻塞掛起到阻塞:當(dāng)一個進程釋放足夠內(nèi)存時,系統(tǒng)會把一個高優(yōu)先級阻塞掛起進程轉(zhuǎn)換為阻塞進程。
12 什么是進程調(diào)度?操作系統(tǒng)對于進程調(diào)度都有什么策略?
當(dāng)系統(tǒng)中有多個進程同時競爭CPU,如果只有一個CPU可用,那同一時刻只會有一個進程處于運行狀態(tài),操作系統(tǒng)必須要選擇下一個要運行的是哪個進程,在操作系統(tǒng)中,完成選擇工作的這部分稱為調(diào)度程序,該程序使用的算法稱作調(diào)度算法。
什么時候進行調(diào)度?
- 系統(tǒng)調(diào)用創(chuàng)建一個新進程后,需要決定是運行父進程還是運行子進程
- 一個進程退出時需要做出調(diào)度決策,需要決定下一個運行的是哪個進程
- 當(dāng)一個進程阻塞在I/O和信號量或者由于其它原因阻塞時,必須選擇另一個進程運行
- 當(dāng)一個I/O中斷發(fā)生時,如果中斷來自IO設(shè)備,而該設(shè)備現(xiàn)在完成了工作,某些被阻塞的等待該IO的進程就成為可運行的就緒進程了,是否讓新就緒的進程運行,或者讓中斷發(fā)生時運行的進程繼續(xù)運行,或者讓某個其它進程運行,這就取決于調(diào)度程序的抉擇了。
調(diào)度算法可以分類:
非搶占式調(diào)度算法:挑選一個進程,然后讓該進程運行直至被阻塞,或者直到該進程自動釋放CPU,即使該進程運行了若干個小時,它也不會被強迫掛起。這樣做的結(jié)果是,在時鐘中斷發(fā)生時不會進行調(diào)度,在處理完時鐘中斷后,如果沒有更高優(yōu)先級的進程等待,則被中斷的進程會繼續(xù)執(zhí)行。簡單來說,調(diào)度程序必須等待事件結(jié)束。
非搶占方式引起進程調(diào)度的條件:
- 進程執(zhí)行結(jié)束,或發(fā)生某個事件而不能繼續(xù)執(zhí)行
- 正在運行的進程因有I/O請求而暫停執(zhí)行
- 進程通信或同步過程中執(zhí)行了某些原語操作(wait、block等)
搶占式調(diào)度算法:挑選一個進程,并且讓該進程運行某個固定時段的最大值。如果在該時段結(jié)束時,該進程仍在運行,它就被掛起,而調(diào)度程序挑選另一個進程運行,進行搶占式調(diào)度處理,需要在時間間隔的末端發(fā)生時鐘中斷,以便CPU控制返回給調(diào)度程序,如果沒有可用的時鐘,那么非搶占式調(diào)度就是唯一的選擇。簡單來說,就是當(dāng)前運行的進程在事件沒結(jié)束時就可以被換出,防止單一進程長時間獨占CPU資源。下面會介紹很多搶占式調(diào)度算法:優(yōu)先級算法、短作業(yè)優(yōu)先算法、輪轉(zhuǎn)算法等。
調(diào)度策略:不同系統(tǒng)環(huán)境下有不同的調(diào)度策略算法。調(diào)度算法也是有KPI的,對調(diào)度算法首先提的需求就是:
- 公平:調(diào)度算法需要給每個進程公平的CPU份額,相似的進程應(yīng)該得到相似的服務(wù),對一個進程給予較其它等價的進程更多的CPU時間是不公平的,被普通水平的應(yīng)屆生工資倒掛也是不公平的!
- 執(zhí)行力:每一個策略必須強制執(zhí)行,需要保證規(guī)定的策略一定要被執(zhí)行。
- 平衡:需要保證系統(tǒng)的所有部分盡可能都忙碌
但是因為不同的應(yīng)用有不同的目標(biāo),不同的系統(tǒng)中,調(diào)度程序的優(yōu)化也是不同的,大體可以分為三種環(huán)境:
批處理系統(tǒng)
批處理系統(tǒng)的管理者為了掌握系統(tǒng)的工作狀態(tài),主要關(guān)注三個指標(biāo):
吞吐量:是系統(tǒng)每小時完成的作業(yè)數(shù)量
周轉(zhuǎn)時間:指從一個作業(yè)提交到完成的平均時間
CPU利用率:盡可能讓CPU忙碌,但又不能過量
調(diào)度算法:
先來先服務(wù)
先來后到嘛,就像平時去商店買東西需要排隊一樣,使用該算法,進程按照它們請求CPU的順序來使用CPU,該算法最大的優(yōu)點就是簡單易于實現(xiàn),太容易的不一定是好的,該算法也有很大的缺點:平均等待時間波動較大,時間短的任務(wù)可能排隊排在了時間長的任務(wù)后面。舉個生活中的例子,排著隊去取快遞,如果每個人都很快取出來快遞還好,如果前面有幾個人磨磨唧唧到快遞柜前才拿出手機打開app,再找半分鐘它的取件碼,就會嚴(yán)重拖慢后面的人取快遞的速度,同理排著隊的進程如果每個進程都很快就運行完還好,如果其中有一個得到了CPU的進程運行時候磨磨唧唧很長時間都運行不完,那后面的進程基本上就沒有機會運行了!
最短作業(yè)優(yōu)先
該調(diào)度算法是非搶占式的算法,每個進程執(zhí)行期間不會被打斷,每次都選擇執(zhí)行時間最短的進程來調(diào)度,但問題來了,操作系統(tǒng)怎么可能知道進程具體的執(zhí)行時間呢,所以該算法注定是基于預(yù)測性質(zhì)的理想化算法,而且有違公平性,而且可能導(dǎo)致運行時間長的任務(wù)得不到調(diào)度。
最短剩余時間優(yōu)先
該調(diào)度算法是搶占式的算法,是最短作業(yè)優(yōu)先的搶占版本,在進程運行期間,如果來了個更短時間的進程,那就轉(zhuǎn)而去把CPU時間調(diào)度給這個更短時間的進程,它的缺點和最短作業(yè)優(yōu)先算法類似。
交互式系統(tǒng)
對于交互系統(tǒng)最重要的指標(biāo)就是響應(yīng)時間和均衡性啦:
響應(yīng)時間:一個請求被提交到產(chǎn)生第一次響應(yīng)所花費的時間。你給別人發(fā)微信別人看后不回復(fù)你或者幾個小時后才回復(fù)你,你是什么感受,這還是交互式嗎?
均衡性:減少平均響應(yīng)時間的波動。需要符合固有期望和預(yù)期,你給別人發(fā)微信,他有時候秒回復(fù),有時候幾個小時后才回復(fù)。在交互式系統(tǒng)中,可預(yù)測性比高差異低平均更重要。
調(diào)度算法:
輪轉(zhuǎn)調(diào)度
每個進程被分配一個時間段,稱為時間片,即CPU做到雨露均沾,輪流翻各個進程的牌子,這段時間寵幸進程A,下一段時間寵幸進程B,再下一段時間寵幸進程C,確保每個進程都可以獲得CPU時間,如果CPU時間特別短的話,在外部看來像是同時寵幸了所有進程一樣。那么問題來了,這個時間片究竟多長時間好呢?如果時間片設(shè)的太短會導(dǎo)致過多的進程切換,頻繁的上下文切換會降低CPU效率,而如果時間片設(shè)的太長又可能對短的交互請求的響應(yīng)時間變長,通常將時間片設(shè)為20-50ms是個比較合理的折中,大佬們的經(jīng)驗規(guī)則時維持上下文切換的開銷處于1%以內(nèi)。
優(yōu)先級調(diào)度
上面的輪轉(zhuǎn)調(diào)度算法是默認(rèn)每個進程都同等重要,都有相同優(yōu)先級,然而有時候進程需要設(shè)置優(yōu)先級,例如某些播放視頻的前臺進程可以優(yōu)先于某些收發(fā)郵件的后臺守護進程被調(diào)度,在優(yōu)先級調(diào)度算法中,每個優(yōu)先級都有相應(yīng)的隊列,隊列里面裝著對應(yīng)優(yōu)先級的進程,首先在高優(yōu)先級隊列中進行輪轉(zhuǎn)調(diào)度,當(dāng)高優(yōu)先級隊列為空時,轉(zhuǎn)而去低優(yōu)先級隊列中進行輪轉(zhuǎn)調(diào)度,如果高優(yōu)先級隊列始終不為空,那么低優(yōu)先級的進程很可能就會饑餓到很久不能被調(diào)度。
多級隊列
多級隊列算法與優(yōu)先級調(diào)度算法不同,優(yōu)先級算法中每個進程分配的是相同的時間片,而在多級隊列算法中,不同隊列中的進程分配給不同的時間片,當(dāng)一個進程用完分配的時間片后就移動到下一個隊列中,這樣可以更好的避免上下文頻繁切換。舉例:有一個進程需要100個時間片,如果每次調(diào)度都給分配一個時間片,則需要100次上下文切換,這樣CPU運行效率較低,通過多級隊列算法,可以考慮最開始給這個進程分配1個時間片,然后被換出,下次分給它2個時間片,再換出,之后分給它4、8、16、64個時間片,這樣分配的話,該進程只需要7次交換就可以運行完成,相比100次上下文切換運行效率高了不少,但顧此就會失彼,那些需要交互的進程得到響應(yīng)的速度就會下降。
最短進程優(yōu)先
交互式系統(tǒng)中應(yīng)用最短進程優(yōu)先算法其實是非常適合的,每次都選擇執(zhí)行時間最短的進程進行調(diào)度,這樣可以使任務(wù)的響應(yīng)時間最短,但這里有個任務(wù),還沒有運行呢,我怎么知道進程的運行時間呢?根本沒辦法非常準(zhǔn)確的再當(dāng)前可運行進程中找出最短的那個進程。有一種辦法就是根據(jù)進程過去的行為進行預(yù)測,但這能證明是個好辦法嗎?
保證調(diào)度
這種調(diào)度算法就是向用戶做出明確的可行的性能保證,然后去實現(xiàn)它。一種很實際的可實現(xiàn)的保證就是確保N個用戶中每個用戶都獲得CPU處理能力的1/N,類似的,保證N個進程中每個進程都獲得1/N的CPU時間。
彩票調(diào)度
彩票調(diào)度算法基本思想是為進程提供各種資源(CPU時間)的彩票,一旦需要做出調(diào)度決策時,就隨機抽出一張彩票,擁有該彩票的進程獲得該資源,很明顯,擁有彩票越多的進程,獲得資源的可能性越大。該算法在程序喵看來可以理解為股票算法,將CPU的使用權(quán)分成若干股,假設(shè)共100股分給了3個進程,給這些進程分別分配20、30、50股,那么它們大體上會按照股權(quán)比例(20:30:50)劃分CPU的使用。
公平分享調(diào)度
假設(shè)有系統(tǒng)兩個用戶,用戶1啟動了1個進程,用戶2啟動了9個進程,如果使用輪轉(zhuǎn)調(diào)度算法,那么用戶1將獲得10%的CPU時間,用戶2將獲得90%的CPU時間,這對用戶來說公平嗎?如果給每個用戶分配50%的CPU時間,那么用戶2中的進程獲得的CPU時間明顯比用戶1中的進程短,這對進程來說公平嗎?這就取決于怎么定義公平啦?
實時系統(tǒng)
實時系統(tǒng)顧名思義,最關(guān)鍵的指標(biāo)當(dāng)然是實時啦:
滿足截止時間:需要在規(guī)定deadline前完成作業(yè);
可預(yù)測性:可預(yù)測性是指在系統(tǒng)運行的任何時刻,在任何情況下,實時系統(tǒng)的資源調(diào)配策略都能為爭奪資源的任務(wù)合理的分配資源,使每個實時任務(wù)都能得到滿足。
調(diào)度算法分類:
硬實時
必須在deadline之前完成工作,如果delay,可能會發(fā)生災(zāi)難性或發(fā)生嚴(yán)重的后果;
軟實時
必須在deadline之前完成工作,但如果偶爾delay了,也可以容忍。
調(diào)度算法:
單調(diào)速率調(diào)度
采用搶占式、靜態(tài)優(yōu)先級的策略,調(diào)度周期性任務(wù)。
每個任務(wù)最開始都被配置好了優(yōu)先級,當(dāng)較低優(yōu)先級的進程正在運行并且有較高優(yōu)先級的進程可以運行時,較高優(yōu)先級的進程將會搶占低優(yōu)先級的進程。在進入系統(tǒng)時,每個周期性任務(wù)都會分配一個優(yōu)先級,周期越短,優(yōu)先級越高。這種策略的理由是:更頻繁的需要CPU的任務(wù)應(yīng)該被分配更高的優(yōu)先級。
最早截止時間調(diào)度
根據(jù)截止時間動態(tài)分配優(yōu)先級,截止時間越早的進程優(yōu)先級越高。
該算法中,當(dāng)一個進程可以運行時,它應(yīng)該向操作系統(tǒng)通知截止時間,根據(jù)截止時間的早晚,系統(tǒng)會為該進程調(diào)整優(yōu)先級,以便滿足可運行進程的截止時間要求。它與單調(diào)速率調(diào)度算法的區(qū)別就是一個是靜態(tài)優(yōu)先級,一個是動態(tài)優(yōu)先級。
如何配置調(diào)度策略?
調(diào)度算法有很多種,各有優(yōu)缺點,操作系統(tǒng)自己很少能做出最優(yōu)的選擇,那么可以把選擇權(quán)交給用戶,由用戶根據(jù)實際情況來選擇適合的調(diào)度算法,這就叫策略與機制分離,調(diào)度機制位于內(nèi)核,調(diào)度策略由用戶進程決定,將調(diào)度算法以某種形式參數(shù)化,由用戶進程來選擇參數(shù)從而決定內(nèi)核使用哪種調(diào)度算法。
13 操作系統(tǒng)怎么完成進程調(diào)度?
進程的每次變化都會有相應(yīng)的狀態(tài),而操作系統(tǒng)維護了一組狀態(tài)隊列,表示系統(tǒng)中所有進程的當(dāng)前狀態(tài);不同的狀態(tài)有不同的隊列,有就緒隊列阻塞隊列等,每個進程的PCB都根據(jù)它的狀態(tài)加入到相應(yīng)的隊列中,當(dāng)一個進程的狀態(tài)發(fā)生變化時,它的PCB會從一個狀態(tài)隊列中脫離出來加入到另一個狀態(tài)隊列。
注意圖中同一種狀態(tài)為什么有多個隊列呢?因為進程有優(yōu)先級概念,相同狀態(tài)的不同隊列的優(yōu)先級不同。
14 什么是線程?
線程是進程當(dāng)中的一條執(zhí)行流程,這幾乎就是進程的定義,一個進程內(nèi)可以有多個子執(zhí)行流程,即線程??梢詮膬蓚€方面重新理解進程:
- 從資源組合的角度:進程把一組相關(guān)的資源組合起來,構(gòu)成一個資源平臺環(huán)境,包括地址空間(代碼段、數(shù)據(jù)段),打開的文件等各種資源
- 從運行的角度:代碼在這個資源平臺上的執(zhí)行流程,然而線程貌似也是這樣,但是進程比線程多了資源內(nèi)容列表樣式:那就有一個公式:進程 = 線程 + 共享資源
15 為什么使用線程?
因為要并發(fā)編程,在許多情形中同時發(fā)生著許多活動,而某些活動有時候會被阻塞,通過將這些活動分解成可以準(zhǔn)并行運行的多個順序流程是必須的,而如果使用多進程方式進行并發(fā)編程,進程間的通信也很復(fù)雜,并且維護進程的系統(tǒng)開銷較大:創(chuàng)建進程時分配資源建立PCB,撤銷進程時回收資源撤銷PCB,進程切換時保存當(dāng)前進程的狀態(tài)信息。所以為了使并發(fā)編程的開銷盡量小,所以引入多線程編程,可以并發(fā)執(zhí)行也可以共享相同的地址空間。并行實體擁有共享同一地址空間和所有可用數(shù)據(jù)的能力,這是多進程模型所不具備的能力。
使用線程有如下優(yōu)點:
- 可以多個線程存在于同一個進程中
- 各個線程之間可以并發(fā)的執(zhí)行
- 各個線程之間可以共享地址空間和文件等資源
- 線程比進程更輕量級,創(chuàng)建線程撤銷線程比創(chuàng)建撤銷進程要快的多,在許多系統(tǒng)中,創(chuàng)建一個線程速度是創(chuàng)建一個進程速度的10-100倍。
- 如果多個線程是CPU密集型的,并不能很好的獲得更好的性能,但如果多個線程是IO密集型的,線程存在著大量的計算和大量的IO處理,有多個線程允許這些活動彼此重疊進行,從而會加快整體程序的執(zhí)行速度。
但也有缺點:
- 一旦一個線程崩潰,會導(dǎo)致其所屬進程的所有線程崩潰。
- 由于各個線程共享相同的地址空間,那么讀寫數(shù)據(jù)可能會導(dǎo)致競爭關(guān)系,因此對同一塊數(shù)據(jù)的讀寫需要采取某些同步機制來避免線程不安全問題。
16 什么時候用進程、線程?
- 進程是資源分配單位,線程是CPU調(diào)度單位;
- 進程擁有一個完整的資源平臺,而線程只獨享必不可少的資源,如寄存器和棧;
- 線程同樣具有就緒阻塞和執(zhí)行三種基本狀態(tài),同樣具有狀態(tài)之間的轉(zhuǎn)換關(guān)系;
- 線程能減少并發(fā)執(zhí)行的時間和空間開銷:
- 線程的創(chuàng)建時間比進程短
- 線程的終止時間比進程短
- 同一進程內(nèi)的線程切換時間比進程短
- 由于同一進程的各線程間共享內(nèi)存和文件資源,可直接進行不通過內(nèi)核的通信
結(jié)論:可以在強調(diào)性能時候使用線程,如果追求更好的容錯性可以考慮使用多進程,google瀏覽器據(jù)說就是用的多進程編程。在多CPU系統(tǒng)中,多線程是有益的,在這樣的系統(tǒng)中,通常情況下可以做到真正的并行。
C/C++中如何使用多線程編程?
POSIX使用如下線程封裝函數(shù)來操作線程:
pthread_create 創(chuàng)建一個新線程
pthread_exit 結(jié)束調(diào)用的線程
pthread_join 等待一個特定的線程退出
pthread_yield 釋放CPU來運行另外一個線程
pthread_attr_init 創(chuàng)建并初始化一個線程的屬性結(jié)構(gòu)
pthread_attr_destroy 刪除一個線程的屬性結(jié)構(gòu)
后兩個函數(shù)是有關(guān)線程屬性的調(diào)用。pthread_attr_init建立關(guān)聯(lián)一個線程的屬性結(jié)構(gòu)并初始化成默認(rèn)值,這些值(優(yōu)先級等)可以通過修改屬性結(jié)構(gòu)中的對應(yīng)值來改變;pthread_attr_destroy會刪除一個線程的屬性結(jié)構(gòu),釋放它占用的內(nèi)存,它不會影響調(diào)用它的線程,線程依然會繼續(xù)存在。
C++中有std::thread和async,可以很方便的操作多線程,示例代碼如下:
void F() {cout << "a" << endl;
}int main() {std::thread r(F);r.detach();std::this_thread::sleep_for(std::chrono::seconds(20));return 0;
}
17 線程是如何實現(xiàn)的?
線程的實現(xiàn)可分為用戶線程和內(nèi)核線程:
用戶線程:在用戶空間實現(xiàn)的線程機制,它不依賴于操作系統(tǒng)的內(nèi)核,由一組用戶級的線程庫函數(shù)來完成線程的管理,包括進程的創(chuàng)建終止同步和調(diào)度等。
用戶線程有如下優(yōu)點:
由于用戶線程的維護由相應(yīng)進程來完成(通過線程庫函數(shù)),不需要操作系統(tǒng)內(nèi)核了解內(nèi)核了解用戶線程的存在,可用于不支持線程技術(shù)的多進程操作系統(tǒng)。
每個進程都需要它自己私有的線程控制塊列表,用來跟蹤記錄它的各個線程的狀態(tài)信息(PC,棧指針,寄存器),TCB由線程庫函數(shù)來維護;
用戶線程的切換也是由線程庫函數(shù)來完成,無需用戶態(tài)/核心態(tài)切換,所以速度特別快;
允許每個進程擁有自定義的線程調(diào)度算法;
但用戶線程也有缺點:
阻塞性的系統(tǒng)調(diào)用如何實現(xiàn)?如果一個線程發(fā)起系統(tǒng)調(diào)用而阻塞,則整個進程在等待。
當(dāng)一個線程開始運行后,除非它主動交出CPU的使用權(quán),否則它所在進程當(dāng)中的其它線程將無法運行;
由于時間片分配給進程,與其它進程比,在多線程執(zhí)行時,每個線程得到的時間片較少,執(zhí)行會較慢
內(nèi)核線程:是指在操作系統(tǒng)的內(nèi)核中實現(xiàn)的一種線程機制,由操作系統(tǒng)的內(nèi)核來完成線程的創(chuàng)建終止和管理。
特點:
在支持內(nèi)核線程的操作系統(tǒng)中,由內(nèi)核來維護進程和線程的上下文信息(PCB TCB);
線程的創(chuàng)建終止和切換都是通過系統(tǒng)調(diào)用內(nèi)核函數(shù)的方式來進行,由內(nèi)核來完成,因此系統(tǒng)開銷較大;
在一個進程當(dāng)中,如果某個內(nèi)核線程發(fā)起系統(tǒng)調(diào)用而被阻塞,并不會影響其它內(nèi)核線程的運行;
時間片分配給線程,多線程的進程獲得更多CPU時間;
tips
由于在內(nèi)核中創(chuàng)建或撤銷線程的代價比較大,某些系統(tǒng)采取復(fù)用的方式回收線程,當(dāng)某個線程被撤銷時,就把它標(biāo)記不可運行,但是內(nèi)核數(shù)據(jù)結(jié)構(gòu)沒有受到任何影響,如果后續(xù)又需要創(chuàng)建一個新線程時,就重新啟動被標(biāo)記為不可運行的舊線程,從而節(jié)省一些開銷。
注意
盡管使用內(nèi)核線程可以解決很多問題,但還有些問題,例如:當(dāng)一個多線程的進程創(chuàng)建一個新的進程時會發(fā)生什么?新進程是擁有與原進程相同數(shù)量的線程還是只有一個線程?在很多情況下,最好的選擇取決于進程計劃下一步做什么?如果它要調(diào)用exec啟動一個新程序,或許一個線程正合適,但如果它繼續(xù)運行,那么最好復(fù)制所有的線程。
輕量級進程:它是內(nèi)核支持的用戶線程模型,一個進程可以有多個輕量級進程,每個輕量級進程由一個單獨的內(nèi)核線程來支持。
在Linux下是沒有真正的線程的,它所謂的線程其實就是使用進程來實現(xiàn)的,就是所謂的輕量級進程,其實就是進程,都是通過clone接口調(diào)用創(chuàng)建的,只不過兩者傳遞的參數(shù)不同,通過參數(shù)決定子進程和父進程共享的資源種類和數(shù)量,進而有了普通進程和輕量級進程的區(qū)別。
18 什么是上下文切換?
上下文切換指的是操作系統(tǒng)停止當(dāng)前運行進程(從運行狀態(tài)改變成其它狀態(tài))并且調(diào)度其它進程(就緒態(tài)轉(zhuǎn)變成運行狀態(tài))。操作系統(tǒng)必須在切換之前存儲許多部分的進程上下文,必須能夠在之后恢復(fù)他們,所以進程不能顯示它曾經(jīng)被暫停過,同時切換上下文這個過程必須快速,因為上下文切換操作是非常頻繁的。那上下文指的是什么呢?指的是任務(wù)所有共享資源的工作現(xiàn)場,每一個共享資源都有一個工作現(xiàn)場,包括用于處理函數(shù)調(diào)用、局部變量分配以及工作現(xiàn)場保護的棧頂指針,和用于指令執(zhí)行等功能的各種寄存器。
注意
這里所說的進程切換導(dǎo)致上下文切換其實不太準(zhǔn)確,準(zhǔn)確的說應(yīng)該是任務(wù)的切換導(dǎo)致上下文切換,這里的任務(wù)可以是進程也可以是線程,準(zhǔn)確的說線程才是CPU調(diào)度的基本單位,但是因為各個資料都這么解釋上下文切換,所以上面也暫時這么介紹,只要讀者心里有這個概念就好。
19 進程間通信有幾種方式?
由于各個進程不共享相同的地址空間,任何一個進程的全局變量在另一個進程中都不可見,所以如果想要在進程之間傳遞數(shù)據(jù)就需要通過內(nèi)核,在內(nèi)核中開辟出一塊區(qū)域,該區(qū)域?qū)Χ鄠€進程都可見,即可用于進程間通信。有讀者可能有疑問了,文件方式也是進程間通信啊,也要在內(nèi)核開辟區(qū)域嗎?這里說的內(nèi)核區(qū)域其實是一段緩沖區(qū),文件方式傳輸數(shù)據(jù)也有內(nèi)核緩沖區(qū)的參與(零拷貝除外)。
如何開辟這種公共區(qū)域來進行進程間通信呢?
匿名管道
匿名管道就是pipe,pipe只能在父子進程間通信,而且數(shù)據(jù)只能單向流動(半雙工通信)。
使用方式:
1)父進程創(chuàng)建管道,會得到兩個文件描述符,分別指向管道的兩端;
2)父進程創(chuàng)建子進程,從而子進程也有兩個文件描述符指向同一管道;
3)父進程可寫數(shù)據(jù)到管道,子進程就可從管道中讀出數(shù)據(jù),從而實現(xiàn)進程間通信,下面的示例代碼中通過pipe實現(xiàn)了每秒鐘父進程向子進程都發(fā)送消息的功能。
#include <stdio.h>
#include <string.h>
#include <unistd.h>
int main() {int _pipe[2];int ret = pipe(_pipe);if (ret < 0) {perror("pipe\n");}pid_t id = fork();if (id < 0) {perror("fork\n");} else if (id == 0) { // 子進程close(_pipe[1]);int j = 0;char _mesg[100];while (j < 100) {memset(_mesg, '\0', sizeof(_mesg));read(_pipe[0], _mesg, sizeof(_mesg));printf("%s\n", _mesg);j++;}} else { // 父進程close(_pipe[0]);int i = 0;char *mesg = NULL;while (i < 100) {mesg = "父進程來寫消息了";write(_pipe[1], mesg, strlen(mesg) + 1);sleep(1);++i;}}return 0;}
我們平時也經(jīng)常使用關(guān)于管道的命令行:
ls | less
該命令行的流向圖如下:
1:創(chuàng)建管道
2:為ls創(chuàng)建一個進程,設(shè)置stdout為管理寫端
3:為less創(chuàng)建一個進程,設(shè)置stdin為管道讀端
高級管道
通過popen將另一個程序當(dāng)作一個新的進程在當(dāng)前進程中啟動,它算作當(dāng)前進程的子進程,高級管道只能用在有親緣關(guān)系的進程間通信,這種親緣關(guān)系通常指父子進程,下面的GetCmdResult函數(shù)可以獲取某個Linux命令執(zhí)行的結(jié)果,實現(xiàn)方式就是通過popen。
std::string GetCmdResult(const std::string &cmd, int max_size = 10240) {char *data = (char *)malloc(max_size);if (data == NULL) {return std::string("malloc fail");}memset(data, 0, max_size);const int max_buffer = 256;char buffer[max_buffer];// 將標(biāo)準(zhǔn)錯誤重定向到標(biāo)準(zhǔn)輸出FILE *fdp = popen((cmd + " 2>&1").c_str(), "r");int data_len = 0;if (fdp) {while (!feof(fdp)) {if (fgets(buffer, max_buffer, fdp)) {int len = strlen(buffer);if (data_len + len > max_size) {cout << "data size larger than " << max_size;break;}memcpy(data + data_len, buffer, len);data_len += len;}}pclose(fdp);}std::string ret(data, data_len);free(data);return ret;
}
命名管道
匿名管道有個缺點就是通信的進程一定要有親緣關(guān)系,而命名管道就不需要這種限制。
命名管道其實就是一種特殊類型的文件,所謂的命名其實就是文件名,文件對各個進程都可見,通過命名管道創(chuàng)建好特殊文件后,就可以實現(xiàn)進程間通信。
可以通過mkfifo創(chuàng)建一個特殊的類型的文件,參數(shù)讀者看名字應(yīng)該就了解,一個是文件名,一個是文件的讀寫權(quán)限:
int mkfifo(const char* filename, mode_t mode);
當(dāng)返回值為0時,表示該命名管道創(chuàng)建成功,至于如何通信,其實就是個讀寫文件的問題!
消息隊列
隊列想必大家都知道,像FIFO一樣,這里可以有多個進程寫入數(shù)據(jù),也可以有多個進程從隊列里讀出數(shù)據(jù),但消息隊列有一點比FIFO還更高級,它讀消息不一定要使用先進先出的順序,每個消息可以賦予類型,可以按消息的類型讀取,不是指定類型的數(shù)據(jù)還存在隊列中。本質(zhì)上MessageQueue是存放在內(nèi)核中的消息鏈表,每個消息隊列鏈表會由消息隊列標(biāo)識符表示,這個消息隊列存于內(nèi)核中,只有主動的刪除該消息隊列或者內(nèi)核重啟時,消息隊列才會被刪除。
在Linux中消息隊列相關(guān)的函數(shù)調(diào)用如下:
// 創(chuàng)建和訪問一個消息隊列
int msgget(key_t, key, int msgflg);
// 用來把消息添加到消息隊列中
int msgsend(int msgid, const void *msg_ptr, size_t msg_sz, int msgflg);
// msg_ptr是結(jié)構(gòu)體數(shù)據(jù)的指針,結(jié)構(gòu)第一個字段要有個類型:struct Msg {long int message_type;// 想要傳輸?shù)臄?shù)據(jù)
};
// 從消息隊列中獲取消息
int msgrcv(int msgid, void *msg_ptr, size_t msg_st, long int msgtype, int msgflg);
// 用來控制消息隊列,不同的command參數(shù)有不同的控制方式
int msgctl(int msgid, int command, struct msgid_ds *buf);
示例代碼如下:
#include <errno.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <sys/msg.h>#include <chrono>
#include <iostream>
#include <thread>using namespace std;#define BUFFER_SIZ 20typedef struct {long int msg_type;char text[BUFFER_SIZ];
} MsgWrapper;void Receive() {MsgWrapper data;long int msgtype = 2;int msgid = msgget((key_t)1024, 0666 | IPC_CREAT);if (msgid == -1) {cout << "msgget error \n";return;}while (true) {if (msgrcv(msgid, (void *)&data, BUFFER_SIZ, msgtype, 0) == -1) {cout << "error " << errno << endl;}cout << "read data " << data.text << endl;if (strlen(data.text) > 6) { // 發(fā)送超過6個字符的數(shù)據(jù),結(jié)束break;}}if (msgctl(msgid, IPC_RMID, 0) == -1) {cout << "msgctl error \n";}cout << "Receive ok \n";
}void Send() {MsgWrapper data;long int msgtype = 2;int msgid = msgget((key_t)1024, 0666 | IPC_CREAT);if (msgid == -1) {cout << "msgget error \n";return;}data.msg_type = msgtype;for (int i = 0; i < 10; ++i) {memset(data.text, 0, BUFFER_SIZ);char a = 'a' + i;memset(data.text, a, 1);if (msgsnd(msgid, (void *)&data, BUFFER_SIZ, 0) == -1) {cout << "msgsnd error \n";return;}std::this_thread::sleep_for(std::chrono::seconds(1));}memcpy(data.text, "1234567", 7);if (msgsnd(msgid, (void *)&data, BUFFER_SIZ, 0) == -1) {cout << "msgsnd error \n";return;}
}int main() {std::thread r(Receive);r.detach();std::thread s(Send);s.detach();std::this_thread::sleep_for(std::chrono::seconds(20));return 0;
}輸出:root@iZuf64idor3ej648ciairaZ:~# ./a.out
read data a
read data b
read data c
read data d
read data e
read data f
read data g
read data h
read data i
read data j
read data 1234567
Receive ok
代碼中為了演示方便使用消息隊列進行的線程間通信,該代碼同樣用于進程間通信,消息隊列的實現(xiàn)依賴于內(nèi)核的支持,上述代碼可能在某些系統(tǒng)(WSL)上不能運行,在正常的Ubuntu上可以正常運行。
消息隊列VS命名管道
消息隊列>命名管道
1)消息隊列收發(fā)消息自動保證了同步,不需要由進程自己來提供同步方法,而命名管道需要自行處理同步問題;
2)消息隊列接收數(shù)據(jù)可以根據(jù)消息類型有選擇的接收特定類型的數(shù)據(jù),不需要像命名管道一樣默認(rèn)接收數(shù)據(jù)。
消息隊列<命名管道
消息隊列有一個缺點就是發(fā)送和接收的每個數(shù)據(jù)都有最大長度的限制。
共享內(nèi)存
可開辟中一塊內(nèi)存,用于各個進程間共享,使得各個進程可以直接讀寫同一塊內(nèi)存空間,就像線程共享同一塊地址空間一樣,該方式基本上是最快的進程間通信方式,因為沒有系統(tǒng)調(diào)用干預(yù),也沒有數(shù)據(jù)的拷貝操作,但由于共享同一塊地址空間,數(shù)據(jù)競爭的問題就會出現(xiàn),需要自己引入同步機制解決數(shù)據(jù)競爭問題。
共享內(nèi)存只是一種方式,它的實現(xiàn)方式有很多種,主要的有mmap系統(tǒng)調(diào)用、Posix共享內(nèi)存以及System V共享內(nèi)存等。通過這三種“工具”共享地址空間后,通信的目的自然就會達到。
信號
信號也是進程間通信的一種方式,信號可以在任何時候發(fā)送給某一個進程,如果進程當(dāng)前并未處于執(zhí)行狀態(tài),內(nèi)核將信號保存,直到進程恢復(fù)到執(zhí)行態(tài)再發(fā)送給進程,進程可以對信號設(shè)置預(yù)處理方式,如果對信號設(shè)置了阻塞處理,則信號的傳遞會被延遲直到阻塞被取消,如果進程結(jié)束,那信號就被丟棄。我們常用的CTRL+C和kill等就是信號的一種,也達到了進程間通信的目的,進程也可以對信號設(shè)置signal捕獲函數(shù)自定義處理邏輯。這種方式有很大的缺點:只有通知的作用,通知了一下消息的類型,但不能傳輸要交換的任何數(shù)據(jù)。
Linux系統(tǒng)中常見的信號有:
SIGHUP:該信號在用戶終端結(jié)束時發(fā)出,通常在中斷的控制進程結(jié)束時,所有進程組都將收到該信號,該信號的默認(rèn)操作是終止進程;
SIGINT:程序終止信號,通常的CTRL+C產(chǎn)生該信號來通知終止進程;
SIGQUIT:類似于程序錯誤信號,通常的CTRL+\產(chǎn)生該信號通知進程退出時產(chǎn)生core文件;
SIGILL:執(zhí)行了非法指令,通常數(shù)據(jù)段或者堆棧溢出可能產(chǎn)生該信號;
SIGTRAP:供調(diào)試器使用,由斷電指令或其它陷阱指令產(chǎn)生;
SIGABRT:使程序非正常結(jié)束,調(diào)用abort函數(shù)會產(chǎn)生該信號;
SIGBUS:非法地址,通常是地址對齊問題導(dǎo)致,比如訪問一個4字節(jié)長的整數(shù),但其地址不是4的倍數(shù);
SIGSEGV:合理地址的非法訪問,訪問了未分配的內(nèi)存或者沒有權(quán)限的內(nèi)存區(qū)域;
SIGPIPE:管道破裂信號,socket通信時經(jīng)常會遇到,進程寫入了一個無讀者的管道;
SIGALRM:時鐘定時信號,由alarm函數(shù)設(shè)置的時間終止時產(chǎn)生;
SIGFPE:出現(xiàn)浮點錯誤(比如除0操作);
SIGKILL:殺死進程(不能被捕捉和忽略);
信號量
想必大家都聽過信號量,信號量就是一個特殊的變量,程序?qū)ζ湓L問都是原子操作,每個信號量開始都有個初始值。最簡單最常見的信號量是只能取0和1的變量,也叫二值信號量。
信號量有兩個操作,P和V:
P:如果信號量變量值大于0,則變量值減1,如果值為0,則阻塞進程;
V:如果有進程阻塞在該信號量上,則喚醒阻塞的進程,如果沒有進程阻塞,則變量值加1
信號量和信號有什么關(guān)系?
沒有任何關(guān)系,完全是不同的東西。
信號量與互斥量有什么區(qū)別?
互斥量用于互斥,信號量用于同步,互斥指的是某一資源同一時間只允許一個訪問者訪問,但無法限制訪問順序,訪問是無序的,而同步在互斥的基礎(chǔ)上可以控制訪問者對資源的順序。
套接字:就是網(wǎng)絡(luò)傳輸,不用多說,網(wǎng)絡(luò)通信都可以多機通信呢,更不用說進程間通信啦,你能看到程序喵的文章也是套接字的功勞。
文件:顯而易見,多個進程可以操作同一個文件,所以也可以通過文件來進行進程間通信。
關(guān)于進程和線程的知識點介紹就到這里,相信你弄懂這19個問題,面試不用愁!
?
總結(jié)
以上是生活随笔為你收集整理的Linux操作系统常见问题汇总的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 什么是竣工验收备案表?
- 下一篇: 小米10和iPhone11 Pro对比,