linux查看並發

㈠ 在linux系統中使用Shell實現多線程運行任務（多任務並發執行） 2022-05-30

最近，有一批任務需要把兩批的fastq合並到一起並壓縮成一個fastq文件才能繼續往下做，由於存儲空間有限又不能直接全部跑上，只能按樣本逐個分批跑。眾所周知，一般fastq是成對存在的，所需要對read1和read2分別合並一次，然而這次任務的fastq文件比較大，合並然後壓縮一次需要1天左右，那對於一組fastq就要2-3天，這也太耗時間了，所以我在想能不能read1和read2 同時跑上，這就可以節省一半的時間了。

平時也能遇到很多類似的任務，特別是在進程數有限的情況下，如果這些小任務單獨佔用一個進程，而任務很多就很耗時間，如果能在一個進程下實現多個線程並行執行，就能大大提高運行效率。關於進程和線程的知識可以參考知乎的這篇文章【 Shell「 多線程」，提高工作效率 】，整理的也比較有條理，能比較容易讀懂。

當然，某些博主也寫過類似的文章，例如這篇【 shell後台限制多並發控制後台任務強度進行文件拷貝 】但是實在是太高深莫測了，看不懂，一時半會兒也學不會。本文將示例Shell實現多線程的簡單版本，其實不用太復雜。

其實只需要兩個步驟， 第一步是給需要並行運行的命令行在結尾加上"&"，代表放到後台運行，第二步是在在所有並行任務的後面加上一句「wait」，意思是等所有通過「&」放到後台運行的任務跑完後再繼續執行後面的任務 ，這些就能實現所有帶有「&」的行並行執行了。

看完腳本是不是覺得很簡單？

上面的腳本適合並行任務少的，可以手動加&和wait，但是如果有幾十個甚至上百個的小任務就比較麻煩了。但不用擔心，可以寫個循環，批量運行。

循環的結果也是跟上面類似的，只是多了個循環結構。

如果需要執行的任務只有一行，可以把大括弧去掉。

關於for和while的循環可以查看之前的文章【 Shell常用循環示例（for和while批量處理）2022-05-25 】

需要注意的是多線程並行還是需要有限制的，畢竟都是在一個進程里運行，如果線程太多了會卡頓的，建議控制在100個以內，當然還有畢竟高級和復雜的方法可以實現限制。因為上面的腳本已經夠我用了，沒繼續往下學，以後可以再補充。

㈡ linux 這么模擬1000並發

可以使用apache的 ab 測試軟體做壓力測試
我們可以模擬100個並發用戶，對一個頁面發送1000個請求 如
$/bin/ab -n1000 -c100 URL
1000個並發 要看是靜態頁面，還是動態頁面。
靜態頁面2台伺服器，配置大概 4核CPU 8G 內存 可以滿足。
動態頁面就要看應用伺服器和資料庫伺服器了。

㈢ 怎麼監控linux web伺服器的埠並發量，例如8082埠

用root用戶在伺服器上執行命令：
#
lsof
-i
:8082
查看8082埠有關的信息。

㈣ Linux下socket並發連接數怎麼設置

並發socket連接數的多少決定於系統資源的多少，沒有一個常值的．在實際開發或者linux系統管理中也會根據需配段要進行相應的設置．
1．一般來說每一個網路連接，都會敗銷建立相應的socket句柄，同時每個連接也會有標准輸入輸出等基本的文件文件句柄，而且每一個socket連接都是進行文件操作的，因此連接數決定於系統資源．

2．Linux上一般可以通過ulimit來進行相應的資源限制，默認能打開的文件描述符自己可以查看．如下圖所示：

3．ulimit的命令格式：ulimit [-acdfHlmnpsStvw] [size]
參數說明：
-H 設置硬資源限制.
-S 設置軟資源限制.
-a 顯示當前所有的資源限制.
-c size:設置core文件的最大值.單位:blocks
-d size:設置數據段的最大值.單位:kbytes
-f size:設置創建文件的最大值.單位:blocks
-l size:設置在內存中鎖定進程的最大值.單位:kbytes
-m size:設置可以使用的培枯譽常駐內存的最大值.單位:kbytes
-n size:設置內核可以同時打開的文件描述符的最大值.單位:n
-p size:設置管道緩沖區的最大值.單位:kbytes
-s size:設置堆棧的最大值.單位:kbytes
-t size:設置CPU使用時間的最大上限.單位:seconds
-v size:設置虛擬內存的最大值.單位:kbytes
-u <程序數目> 用戶最多可開啟的程序數目

㈤ 如何查看linux並發連接數

1、查看Web伺服器（Nginx Apache）的並發請求數及其TCP連接狀態：
netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}
netstat -n|grep ^tcp|awk '{print $NF}'|sort -nr|uniq -c
或者：
netstat -n | awk '/^tcp/ {++state[$NF]} END {for(key in state) print key,"t",state[key]}
返回結果一般如下：
LAST_ACK 5 （正在等待處理的請求數）
SYN_RECV 30
ESTABLISHED 1597 （正常數據傳輸狀態）
FIN_WAIT1 51
FIN_WAIT2 504
TIME_WAIT 1057 （處理完畢，等待超時結束的請求數）
其他參數說明：
CLOSED：無連接是活動的或正在進行
LISTEN：伺服器在等待進入呼叫
SYN_RECV：一個連接請求已經到達，等待確認
SYN_SENT：應用已經開始，打開一個連接
ESTABLISHED：正常數據傳輸狀態
FIN_WAIT1：應用說它已經完成
FIN_WAIT2：另一邊已同意釋放
ITMED_WAIT：等待所有分組死掉
CLOSING：兩邊同時嘗試關閉
TIME_WAIT：另一邊已初始化一個釋放
LAST_ACK：等待所有分組死掉
2、查看Nginx運行進程數
ps -ef | grep nginx | wc -l
返回的數字就是nginx的運行進程數，如果是apache則執行
ps -ef | grep httpd | wc -l
3、查看Web伺服器進程連接數：
netstat -antp | grep 80 | grep ESTABLISHED -c

㈥ linux c 多線程並發中並發具體是什麼意思，並發和同步什麼關系，代碼怎樣寫才算並發

並發是指多個線程同時運行,比如windows就是並發的操作系統。
並發以後就可以，一邊聽歌，一邊瀏覽網頁。即，看起來像同一時間可以干多個事情。
同步，就是一種控制策略。
就比如說，用迅雷看電影。一邊下載，一邊播放。這個時候下載進程和播放進程，他們兩個就有同步的機制，例如：只能播放視頻文件中已經下載完成的部分，沒有下載的不能播放。並且，如果已經下載的全部播放完了，那播放器就要等待，等到有內容的時候再繼續播放。
並發怎麼寫：首先要把任務拆分成多個能獨立執行的部分。例如：下載部分，播放部分。
然後控制好並行部分的運行機制。