11 個步驟完美排查服務(wù)器是否被入侵

原文連接：https://zhuanlan.zhihu.com/p/441837141

隨著開源產(chǎn)品的越來越盛行，作為一個Linux運(yùn)維工程師，能夠清晰地鑒別異常機(jī)器是否已經(jīng)被入侵了顯得至關(guān)重要，個人結(jié)合自己的工作經(jīng)歷，整理了幾種常見的機(jī)器被黑情況供參考：

背景信息：以下情況是在CentOS 6.9的系統(tǒng)中查看的，其它Linux發(fā)行版類似。

1

入侵者可能會刪除機(jī)器的日志信息

可以查看日志信息是否還存在或者是否被清空，相關(guān)命令示例：

2

入侵者可能創(chuàng)建一個新的存放用戶名及密碼文件

可以查看/etc/passwd及/etc/shadow文件，相關(guān)命令示例：

3

入侵者可能修改用戶名及密碼文件

可以查看/etc/passwd及/etc/shadow文件內(nèi)容進(jìn)行鑒別，相關(guān)命令示例：

4

查看機(jī)器最近成功登陸的事件和最后一次不成功的登陸事件

對應(yīng)日志“/var/log/lastlog”，相關(guān)命令示例：

5

查看機(jī)器當(dāng)前登錄的全部用戶

對應(yīng)日志文件“/var/run/utmp”，相關(guān)命令示例：

6

查看機(jī)器創(chuàng)建以來登陸過的用戶

對應(yīng)日志文件“/var/log/wtmp”，相關(guān)命令示例：

7

查看機(jī)器所有用戶的連接時間（小時）

對應(yīng)日志文件“/var/log/wtmp”，相關(guān)命令示例：

8

如果發(fā)現(xiàn)機(jī)器產(chǎn)生了異常流量

可以使用命令“tcpdump”抓取網(wǎng)絡(luò)包查看流量情況或者使用工具”iperf”查看流量情況

9

可以查看/var/log/secure日志文件

嘗試發(fā)現(xiàn)入侵者的信息，相關(guān)命令示例：

10

查詢異常進(jìn)程所對應(yīng)的執(zhí)行腳本文件

a.top命令查看異常進(jìn)程對應(yīng)的PID

b.在虛擬文件系統(tǒng)目錄查找該進(jìn)程的可執(zhí)行文件

11

如果確認(rèn)機(jī)器已被入侵，重要文件已被刪除，可以嘗試找回被刪除的文件Note:

1、當(dāng)進(jìn)程打開了某個文件時，只要該進(jìn)程保持打開該文件，即使將其刪除，它依然存在于磁盤中。這意味著，進(jìn)程并不知道文件已經(jīng)被刪除，它仍然可以向打開該文件時提供給它的文件描述符進(jìn)行讀取和寫入。除了該進(jìn)程之外，這個文件是不可見的，因?yàn)橐呀?jīng)刪除了其相應(yīng)的目錄索引節(jié)點(diǎn)。

2、在/proc 目錄下，其中包含了反映內(nèi)核和進(jìn)程樹的各種文件。/proc目錄掛載的是在內(nèi)存中所映射的一塊區(qū)域，所以這些文件和目錄并不存在于磁盤中，因此當(dāng)我們對這些文件進(jìn)行讀取和寫入時，實(shí)際上是在從內(nèi)存中獲取相關(guān)信息。大多數(shù)與 lsof 相關(guān)的信息都存儲于以進(jìn)程的 PID 命名的目錄中，即 /proc/1234 中包含的是 PID 為 1234 的進(jìn)程的信息。每個進(jìn)程目錄中存在著各種文件，它們可以使得應(yīng)用程序簡單地了解進(jìn)程的內(nèi)存空間、文件描述符列表、指向磁盤上的文件的符號鏈接和其他系統(tǒng)信息。lsof 程序使用該信息和其他關(guān)于內(nèi)核內(nèi)部狀態(tài)的信息來產(chǎn)生其輸出。所以lsof 可以顯示進(jìn)程的文件描述符和相關(guān)的文件名等信息。也就是我們通過訪問進(jìn)程的文件描述符可以找到該文件的相關(guān)信息。

3、當(dāng)系統(tǒng)中的某個文件被意外地刪除了，只要這個時候系統(tǒng)中還有進(jìn)程正在訪問該文件，那么我們就可以通過lsof從/proc目錄下恢復(fù)該文件的內(nèi)容。

假設(shè)入侵者將/var/log/secure文件刪除掉了，嘗試將/var/log/secure文件恢復(fù)的方法可以參考如下：

a.查看/var/log/secure文件，發(fā)現(xiàn)已經(jīng)沒有該文件

b.使用lsof命令查看當(dāng)前是否有進(jìn)程打開/var/log/secure，

c.從上面的信息可以看到 PID 1264（rsyslogd）打開文件的文件描述符為4。同時還可以看到/var/log/ secure已經(jīng)標(biāo)記為被刪除了。因此我們可以在/proc/1264/fd/4（fd下的每個以數(shù)字命名的文件表示進(jìn)程對應(yīng)的文件描述符）中查看相應(yīng)的信息，如下：

d.從上面的信息可以看出，查看/proc/1264/fd/4就可以得到所要恢復(fù)的數(shù)據(jù)。如果可以通過文件描述符查看相應(yīng)的數(shù)據(jù)，那么就可以使用I/O重定向?qū)⑵渲囟ㄏ虻轿募?，?

e.再次查看/var/log/secure，發(fā)現(xiàn)該文件已經(jīng)存在。對于許多應(yīng)用程序，尤其是日志文件和數(shù)據(jù)庫，這種恢復(fù)刪除文件的方法非常有用。

- END -
?推薦閱讀?






Kubernetes 全球含金量最高的證書
我是怎么畫架構(gòu)圖的？
Nginx 通過 Lua + Redis 實(shí)現(xiàn)動態(tài)封禁 IP
Linux 性能全方位調(diào)優(yōu)經(jīng)驗(yàn)總結(jié)
最全的 Linux 學(xué)習(xí)思維導(dǎo)圖，建議收藏！
10 分鐘理解微服務(wù)、容器和 Kubernetes
Kubernetes 生態(tài)架構(gòu)圖
20張最全的DevOps架構(gòu)師技術(shù)棧圖譜
在Kubernetes上部署一套 Redis 集群
Linux Shell 腳本編程最佳實(shí)踐
做了這么多年運(yùn)維工作，現(xiàn)在才看清職業(yè)方向
Gitlab+Jenkins+k8s+Helm 的自動化部署實(shí)踐
K8s運(yùn)維錦囊，19個常見故障解決方法
搭建一套完整的企業(yè)級高可用?K8s 集群（kubeadm方式）


點(diǎn)亮，服務(wù)器三年不宕機(jī)