Khôi phục file bị xóa nhầm bằng rm -rf trên ext4
Chạy nhầm rm -rf? Dừng ghi và unmount ngay. Xem các cách khôi phục thực tế trên ext4, cùng lỗi “target is busy.” và thứ tự xử lý an toàn.
Việc cần làm trong 60 giây đầu tiên
Hai việc quyết định bạn có khôi phục được các file đã xóa bằng rm -rf hay không, và cả hai đều phải làm trước khi mở công cụ tìm kiếm. Dừng ghi vào filesystem đó. Sau đó đưa filesystem ra khỏi trạng thái sử dụng bằng cách unmount hoặc remount ở chế độ read-only.
rm không xóa dữ liệu. Nó xóa directory entry. Khi không còn hard link nào khác trỏ đến file và không còn process nào mở file, inode cùng các data block của file được đánh dấu là còn trống. Các byte vẫn còn trên thiết bị. Chúng vẫn ở đó cho đến khi block allocator cấp các block đó cho thứ khác và thứ đó ghi đè lên chúng. Mỗi giây filesystem vẫn được mount và đang hoạt động, một daemon có thể ghi thêm một dòng log hoặc database có thể flush một page. Một trong hai thao tác ghi đó có thể rơi đúng vào các block bạn muốn khôi phục.
Vì vậy, các command đầu tiên phải là command dừng ghi, không phải command khôi phục file.
sudo systemctl stop nginx postgresql
sudo umount /mnt/dataNếu umount trả về umount: /mnt/data: target is busy., hãy tìm process đang giữ filesystem ở trạng thái open.
sudo fuser -vm /mnt/data
sudo lsof +D /mnt/dataNếu không thể giải phóng filesystem, hãy remount nó ở chế độ read-only. Read-only mount ngăn các allocation mới. Đây là phần lớn những gì bạn cần.
sudo mount -o remount,ro /mnt/dataNếu path đã xóa nằm trên root filesystem thì việc này khó hơn. sudo mount -o remount,ro / thường sẽ fail với mount: /: cannot remount /dev/vda1 read-only. vì các process đang chạy vẫn mở file để ghi và kernel sẽ không buộc chúng đóng file. Trên VPS, cách thực tế là dùng rescue hoặc recovery mode của provider. Chế độ này boot một live system riêng, trong đó disk của bạn được attach nhưng chưa được mount. Khi đó, mọi command bên dưới đều chạy trên một thiết bị mà không có process nào ghi vào.
Một rule áp dụng cho toàn bộ guide này: Không bao giờ ghi các file đã khôi phục, disk image hoặc tool mới cài vào filesystem mà bạn đang khôi phục dữ liệu từ đó. Hãy attach một volume thứ hai hoặc gửi output đến máy khác qua SSH.
Vì sao việc khôi phục sau rm -rf trên ext4 hầu như vô vọng
Hãy đặt kỳ vọng phù hợp trước khi cài bất kỳ thứ gì. Xác nhận bạn đang dùng filesystem nào:
lsblk -fTrên ext4, filesystem mặc định trên gần như mọi image VPS, vị trí dữ liệu của file được lưu trong inode dưới dạng cây extent. Một extent là một record cho biết block logic N của file bắt đầu tại block vật lý M và kéo dài L block. File nhỏ lưu tối đa 4 record như vậy ngay trong inode. File lớn hơn trỏ đến các block bổ sung chứa phần còn lại của cây.
Khi link cuối cùng đến một file bị xóa và không còn process nào mở file đó, ext4 duyệt cây, trả lại mọi extent cho bộ cấp phát block rồi xóa cây khỏi inode. Sau đó inode được đánh dấu là rảnh và ghi thời điểm xóa. Dữ liệu thực tế không bị thay đổi. Record trong inode về vị trí của dữ liệu đó đã bị xóa.
ext3 cũng không khác ở điểm này. Nó cũng reset các block pointer của file đã xóa. Chỉ ext2 mới giữ lại các pointer đó để công cụ undelete lần theo. Bạn vẫn có thể liệt kê các inode đã xóa trên ext4:
sudo debugfs -R lsdel /dev/vdb1debugfs mở device ở chế độ chỉ đọc nếu bạn không truyền -w, nên thao tác này an toàn khi device chưa được mount và không mất gì khi thử. Các inode sẽ được liệt kê. Đến bước dump inode thì quy trình dừng lại, vì block map từng được inode lưu đã bị xóa, nên dump không còn gì để lần theo.
Có 2 công cụ cố gắng xử lý vấn đề này bằng cách đọc journal. Journal là một ring có kích thước cố định, được ext4 dùng để giữ metadata nhất quán sau sự cố, và nó vẫn có thể chứa bản sao cũ của inode trước khi file bị xóa. extundelete và ext4magic đều tìm kiếm trong journal. Kiểm tra kích thước bạn đang có:
sudo dumpe2fs -h /dev/vdb1 | grep -i journalJournal khá nhỏ, thường là 128 MB trên filesystem vừa hoặc lớn, và hoạt động thông thường sẽ ghi đè vòng qua nó. Ngay cả việc đọc file cũng làm journal thay đổi, nên một find hoặc một lần chạy backup sẽ đẩy các bản sao inode đi qua ring. Inode trước khi xóa tồn tại được bao lâu phụ thuộc vào mức độ bận của filesystem kể từ lúc xóa, không phụ thuộc vào thời gian trên đồng hồ. Trên server bận, inode có thể biến mất rất nhanh. extundelete chưa có release nào kể từ 0.2.4 vào tháng 1 năm 2013. ext4magic hiện được đánh dấu là abandoned: developer của công cụ cho biết nó không còn xử lý được filesystem ext4 hiện tại và yêu cầu người dùng không sử dụng. Hãy xem extundelete là một phương án có khả năng thành công rất thấp, chạy nó trên device chưa được mount hoặc trên disk image, và đừng ngạc nhiên nếu nó không trả về gì.
Nếu lsblk -f báo xfs, tình hình cũng không khả quan hơn, vì XFS cũng không có công cụ undelete được hỗ trợ. Thứ tự các option bên dưới không thay đổi.
File vẫn đang được một process đang chạy mở chứ?
Đây là cách khôi phục duy nhất trên trang này có khả năng thành công cao. Vì vậy, bạn không nên restart service đã sử dụng file.
Một file chỉ thực sự biến mất khi 2 số đếm đều về 0: số directory entry trỏ đến inode và số file descriptor đang mở. rm đưa số đếm thứ nhất về 0. Nếu một process vẫn giữ file ở trạng thái mở, số đếm thứ hai vẫn khác 0. Vì vậy, inode và các block của nó vẫn được cấp phát, và dữ liệu vẫn đọc được.
Tìm các file đang mở có link count đã giảm về 0:
sudo lsof +L1+L1 có nghĩa là liệt kê các file đang mở có link count nhỏ hơn 1. Mỗi kết quả hiển thị process, số file descriptor, một NLINK của 0 và một path kết thúc bằng (deleted). Lấy PID và số descriptor rồi dùng /proc:
sudo ls -l /proc/1234/fdMột entry có dạng 3 -> /var/log/app/events.log (deleted). Link đó vẫn truy cập được dữ liệu. Copy dữ liệu sang một filesystem khác:
sudo cp /proc/1234/fd/3 /mnt/rescue/events.logDùng cp, không dùng mv. Mở /proc/1234/fd/3 sẽ tạo một handle mới đến cùng inode và bắt đầu từ offset 0. Nhờ đó, bạn lấy được toàn bộ file thay vì chỉ lấy phần sau vị trí hiện tại của writer.
Có 2 giới hạn cần biết. Một directory tree đã bị xóa không thể khôi phục theo cách này, vì chỉ những file riêng lẻ mà process đã mở mới còn được giữ lại. Ngoài ra, database file được copy trong lúc engine vẫn đang ghi sẽ không phải là bản copy nhất quán, vì cp không tạo atomic snapshot và các phần khác nhau của file có thể đến từ những thời điểm khác nhau. Hãy dự kiến file có thể bị hỏng và lên kế hoạch chạy các công cụ recovery hoặc repair của chính engine trên file đó, thay vì xem nó là bản sạch. Các entry mà lsof hiển thị mem thay cho số descriptor là các file được memory map. Những file này không có /proc/<pid>/fd entry để copy.
Bạn có snapshot trên btrfs, ZFS hoặc LVM không?
Nếu filesystem hỗ trợ snapshot, các file đã xóa vẫn còn nguyên bên trong một snapshot. Cách này chỉ có tác dụng nếu snapshot đã tồn tại trước khi file bị xóa. Snapshot bạn tạo bây giờ không thể khôi phục trạng thái trong quá khứ.
btrfs lưu snapshot dưới dạng subvolume:
sudo btrfs subvolume list /Duyệt snapshot rồi dùng cp -a để sao chép các đường dẫn cần khôi phục. Nên sao chép từng đường dẫn thay vì rollback toàn bộ subvolume, vì rollback cũng loại bỏ mọi dữ liệu được ghi từ thời điểm tạo snapshot đến hiện tại.
ZFS cung cấp mỗi snapshot dưới dạng một thư mục chỉ đọc:
zfs list -t snapshot
ls /tank/data/.zfs/snapshot/Thư mục .zfs bị ẩn và không xuất hiện trong kết quả ls đơn giản tại thư mục gốc của dataset, nhưng bạn có thể truy cập bằng tên thư mục này. Hãy sao chép file ra từ đó. zfs rollback đưa toàn bộ dataset về trạng thái của snapshot được chỉ định và xóa mọi snapshot mới hơn snapshot đó, vì vậy chỉ dùng khi không còn cách nào khác.
Snapshot LVM là volume copy-on-write có kích thước cố định:
sudo lvs
sudo mount -o ro /dev/vg0/data-snap /mnt/snapMount snapshot ở chế độ chỉ đọc rồi sao chép dữ liệu ra. Kiểm tra lvs trước khi sử dụng, vì snapshot LVM sẽ bị kernel vô hiệu hóa nếu hết không gian được cấp phát. Khi đã xảy ra việc đó, dữ liệu bên trong snapshot sẽ mất.
Snapshot không phải là backup. Nó nằm trên cùng disk hoặc cùng pool với dữ liệu gốc, nên cũng chịu mọi lỗi có thể xảy ra với dữ liệu gốc. Snapshot rất phù hợp để hoàn tác một thao tác nhầm xảy ra cách đây hai phút, đúng với mục đích cần dùng ở đây.
Khôi phục bằng PhotoRec trên image, không bao giờ chạy trên đĩa đang hoạt động
Nếu không cách nào ở trên áp dụng được, lựa chọn còn lại là carving: quét thiết bị raw để tìm các mẫu byte đánh dấu phần đầu của một loại file đã biết, rồi ghi phần dữ liệu theo sau ra ngoài. Carving chỉ đọc dữ liệu file. Tên file, cấu trúc thư mục, timestamp và quyền sở hữu đều là metadata của filesystem. Chính metadata đó đã bị rm phá hủy, nên không thể khôi phục lại. Bạn sẽ nhận được các file có tên dạng f0384512.jpg trong một thư mục output được đánh số, rồi phải tự phân loại chúng.
Có 2 quy tắc quyết định việc này có hoạt động hay không.
Thứ nhất, hãy tạo image của thiết bị trước khi cho bất kỳ công cụ nào khác truy cập vào nó. Trên Debian và Ubuntu, package là gddrescue và binary mà package này cài đặt là ddrescue.
sudo apt update && sudo apt install -y gddrescue testdisk
sudo ddrescue -n /dev/vdb1 /mnt/rescue/vdb1.img /mnt/rescue/vdb1.map/mnt/rescue phải nằm trên một thiết bị khác, với dung lượng trống ít nhất bằng dung lượng của partition. lsblk -b in chính xác kích thước theo byte. File map cho phép tiếp tục copy sau khi bị gián đoạn thay vì phải bắt đầu lại. Sau khi có image, bạn có thể dùng một công cụ khác để thử lại trên đúng cùng một tập byte. Điều này không thể làm được nếu công cụ đầu tiên đã ghi đè lên đĩa.
Thứ hai, hãy trỏ công cụ khôi phục vào file image.
sudo photorec /d /mnt/rescue/recup /mnt/rescue/vdb1.imgphotorec mở một menu dạng text. Chọn partition, sau đó chọn loại filesystem, các file signature cần tìm và thư mục đích. Hãy thu hẹp danh sách signature xuống các loại file bạn thực sự bị mất trước khi bắt đầu. Danh sách mặc định sẽ tìm mọi loại file và trả về hàng chục nghìn fragment để bạn sàng lọc.
testdisk, cùng thuộc package này, có chức năng undelete riêng và chỉ hỗ trợ FAT, exFAT, NTFS và ext2. Với ext4, điều đó khiến photorec.
Hãy dự đoán rằng các file bị phân mảnh sẽ được khôi phục không đầy đủ. Carving giả định các block của file nằm liền nhau. Vì vậy, file bị allocator chia ra ở nhiều vị trí trên đĩa có thể bị ghép sai hoặc bị bỏ sót hoàn toàn. Các file media thường được carving khá tốt vì có header rõ ràng. File text thuần, file cấu hình và source code thường được carving kém, vì không có byte signature đánh dấu phần đầu của một shell script.
Khoảng trắng thừa: đường dẫn sai bị xóa như thế nào
Hầu hết sự cố với rm -rf đều bắt nguồn từ shell. rm nhận một danh sách đường dẫn rồi xóa từng đường dẫn theo thứ tự. Nó không biết ý định của bạn là gì.
Trường hợp kinh điển là một khoảng trắng:
rm -rf /home/deploy/app /old
rm -rf /home/deploy/app/oldDòng đầu tiên có 2 đối số. Nó xóa ứng dụng, rồi xóa /old. Nếu /old không tồn tại, rm hoàn toàn không in gì vì -f ẩn lỗi không tìm thấy file. Không có thông báo không có nghĩa là thao tác đã an toàn.
Dạng thứ hai là một biến chưa được đặt trong dấu ngoặc kép và chứa khoảng trắng:
dir="/srv/my app"
rm -rf $dirShell tách giá trị tại khoảng trắng, nên rm nhận /srv/my và app là 2 đường dẫn riêng biệt. Khi được ghi là rm -rf "$dir", đó là một đường dẫn duy nhất.
Dạng thứ ba là một biến rỗng, thường do lệnh đáng lẽ phải gán giá trị cho biến đã fail:
rm -rf "$TARGET"/*Khi TARGET chưa được set, biểu thức đó được mở rộng thành rm -rf /*. GNU rm từ chối dạng trống này: rm -rf / in rm: it is dangerous to operate recursively on '/' rồi dừng. Dạng dùng glob không được bảo vệ như vậy, vì shell thay /* bằng danh sách các đường dẫn cấp cao nhất thực tế trước khi rm chạy; còn / không nằm trong danh sách đó nên guard không bao giờ được kích hoạt.
Thói quen giúp tránh lỗi lần sau
- Luôn đặt mọi biến dùng làm path trong dấu ngoặc kép. Viết
"$dir"mỗi lần sử dụng, kể cả bên trong các phép kiểm tra và vòng lặp. - Dừng khi giá trị rỗng.
rm -rf "${TARGET:?TARGET is not set}"/*khiến shell dừng và hiển thị thông báo của bạn trước khirmchạy, bất cứ khi nàoTARGETchưa được đặt hoặc có giá trị rỗng. Đặtset -euo pipefailở đầu mọi script có thao tác xóa. - Thêm
--one-file-system. Tùy chọn này yêu cầurmbỏ qua mọi thư mục nằm trên filesystem khác với filesystem của đối số bạn truyền vào. Nhờ đó, lệnh xóa đệ quy không đi vào volume backup đã mount hoặc bind mount. - Không xóa bằng root. Một service account chỉ có thể xóa những gì nó sở hữu. Đây là lý do cần chạy mỗi service bằng một user không có quyền đặc biệt. Nếu không chắc một account có thể truy cập đến đâu, đọc các permission bit trong output của ls sẽ trả lời trong một lệnh.
- In danh sách trước khi thao tác. Trong script, hãy tạo các path,
printf '%s\n'chúng, đọc output, rồi xóa trong lượt thứ hai. - Luôn có lệnh trash để dùng nhanh.
sudo apt install trash-clicung cấp cho bạntrash-put,trash-list,trash-restorevàtrash-empty. File được chuyển vào trash từ home volume sẽ chuyển đến~/.local/share/Trash(hoặc$XDG_DATA_HOME/Trashnếu biến đó được đặt). File trên các mount khác sẽ chuyển đến thư mục.Trash/$uidhoặc.Trash-$uidở thư mục gốc của mount đó.trash-empty 30sẽ xóa mọi file đã nằm trong trash hơn 30 ngày.
Alias rm thành trash-put có vẻ là bước tiếp theo hợp lý, nhưng đây là một cái bẫy. Alias tạo ra một phản xạ sẽ không hoạt động trên server tiếp theo nếu server đó không có alias này. Alias cũng không áp dụng bên trong script, trong khi đây lại là nơi các lỗi tốn kém thường xảy ra. Thay vào đó, hãy chủ động gõ trash-put.
Khôi phục là cách duy nhất luôn hiệu quả
Mọi cách ở trên đều chỉ là khả năng. Backup thì không.
Có 2 điều khiến một backup trở nên đáng tin cậy. Backup phải chạy theo lịch mà bạn không cần nhớ để kích hoạt. Bạn cũng phải khôi phục từ backup đó ít nhất 1 lần. Một repository chưa từng được dùng để khôi phục chỉ là sự tin tưởng, vì những lỗi khiến nó vô dụng, như sai path trong danh sách include hoặc password của repository không ai ghi lại, chỉ xuất hiện vào ngày bạn cần dùng.
Với restic, khôi phục chỉ cần 2 lệnh.
restic -r /srv/restic-repo snapshots
restic -r /srv/restic-repo restore latest --target /mnt/rescue --include /srv/appdataKhôi phục vào một directory trống thay vì ghi đè lên path đang chạy, để bạn có thể so sánh 2 bên trước khi đưa dữ liệu vào vị trí chính thức. Thiết lập backup restic trên VPS trình bày cách thiết lập repository và systemd timer để chạy backup.
Với Borg:
borg list /srv/borg-repo
borg extract /srv/borg-repo::daily-2026-08-08 srv/appdataCác path bên trong Borg archive được lưu mà không có dấu slash ở đầu, nên srv/appdata sẽ khớp còn /srv/appdata sẽ không khớp gì. borg extract ghi dữ liệu vào working directory hiện tại, vì vậy trước tiên hãy cd vào một scratch directory.
Nếu bạn vẫn chưa chọn giữa 2 công cụ, so sánh restic và Borg trình bày về deduplication và append-only repository. Đây là thuộc tính ngăn một server bị breach xóa lịch sử backup của chính nó. Dùng công cụ nào cũng được. Câu trả lời sai là không chạy công cụ nào.
Server mới là thời điểm rẻ nhất để thiết lập việc này, trước khi trên server có dữ liệu đáng mất. 10 phút đầu tiên trên VPS mới là phần bạn nên xử lý việc đó, cùng với thiết lập SSH và firewall.
Sau đó, hãy tạo một lịch định kỳ trong calendar: mỗi tháng khôi phục 1 directory từ repository vào /tmp rồi đọc các file trong đó. Một thói quen đơn giản này có giá trị hơn mọi công cụ trên trang này.
FAQ
Tôi có thể khôi phục file đã xóa trên ext4 không?
Thường là không. Khi link cuối cùng của một file bị xóa và không còn process nào mở file đó, ext4 sẽ xóa extent tree khỏi inode. Vì vậy inode không còn ghi nhận vị trí của dữ liệu. Một bản cũ của inode có thể vẫn còn trong ext4 journal, và extundelete sẽ tìm bản đó. Bản sao đó còn tồn tại hay không phụ thuộc vào mức độ hoạt động của filesystem sau khi xóa, không phụ thuộc vào việc đã bao lâu kể từ lúc xóa. Vì vậy, trước tiên hãy dừng mọi thao tác ghi. extundelete chưa có bản release nào kể từ January 2013, còn ext4magic hiện được developer đánh dấu là abandoned và cho biết công cụ này không còn hoạt động đúng trên các filesystem ext4 hiện tại. Chạy extundelete trên device đã unmount hoặc disk image, tuyệt đối không chạy trên filesystem đang mount. Trước tiên, hãy kiểm tra đối tượng bạn đang làm việc bằng sudo dumpe2fs -h /dev/vdb1 | grep -i journal.
Một service vẫn đang mở file đã xóa. Tôi có thể lấy lại file đó không?
Có. Đây là trường hợp tốt nhất. Khi một process vẫn giữ file ở trạng thái open, inode và các data block của file vẫn được cấp phát, nên dữ liệu vẫn có thể đọc được. Không restart service, vì việc đóng file descriptor cuối cùng sẽ hoàn tất thao tác xóa. Chạy sudo lsof +L1 để liệt kê các file đang mở có link count bằng 0. Ghi lại PID và số file descriptor, sau đó copy dữ liệu qua /proc bằng sudo cp /proc/1234/fd/3 /mnt/rescue/events.log. Ghi bản copy sang một filesystem khác. Các entry hiển thị mem thay vì số descriptor là các file được memory map và không có đường dẫn /proc/<pid>/fd để copy.
Tại sao nên tạo image của disk thay vì chạy recovery tool trực tiếp trên disk?
Vì mọi tool đều phải ghi output vào đâu đó. Nếu ghi lên filesystem đang được khôi phục, dữ liệu ghi có thể chồng lên các free block vẫn còn chứa dữ liệu của bạn. Trước tiên, hãy copy partition sang một device khác bằng sudo ddrescue -n /dev/vdb1 /mnt/rescue/vdb1.img /mnt/rescue/vdb1.map, sau đó trỏ photorec đến file image. Image cũng cho phép bạn thử tool thứ hai sau này trên đúng cùng một tập byte. Điều này không thể thực hiện sau khi có dữ liệu được ghi đè lên bản gốc.
rm -rf / còn phá hủy hệ thống Linux không?
Bản thân command này không phá hủy hệ thống. GNU rm sẽ từ chối thực hiện và in ra rm: it is dangerous to operate recursively on '/'. Các dạng nguy hiểm là những dạng được tạo ra qua một cách khác. rm -rf "$TARGET"/* với TARGET chưa được set sẽ được mở rộng thành rm -rf /*, rồi shell truyền cho rm danh sách các thư mục top-level thực tế. Danh sách này không chứa /, nên cơ chế bảo vệ không được kích hoạt. Thay vào đó, hãy viết "${TARGET:?TARGET is not set}" để shell dừng lại trước khi rm chạy.
Filesystem snapshot có phải là backup không?
Không. Snapshot của btrfs hoặc ZFS nằm trên cùng pool với dữ liệu mà nó bảo vệ. Vì vậy, nếu disk hỏng hoặc pool bị phá hủy thì cả hai sẽ mất cùng lúc. LVM snapshot còn có vấn đề về kích thước cố định. Khi snapshot đầy, kernel sẽ invalidate snapshot và nội dung của nó sẽ mất. Snapshot rất hữu ích để hoàn tác thao tác xóa vừa xảy ra hai phút trước. Với mọi trường hợp khác, hãy lưu một repository trên phần cứng riêng.