Як відновити файли після rm -rf на ext4
Помилково виконали rm -rf? Негайно припиніть запис на диск, розмонтуйте ext4 і перевірте доступні способи відновлення у правильному порядку.
Що робити в перші sixty секунд
Від двох дій залежить, чи вдасться відновити файли, видалені за допомогою rm -rf. Обидві потрібно виконати до того, як ви відкриєте пошукову систему. Припиніть запис на цю файлову систему. Потім виведіть її з використання: відмонтуйте або перемонтуйте в режимі лише для читання.
rm нічого не стирає. Вона видаляє запис каталогу. Коли на файл більше не вказує жодне інше жорстке посилання і жоден процес більше не тримає його відкритим, inode та блоки даних файлу позначаються як вільні. Байти все ще залишаються на пристрої. Вони зберігаються доти, доки розподільник блоків не передасть ці блоки іншому об’єкту, який не перезапише їх. Щосекунди, поки файлова система змонтована й використовується, daemon записує рядок до журналу або база даних скидає сторінку на диск. Будь-який із цих записів може потрапити в блоки, які потрібно відновити.
Тому першими потрібно виконати команди, що припиняють запис, а не команди для відновлення файлів.
sudo systemctl stop nginx postgresql
sudo umount /mnt/dataЯкщо umount повертає umount: /mnt/data: target is busy., визначте, що утримує файлову систему відкритою.
sudo fuser -vm /mnt/data
sudo lsof +D /mnt/dataЯкщо звільнити її не вдається, перемонтуйте файлову систему в режимі лише для читання. Монтування в режимі лише для читання припиняє нові розподіли блоків. У більшості випадків цього достатньо.
sudo mount -o remount,ro /mnt/dataЯкщо видалений шлях розташований у кореневій файловій системі, завдання ускладнюється. sudo mount -o remount,ro / зазвичай завершується помилкою mount: /: cannot remount /dev/vda1 read-only., оскільки запущені процеси тримають файли відкритими для запису, а kernel не примусово закриває їх. На VPS практичним рішенням є rescue або recovery mode, наданий провайдером. Він завантажує окрему live-систему з підключеним, але незмонтованим диском. Тоді кожна наведена нижче команда працює з пристроєм, на який ніхто не записує.
Це правило стосується всього посібника. Ніколи не записуйте відновлені файли, образ диска або щойно встановлений інструмент на файлову систему, з якої виконується відновлення. Підключіть другий том або передайте вивід на іншу машину через SSH.
Чому відновлення після rm -rf на ext4 здебільшого безнадійне
Сформуйте реалістичні очікування, перш ніж встановлювати будь-що. Визначте, з якою файловою системою ви працюєте:
lsblk -fУ ext4, файловій системі за замовчуванням майже в кожному образі VPS, розташування даних файлу зберігається в його inode у вигляді дерева extent. Extent — це запис, який вказує, що логічний блок N цього файлу починається з фізичного блоку M і займає L блоків. Для невеликих файлів до чотирьох таких записів зберігаються безпосередньо в inode. Для більших файлів inode вказує на додаткові блоки, у яких зберігається решта дерева.
Коли останнє посилання на файл видаляється і жоден процес більше не тримає його відкритим, ext4 проходить це дерево, повертає кожен extent алокатору блоків і очищає дерево в inode. Після цього inode позначається як вільний і отримує час видалення. Самі дані не змінюються. Видаляється запис inode про розташування цих даних.
У ext3 ситуація така сама. Ця система також скидає вказівники на блоки видаленого файлу. Лише ext2 залишала їх на місці, щоб інструмент відновлення міг перейти за ними. На ext4 все ще можна вивести список видалених inode:
sudo debugfs -R lsdel /dev/vdb1debugfs відкриває пристрій у режимі лише для читання, якщо не передати -w, тому цю операцію безпечно виконувати на відмонтованому пристрої, і спроба нічого не коштує. Inode буде виведено у список. На цьому відновлення вмісту закінчується: карту блоків, яку раніше містив inode, очищено, тому dump більше не має за чим переходити.
Два інструменти намагаються обійти це обмеження, читаючи журнал. Журнал — це кільцевий буфер фіксованого розміру, який ext4 використовує для узгодження метаданих після збою. У ньому ще може зберігатися попередня копія inode, зроблена до видалення. extundelete і ext4magic виконують пошук у журналі. Перевірте, з яким розміром ви працюєте:
sudo dumpe2fs -h /dev/vdb1 | grep -i journalРозмір журналу задається під час створення файлової системи, а поточний mke2fs визначає його масштаб залежно від розміру файлової системи. За звичайного розміру блока 4 KiB файлова система обсягом від 16 до 32 GB отримує журнал розміром 128 MB, до 64 GB — 256 MB, до 128 GB — 512 MB, а більша файлова система — 1 GB. Незалежно від розміру журналу звичайна активність послідовно перезаписує його по колу. Навіть читання файлів додає записи до журналу, тому find або запуск резервного копіювання переміщує копії inode через кільцевий буфер. Тривалість збереження inode до видалення залежить від навантаження на файлову систему після видалення, а не від часу на годиннику. На зайнятому сервері цей запис може швидко зникнути. extundelete не випускав нових версій після 0.2.4 у January 2013. ext4magic тепер позначено як abandoned: його розробник повідомляє, що інструмент більше не може обробляти поточні файлові системи ext4, і просить не використовувати його. Розглядайте extundelete як малоймовірний варіант, запускайте його на відмонтованому пристрої або образі диска і не дивуйтеся, якщо він нічого не поверне.
Якщо lsblk -f повідомляє xfs, ситуація не краща, оскільки для XFS також немає підтримуваного засобу відновлення видалених файлів. Порядок наведених нижче варіантів від цього не змінюється.
Чи відкритий файл у запущеному процесі?
Це єдиний спосіб відновлення на цій сторінці з високою ймовірністю успіху. Саме тому не слід перезапускати сервіс, який використовував файл.
Файл справді зникає лише тоді, коли обидва лічильники досягають нуля: кількість записів каталогів, що вказують на його inode, і кількість відкритих файлових дескрипторів. rm обнуляє перший лічильник. Якщо процес усе ще утримує файл відкритим, другий лічильник не дорівнює нулю. Тому inode і його блоки все ще виділені, а дані доступні для читання.
Знайдіть відкриті файли, кількість жорстких посилань на які зменшилася до нуля:
sudo lsof +L1+L1 означає: вивести список відкритих файлів із кількістю жорстких посилань менше 1. Для кожного збігу відображаються процес, номер файлового дескриптора, NLINK значення 0 і шлях, що закінчується на (deleted). Передайте PID і номер дескриптора до /proc:
sudo ls -l /proc/1234/fdЗапис має вигляд 3 -> /var/log/app/events.log (deleted). Це посилання все ще веде до даних. Скопіюйте їх в іншу файлову систему:
sudo cp /proc/1234/fd/3 /mnt/rescue/events.logВикористовуйте cp, а не mv. Відкриття /proc/1234/fd/3 створює новий дескриптор для того самого inode, починаючи зі зміщення нуль. Тому ви отримаєте весь файл, а не лише частину після поточної позиції запису.
Варто знати про два обмеження. Видалене дерево каталогів таким способом не відновлюється, оскільки утримуються лише окремі файли, які процес відкрив. Файл бази даних, скопійований під час запису рушія, не є узгодженою копією, оскільки cp не створює атомарний знімок, а різні частини файлу можуть відповідати різним моментам часу. Очікуйте пошкодження та плануйте запуск власних засобів відновлення або перевірки рушія, а не використовуйте цю копію як справну. Записи, які lsof показує з mem замість номера дескриптора, є memory-mapped. Для них немає запису /proc/<pid>/fd, з якого можна виконати копіювання.
Чи є у вас snapshot у btrfs, ZFS або LVM?
Якщо файлова система підтримує snapshot, видалені файли вже зберігаються в одному з них без змін. Це допомагає лише тоді, коли snapshot існував до видалення. Усе, що ви створите зараз, не відновить попередній стан.
У btrfs snapshot зберігаються як subvolume:
sudo btrfs subvolume list /Перегляньте snapshot і скопіюйте потрібні шляхи за допомогою cp -a. Краще копіювати окремі шляхи, а не повертати весь subvolume до попереднього стану, оскільки rollback також видалить усі дані, записані після створення snapshot.
ZFS надає доступ до кожного snapshot як до каталогу лише для читання:
zfs list -t snapshot
ls /tank/data/.zfs/snapshot/Каталог .zfs прихований і не відображається у звичайному ls кореня dataset, але до нього можна перейти за іменем. Скопіюйте файли звідти. zfs rollback повертає весь dataset до вказаного стану та знищує всі snapshot, створені пізніше за вказаний. Тому використовуйте цю команду лише в крайньому разі.
Snapshot LVM — це том copy-on-write із фіксованим розміром:
sudo lvs
sudo mount -o ro /dev/vg0/data-snap /mnt/snapЗмонтуйте його лише для читання та скопіюйте потрібні дані. Перевірте lvs, перш ніж покладатися на snapshot, оскільки snapshot LVM, у якому заповнено виділений простір, ядро позначає як недійсний. Після цього його вміст втрачено.
Snapshot не є backup. Він зберігається на тому самому диску або в тому самому pool, що й оригінал, тому зазнає тих самих збоїв. Snapshot добре підходить для скасування помилки, зробленої дві хвилини тому. Саме це потрібно в цій ситуації.
Відновлення за сигнатурами за допомогою PhotoRec — лише з образу, ніколи з робочого диска
Якщо жоден із наведених вище способів не підходить, залишається відновлення за сигнатурами: сканування необробленого пристрою в пошуках послідовностей байтів, які позначають початок відомого типу файлу, з подальшим записом усіх знайдених даних. Відновлення за сигнатурами читає лише дані файлів. Імена файлів, структура каталогів, часові мітки та дані про власника належать до метаданих файлової системи. Саме ці метадані знищив rm, тому відновити їх неможливо. Ви отримаєте файли з іменами на кшталт f0384512.jpg у пронумерованому вихідному каталозі та сортуватимете їх вручну.
Чи спрацює цей спосіб взагалі, визначають два правила.
По-перше, створіть образ пристрою, перш ніж використовувати на ньому будь-які інші інструменти. У Debian і Ubuntu пакет називається gddrescue, а бінарний файл, який він встановлює, — ddrescue.
sudo apt update && sudo apt install -y gddrescue testdisk
sudo ddrescue -n /dev/vdb1 /mnt/rescue/vdb1.img /mnt/rescue/vdb1.map/mnt/rescue має розташовуватися на іншому пристрої, де вільного місця не менше, ніж містить розділ. lsblk -b виводить точні розміри в байтах. Файл мапи дає змогу продовжити перерване копіювання, а не починати його спочатку. Після створення образу ви зможете пізніше спробувати інший інструмент із точно такими самими байтами. Якщо ж перший інструмент записав дані поверх диска, це буде неможливо.
По-друге, вкажіть файлу образу як джерело для інструмента відновлення.
sudo photorec /d /mnt/rescue/recup /mnt/rescue/vdb1.imgphotorec відкриває текстове меню. Виберіть розділ, потім тип файлової системи, сигнатури файлів для пошуку та вихідний каталог. До початку роботи звузьте список сигнатур до фактично втрачених типів файлів. Стандартний список шукає все й передає вам для перегляду десятки тисяч фрагментів.
testdisk, що входить до того самого пакета, має власну функцію відновлення видалених файлів і підтримує лише FAT, exFAT, NTFS та ext2. Для ext4 це означає photorec.
Очікуйте, що фрагментовані файли буде відновлено пошкодженими. Відновлення за сигнатурами припускає, що блоки файлу розташовані послідовно. Тому файл, блоки якого розподілені по різних ділянках диска, буде або зібрано неправильно, або не знайдено взагалі. Медіафайли зазвичай відновлюються досить добре, оскільки мають чіткі заголовки. Звичайний текст, конфігураційні файли та вихідний код відновлюються погано, оскільки не існує байтової сигнатури, яка позначає початок shell-скрипту.
Зайвий пробіл: як було видалено неправильний шлях
Майже кожен випадок із rm -rf є проблемою оболонки. rm отримує список шляхів і видаляє їх по одному. Команда не бачить, що саме ви мали на увазі.
Класичний випадок — один пробіл:
rm -rf /home/deploy/app /old
rm -rf /home/deploy/app/oldУ першому рядку передано два аргументи. Він видаляє застосунок, а потім — /old. Якщо /old не існує, rm нічого не виводить, оскільки -f пригнічує помилку про відсутній файл. Відсутність повідомлення не підтверджує правильність команди.
Другий варіант — неекранована змінна, що містить пробіл:
dir="/srv/my app"
rm -rf $dirОболонка розділяє значення за пробільними символами, тому rm отримує /srv/my і app як два окремі шляхи. У записі rm -rf "$dir" це один шлях.
Третій варіант — порожня змінна. Зазвичай це відбувається через помилку команди, яка мала надати їй значення:
rm -rf "$TARGET"/*Якщо TARGET не задано, цей вираз розгортається в rm -rf /*. GNU rm відхиляє форму без аргументів: rm -rf / виводить rm: it is dangerous to operate recursively on '/' і завершує роботу. Для форми з glob такого захисту немає, оскільки оболонка замінює /* списком фактичних шляхів верхнього рівня ще до запуску rm, а / не входить до цього списку, тому перевірка не спрацьовує.
Звички, які запобігають наступній помилці
- Беріть у лапки кожну змінну, яку використовуєте як шлях. Пишіть
"$dir"щоразу, зокрема всередині перевірок і циклів. - Завершуйте роботу, якщо значення порожнє.
rm -rf "${TARGET:?TARGET is not set}"/*змушує shell зупинитися з вашим повідомленням до запускуrm, якщоTARGETне задано або має порожнє значення. Додавайтеset -euo pipefailна початку кожного скрипту, який щось видаляє. - Додавайте
--one-file-system. Ця опція вказуєrmпропускати каталог, розташований в іншій файловій системі, ніж та, до якої належить переданий аргумент. Завдяки цьому рекурсивне видалення не перейде у змонтований том резервних копій або bind mount. - Не видаляйте від імені root. Сервісний обліковий запис може видалити лише те, чим він володіє. Саме це є основною причиною запускати кожен сервіс від імені окремого непривілейованого користувача. Якщо ви не впевнені, до яких об’єктів має доступ певний обліковий запис, перегляд бітів дозволів у виведенні ls дасть відповідь однією командою.
- Виводьте список перед виконанням операції. У скрипті сформуйте шляхи, виконайте для них
printf '%s\n', перегляньте вивід, а потім видаліть їх другим проходом. - Тримайте команду для переміщення файлів у кошик під рукою.
sudo apt install trash-cliнадає вамtrash-put,trash-list,trash-restoreіtrash-empty. Файли з вашого домашнього тому переміщуються до~/.local/share/Trashабо до$XDG_DATA_HOME/Trash, якщо цю змінну задано. Файли з інших точок монтування переміщуються до каталогу.Trash/$uidабо.Trash-$uidу корені відповідного тому, аtrash-empty 30видаляє все, що перебуває в кошику понад тридцять днів.
Зробити псевдонім rm для trash-put здається очевидним наступним кроком, але це пастка. Псевдонім формує рефлекторну звичку, яка не спрацює на іншому сервері без такого псевдоніма. Крім того, псевдоніми не діють усередині скриптів, а саме там трапляються найдорожчі помилки. Натомість навмисно вводьте trash-put.
Єдине відновлення, яке щоразу працює
Усе описане вище — це шанс. Резервна копія — ні.
Резервну копію роблять реальною дві речі. Вона запускається за розкладом без необхідності пам’ятати про це, і ви принаймні один раз відновили з неї дані. Репозиторій, з якого ще ніхто ніколи не виконував відновлення, ґрунтується на припущенні, оскільки причини, через які він може виявитися непридатним (неправильний шлях у списку include або пароль до репозиторію, який ніхто не записав), виявляться лише в день, коли він вам знадобиться.
У restic відновлення виконується двома командами.
restic -r /srv/restic-repo snapshots
restic -r /srv/restic-repo restore latest --target /mnt/rescue --include /srv/appdataВідновлюйте дані в порожній каталог, а не поверх робочого шляху, щоб порівняти їх перед заміною файлів. У розділі Налаштування резервного копіювання restic на VPS описано налаштування репозиторію та systemd timer, який запускає резервне копіювання.
Для Borg:
borg list /srv/borg-repo
borg extract /srv/borg-repo::daily-2026-08-08 srv/appdataШляхи всередині архіву Borg зберігаються без початкового слеша, тому srv/appdata відповідає, а /srv/appdata не відповідає нічому. borg extract записує дані в поточний робочий каталог, тому спочатку виконайте cd до тимчасового каталогу.
Якщо ви ще не обрали між ними, у порівнянні restic і Borg описано дедуплікацію та append-only репозиторії. Саме ця властивість не дає breached серверу видалити власну історію резервних копій. Будь-який із цих інструментів підходить. Неправильний варіант — не запускати жоден із них.
Новий сервер — найдешевший момент для налаштування резервного копіювання, поки на ньому ще немає нічого, що варто втратити. У Перші десять хвилин на новому VPS належить виконати цю роботу разом із налаштуванням SSH і firewall.
Потім додайте до календаря регулярне завдання: щомісяця відновлюйте один каталог із репозиторію в /tmp і читайте файли. Ця одна звичка цінніша за всі інструменти на цій сторінці.
FAQ
Чи можна відновити видалений файл у ext4?
Зазвичай ні. Коли останнє посилання на файл видаляється і жоден процес більше не тримає його відкритим, ext4 очищає дерево extents в inode, тому inode більше не містить інформації про розташування даних. Старіша копія цього inode може зберігатися в журналі ext4, і extundelete виконує її пошук. Чи залишилася ця копія, залежить від обсягу операцій файлової системи після видалення, а не від часу, що минув, тому спочатку припиніть запис. extundelete не випускав нових версій із January 2013, а ext4magic тепер позначений розробником як abandoned. Розробник зазначає, що він більше не працює коректно з актуальними файловими системами ext4. Запускайте extundelete для відмонтованого пристрою або образу диска, ніколи не запускайте його для змонтованої файлової системи, і спочатку перевірте об’єкт роботи за допомогою sudo dumpe2fs -h /dev/vdb1 | grep -i journal.
Сервіс усе ще тримає видалений файл відкритим. Чи можна його відновити?
Так, це найкращий варіант. Поки процес тримає файл відкритим, його inode і блоки даних залишаються виділеними, тому дані все ще можна прочитати. Не перезапускайте сервіс, оскільки закриття останнього дескриптора завершує видалення. Запустіть sudo lsof +L1, щоб переглянути відкриті файли з кількістю посилань 0, запишіть PID і номер файлового дескриптора, а потім скопіюйте файл через /proc за допомогою sudo cp /proc/1234/fd/3 /mnt/rescue/events.log. Записуйте копію в іншу файлову систему. Записи, показані з mem замість номера дескриптора, відображені в пам’ять і не мають шляху /proc/<pid>/fd, з якого їх можна скопіювати.
Чому потрібно створювати образ диска, а не запускати інструмент відновлення безпосередньо на ньому?
Тому що будь-який інструмент має кудись записувати результат, а запис у файлову систему, яку ви відновлюєте, може потрапити у вільні блоки, де ще зберігаються ваші дані. Спочатку скопіюйте розділ на інший пристрій за допомогою sudo ddrescue -n /dev/vdb1 /mnt/rescue/vdb1.img /mnt/rescue/vdb1.map, а потім передайте файл образу в photorec. Образ також дає змогу пізніше спробувати інший інструмент із точно тими самими байтами. Після перезапису оригіналу це вже неможливо.
Чи все ще знищує rm -rf / систему Linux?
Сам по собі цей вираз не знищує систему. GNU rm відмовляється його виконувати й виводить rm: it is dangerous to operate recursively on '/'. Небезпечними є варіанти, у яких ця команда формується іншим способом. rm -rf "$TARGET"/* із невстановленим TARGET розгортається в rm -rf /*, і shell передає rm список реальних каталогів верхнього рівня. Серед них немає /, тому захист не спрацьовує. Натомість запишіть "${TARGET:?TARGET is not set}", і shell зупиниться до запуску rm.
Чи є знімок файлової системи резервною копією?
Ні. Знімок btrfs або ZFS зберігається в тому самому пулі, що й захищені ним дані, тому відмова диска або знищення пулу одночасно знищує і дані, і знімок. Знімок LVM має додаткову проблему — фіксований розмір. Коли він заповнюється, kernel робить його недійсним, і його вміст втрачається. Знімки чудово підходять для скасування видалення, яке сталося дві хвилини тому. Для всіх інших випадків зберігайте repository на окремому обладнанні.