SSD Nodes Learn Hosting plans →
Руководства Matt ConnorАвтор: Matt Connor · Обновлено 2026-10-28

Как часто запускать ZFS scrub на VPS с одним диском

Процесс ZFS scrub проверяет целостность данных, но не может исправить ошибки на одиночном диске. Узнайте оптимальную периодичность запуска для VPS, чтобы вовремя выявить сбой.

Что на самом деле делает ZFS scrub

Процесс ZFS scrub считывает каждый выделенный блок в пуле, пересчитывает его контрольную сумму и сравнивает результат с контрольной суммой, хранящейся в указателе родительского блока. Если значения не совпадают, ZFS восстанавливает блок, используя избыточность, предусмотренную в пуле. Никакая другая функция ZFS не выполняет эту задачу. Обычные операции чтения проверяют только те блоки, к которым вы обращаетесь, поэтому файл, который не открывался два года, остается непроверенным до тех пор, пока scrub не считает его.

Scrub — это не fsck, то есть не этап автономного восстановления, который требуется другим файловым системам. В ZFS нет фазы структурного восстановления, так как ZFS никогда не оставляет данные на диске в поврежденном состоянии: каждая запись производится в новое место, а uberblock (корневой указатель пула) обновляется в последнюю очередь. Кроме того, scrub не считывает устройство целиком. Он читает только выделенные блоки, поэтому почти пустой пул проходит проверку за минуты, а тот же пул при заполнении на 80% — значительно дольше.

Scrub выполняется с самым низким приоритетом ввода-вывода в ZFS. В исходном коде OpenZFS значение zfs_vdev_scrub_max_active по умолчанию равно 3, и это ограничение применяется к каждому устройству, а не к vdev (виртуальному устройству, группе дисков, которую ZFS рассматривает как единое целое). Таким образом, на каждом диске одновременно может выполняться не более трех операций чтения scrub, а vdev из четырех дисков может выполнять двенадцать. В man-странице zfs(4) по-прежнему указано значение 2 по умолчанию, но в поставляемом коде установлено 3, и значение, которое использует ваш запущенный модуль, можно считать из системы, как показано ниже. Значение zfs_scrub_min_time_ms по умолчанию равно 750 — это минимальное время, которое поток синхронизации тратит на работу scrub между сбросами групп транзакций (периодическими фиксациями, в которые ZFS объединяет записи). На простаивающей машине scrub использует весь ресурс диска. При наличии нагрузки он уступает место другим задачам. В пуле с одним или двумя устройствами уступать место негде, поэтому планирование здесь важнее, чем в больших дисковых полках на шестьдесят накопителей.

Зачем запускать scrub для пула, который не может восстановиться самостоятельно?

Этот вопрос определяет всё остальное при работе с небольшим пулом. При отсутствии избыточности scrub обнаруживает повреждение, но не может его исправить. Один виртуальный диск в VPS — это пул без зеркалирования и без контроля четности. ZFS прочитает поврежденный блок, обнаружит несовпадение контрольной суммы, отметит это в столбце CKSUM, укажет имя файла и на этом остановится, так как нет второй копии для восстановления.

Стоит знать о двух частичных исключениях. По умолчанию ZFS хранит дополнительную копию метаданных (redundant_metadata=all), записывая её в другую область устройства, поэтому scrub может восстановить поврежденную запись каталога или указатель на блок даже в пуле из одного устройства. А набор данных с параметром copies=2 хранит две копии своих блоков данных, что удваивает затраты дискового пространства. Ни один из этих способов не спасет при выходе устройства из строя. Документация к свойству copies прямо предупреждает об этом: не стоит создавать страйп-пул, устанавливать copies=2 и считать, что у вас есть избыточность.

Таким образом, в пуле из одного устройства scrub дает вам одно преимущество: раннее и точное уведомление. Он превращает скрытое повреждение данных в конкретное имя файла в zpool status -v, пока в вашей резервной копии еще хранится исправная версия этого файла. Это аргумент в пользу резервного копирования, а не против запуска scrub. Если вы еще не разобрались в разнице между снимком состояния (snapshot) и полноценной внешней копией, начните с почему VPS snapshot не является резервной копией, так как результат scrub полезен только в том случае, если где-то еще хранится неповрежденная копия.

Scrub, который ничего не нашел, — это тоже результат. Он подтверждает, что данные, на которые вы собираетесь положиться, не повреждены, что важно знать перед восстановлением или миграцией.

Как часто следует выполнять очистку (scrub) небольшого пула VPS?

Ежемесячная очистка — оптимальный вариант по умолчанию, именно на него рассчитаны стандартные пакеты. В Debian и Ubuntu поставляется задание cron, которое выполняет очистку исправных пулов во второе воскресенье каждого месяца. В FreeBSD система periodic работает на основе порогового значения в днях, где daily_scrub_zfs_default_threshold по умолчанию установлено на 35, что в руководстве описывается как пять недель.

Еженедельная очистка на небольшом загруженном пуле обычно приносит больше затрат, чем пользы. При наличии одного или двух устройств процесс очистки конкурирует за очередь ввода-вывода с вашим приложением, и нет свободного устройства, которое могло бы взять на себя эту нагрузку. На VPS лимит операций ввода-вывода ограничен, поэтому чтение, затраченное на очистку, — это чтение, которое не получит ваша база данных. Учитывая эти затраты, еженедельная очистка дает максимум три недели форы в обнаружении неисправности, которую вы все равно не сможете устранить. Такой компромисс оправдан только тогда, когда очистка обходится дешево.

Замерьте время, затем принимайте решение. Запустите очистку вручную и посмотрите, сколько времени она займет.

  1. Запустите sudo zpool scrub tank спокойным вечером и зафиксируйте общее время с помощью zpool status.
  2. Если процесс завершился значительно быстрее, чем за час, а сервер простаивает ночью, еженедельная очистка допустима.
  3. Если процесс длился много часов, пока пул обслуживал трафик, оставьте ежемесячный график и доверьтесь стандартному заданию из пакета.
  4. Повторяйте замер при заметном росте объема данных в пуле, так как длительность очистки зависит от объема размещенных данных, а не от емкости диска.

Что бы вы ни выбрали, запишите это рядом с другими регулярными задачами по обслуживанию сервера. Очистка должна находиться в том же списке, что и обновление пакетов или ротация логов: см. ежемесячный чек-лист обслуживания Linux-сервера.

Запуск, приостановка и остановка scrub

sudo zpool scrub tank
sudo zpool status tank

Приостановка и остановка — это разные операции, и выбор неверной команды может привести к потере часов работы, которую придётся выполнять заново.

sudo zpool scrub -p tank
sudo zpool scrub tank
sudo zpool scrub -s tank

-p выполняет приостановку. Состояние и прогресс приостановки периодически синхронизируются с диском, поэтому приостановленный scrub сохраняется после экспорта пула или перезагрузки: при повторном импорте пула scrub останется в состоянии приостановки, ожидая ваших действий. Повторный запуск zpool scrub возобновляет процесс с последней контрольной точки, записанной на диск. -s полностью останавливает scrub, и следующий запуск начнется с самого начала. Используйте -p, если диск временно нужен для других задач на час. Используйте -s, если необходимо полностью отменить scrub.

Стоит знать еще два флага. -w ожидает завершения scrub перед возвратом управления; это рекомендуется использовать в скриптах, чтобы следующий шаг не начался преждевременно. -e выполняет scrub только для файлов с известными ошибками данных, о которых сообщает zpool status -v; это быстрый способ убедиться, что файл, восстановленный из резервной копии, теперь исправен.

ZFS выполняет только один scrub или resilver (процесс восстановления после замены устройства) одновременно для одного пула, так как обе операции интенсивно используют ввод-вывод. Если в данный момент выполняется resilver, ваш scrub будет ожидать своей очереди.

Как просматривать статус zpool во время выполнения scrub

Запустите sudo zpool status tank и ориентируйтесь на собственные показатели, а не на чужие данные. Во время выполнения scrub строка scan: содержит объем просканированных данных, объем отправленных запросов, общий объем, объем исправленных данных, процент выполнения и расчетное время до завершения.

Scanned (просканировано) — это фаза обработки метаданных: ZFS обходит дерево блоков и собирает адреса, которые необходимо прочитать. Issued (отправлено) — это фаза обработки данных: чтение, фактически отправленное на устройство и отсортированное в порядке расположения на диске. Сортировка при scrub — причина наличия двух счетчиков, при этом именно issued отражает реальный прогресс. На начальном этапе значение scanned значительно опережает issued, поэтому расчетное время не является точным. Оценивайте прогресс после прохождения первых десяти процентов.

Repaired (исправлено) — это количество байт, перезаписанных из корректной копии. В пуле без избыточности это значение всегда остается равным нулю, независимо от того, что обнаружит scrub; это числовое подтверждение того, что было сказано ранее.

Затем изучите столбцы для каждого устройства. READ и WRITE показывают количество ошибок ввода-вывода, о которых сообщило само устройство. CKSUM показывает количество блоков, не прошедших проверку контрольной суммы; именно для заполнения этого столбца и запускается scrub. Ненулевое значение CKSUM на устройстве, которое выглядит исправным, является реальной проблемой: данные были получены, но они оказались повреждены.

Последняя строка содержит вердикт. errors: No known data errors означает успешное завершение. Любой другой статус требует запуска sudo zpool status -v tank, который выводит полный список ошибок данных с момента последнего завершенного scrub, включая имена затронутых файлов. Восстановите эти файлы из резервной копии, запустите sudo zpool clear tank для сброса счетчиков, а затем снова выполните scrub. Каждый полный цикл scrub перестраивает этот список, поэтому файл, отсутствующий в списке после полной успешной проверки, считается окончательно утраченным.

Какая задача периодического скраббинга настроена на вашем сервере?

Не стоит предполагать, что такая задача есть, или что она всего одна. Механизм зависит от платформы и пакета. Формат пула везде одинаков, из-за чего легко забыть, что инструменты управления различаются, и разница в поставке ZFS в FreeBSD и Linux здесь имеет решающее значение.

В FreeBSD задача находится в системе periodic. Настройте её в /etc/periodic.conf:

daily_scrub_zfs_enable="YES"
daily_scrub_zfs_pools="tank"
daily_scrub_zfs_default_threshold="35"

daily_scrub_zfs_pools — это список имён пулов, разделённых пробелами; если оставить его пустым, скраббинг будет запущен для всех пулов. daily_scrub_zfs_default_threshold — это количество дней между запусками скраббинга, если для конкретного пула не задан порог; по умолчанию в руководстве указано 35. Ежедневная задача запускается каждый день, но начинает скраббинг только после того, как пройдёт установленный порог.

В Linux всё зависит от пакета ZFS в вашем дистрибутиве, причём некоторые системы используют оба механизма одновременно. Существуют systemd-таймеры для каждого пула: zfs-scrub-monthly@tank.timer и zfs-scrub-weekly@tank.timer, которые включаются отдельно для каждого пула. В Debian и Ubuntu также есть /etc/cron.d/zfsutils-linux — скрипт, который запускает скраббинг всех пулов в состоянии ONLINE во второе воскресенье месяца. Проверьте, что именно у вас настроено, прежде чем что-либо добавлять:

systemctl list-timers 'zfs-*'
ls /etc/cron.d/ | grep -i zfs
sudo zpool history tank | grep scrub

zpool history даст наиболее точный ответ, так как эта команда записывает данные о фактически запущенных скраббингах с указанием дат. Если скраббинг запускается дважды в месяц, значит, активны оба механизма, и один из них следует отключить. Чтобы включить таймер:

sudo systemctl enable --now zfs-scrub-monthly@tank.timer

Свободное место важнее любых настроек

Длительность процесса scrub в небольшом пуле определяется объемом размещенных данных и степенью их фрагментации. Заполнение пула ухудшает оба этих показателя.

Рекомендация OpenZFS — поддерживать объем свободного места в пуле на уровне выше 10%. Если свободного места меньше, metaslabs (блоки, с которыми работает распределитель) начинают преодолевать порог в 4% свободного пространства, и распределитель переключается с алгоритма first-fit на best-fit. Алгоритм best-fit требует значительно больше ресурсов процессора. Задержки записи растут, фрагментация увеличивается, а следующий процесс scrub проходит еще медленнее, так как тот же объем данных теперь считывается большим количеством мелких операций.

Поэтому первый рычаг управления — это не настройка параметров, а удаление данных. Старые снимки (snapshots) — самая частая причина нехватки места на сервере ZFS, за ними следуют неочищенные образы и слои Docker и ядра, оставшиеся после обновлений. Запустите zfs list -o space, прежде чем предпринимать что-либо еще, так как эта команда позволяет разделить место, занятое снимками, и место, занятое актуальными данными.

Теперь кратко о параметрах. В Linux текущие значения можно прочитать так:

cat /sys/module/zfs/parameters/zfs_scrub_min_time_ms
cat /sys/module/zfs/parameters/zfs_vdev_scrub_max_active

FreeBSD предоставляет доступ к тем же параметрам через sysctl, поэтому найдите свои значения с помощью sysctl -a | grep scrub. Увеличение этих значений ускоряет завершение scrub, но замедляет работу приложений. Уменьшение дает обратный эффект. В пуле с одним или двумя устройствами ни одна настройка не даст преимущества в обоих аспектах, так как очередь всего одна. Настройка редко исправляет ошибки проектирования. Если ежемесячный scrub вызывает проблемы, это означает, что пул переполнен или устройство работает слишком медленно, а изменение параметров лишь маскирует проблему.

Время выполнения scrub — это прогноз для resilver

Процесс resilver выполняет те же действия, что и scrub: он считывает выделенные блоки, проверяет их и записывает недостающие данные на заменяющий накопитель. Поэтому время выполнения scrub является наиболее точным прогнозом того, сколько времени займет восстановление и как долго пул будет работать с пониженной избыточностью.

ZFS планирует задачи resilver более агрессивно, чем scrub, поэтому восстановление обычно завершается быстрее, чем проверка всего пула. Рассматривайте время выполнения scrub как консервативную верхнюю границу. Если scrub занимает 9 часов, планируйте окно восстановления такой же длительности и учитывайте, что выход из строя второго накопителя в этот период приведет к потере пула. Это практический аргумент в пользу зеркальных пар вместо одной широкой группы raidz, так как raidz — схема с контролем четности, которую ZFS использует вместо RAID 5, — при восстановлении считывает данные с каждого исправного накопителя.

В пуле из одного накопителя процесс resilver отсутствует. Если накопитель выходит из строя, пул теряется вместе с ним. Ваше время восстановления — это время развертывания из резервной копии, поэтому измеряйте именно его. Восстановление, которое вы никогда не запускали, не является планом аварийного восстановления.

Что меняется при аренде диска

На VPS блочное устройство является виртуальным. Гипервизор предоставляет том, под которым может скрываться локальный NVMe или реплицируемый сетевой том с собственной избыточностью. Для процесса scrub это влечет два последствия.

Во-первых, избыточность платформы невидима для ZFS, и ZFS не может её использовать. Если платформа исправляет ошибку носителя на своем уровне, ZFS никогда не узнает о проблеме. Если же платформа передает поврежденный блок, ZFS обнаружит ошибку, но не сможет её исправить, так как корректная копия находится за пределами этой границы.

Во-вторых, вы обычно не можете прочитать данные SMART (self-monitoring, analysis and reporting technology) для устройства под виртуальным диском, поэтому ранние предупреждения, от которых зависит мониторинг состояния дисков на VPS, могут быть вовсе недоступны. Счетчик CKSUM после выполнения scrub становится вашим основным индикатором.

Если вы хотите, чтобы ZFS не просто сообщала об ошибках, а исправляла их, пул должен содержать более одного устройства внутри одного экземпляра, и это решение принимается на этапе планирования, а не настройки. Выбор storage VPS вместо обычного VPS обеспечивает необходимый объем, однако наличие двух независимых устройств зависит от конкретного тарифного плана. Запустите lsblk и убедитесь в конфигурации перед созданием зеркала, которое может оказаться двумя разделами одного и того же тома. Мы предоставляем в аренду серверы с Linux и FreeBSD, а не управляемое решение ZFS, поэтому график выполнения scrub и создание резервных копий — ваша зона ответственности. Таковы условия: полный контроль над пулом и полная ответственность за его обслуживание.

FAQ

Как часто следует выполнять scrub пула ZFS на VPS?

Ежемесячная проверка подходит для большинства небольших пулов и соответствует стандартным настройкам пакетов: заданию cron во второе воскресенье месяца в Debian и Ubuntu, а также 35-дневному порогу по умолчанию в системе periodic в FreeBSD. Еженедельный запуск оправдан только в том случае, если вы замерили время выполнения scrub и убедились, что он быстро завершается на простаивающем сервере. На нагруженном пуле с одним или двумя дисками еженедельный scrub каждую неделю отнимает ресурсы ввода-вывода у приложений, предоставляя лишь незначительный выигрыш во времени обнаружения проблем.

Бессмысленно ли выполнять scrub для пула ZFS из одного диска?

Нет, если вы понимаете, что именно это дает. При отсутствии избыточности scrub обнаруживает повреждения, но не может их исправить, за исключением метаданных, для которых ZFS по умолчанию хранит дополнительную копию. Вы получаете поименный список поврежденных файлов в zpool status -v достаточно рано, чтобы восстановить их, пока где-то еще существует исправная копия. Правильная реакция — улучшение системы резервного копирования, так как scrub точно указывает, какой файл нужно восстановить.

Можно ли приостановить scrub в ZFS и завершить его позже?

Да. Команда zpool scrub -p tank приостанавливает процесс, а состояние паузы и прогресс периодически записываются на диск, поэтому scrub остается в состоянии паузы даже после экспорта пула или перезагрузки системы. Выполните zpool scrub tank еще раз, чтобы возобновить проверку с последней контрольной точки. Не используйте для этого zpool scrub -s tank: -s полностью останавливает scrub, и следующий запуск начнется с самого начала.

Почему scrub в ZFS работает так медленно и можно ли его ускорить?

Время выполнения scrub зависит от объема размещенных данных и фрагментации, а не от емкости дисков. Почти заполненный пул работает медленно, так как при снижении свободного места в пуле примерно до 10% многие метаслэбы (metaslabs) оказываются заполненными более чем на 96% (свободное место менее 4%), и для каждого такого метаслэба алгоритм распределения переключается с first-fit на best-fit. Последующая фрагментация превращает scrub в серию множества мелких операций чтения. Освобождение места обычно помогает больше, чем любая настройка параметров. Вы можете увеличить zfs_scrub_min_time_ms или zfs_vdev_scrub_max_active, чтобы выделить для scrub большую долю очереди, но в пуле с одним или двумя устройствами эта доля будет отниматься непосредственно у ваших приложений.

Была ли эта статья полезной?