VPS bloqué après une mise à jour du kernel : que faire ?
Votre VPS ne démarre plus après une mise à jour du kernel ? Utilisez la console du fournisseur, GRUB et l’ancien kernel pour diagnostiquer initramfs ou LVM.
Que faire en premier lorsqu’un VPS ne redémarre plus après une mise à jour du kernel
Un VPS qui ne redémarre plus après une mise à jour du kernel est généralement récupérable en quelques minutes, car la mise à jour n’a pas supprimé le kernel qui fonctionnait la veille. Ubuntu installe un nouveau kernel à côté de l’ancien et modifie uniquement l’entrée que GRUB démarre par défaut. La première étape n’est donc pas une réparation. Sélectionnez l’ancien kernel dans le menu de démarrage, retrouvez une invite de connexion, puis diagnostiquez le problème depuis un système en fonctionnement.
La procédure est différente sur un serveur et sur un ordinateur portable, car aucun clavier n’est connecté et aucun écran n’affiche le kernel panic. SSH ne répondra pas non plus, puisque la machine n’a jamais atteint le stade où sshd démarre. Toutes les opérations ci-dessous passent par la console de votre fournisseur.
Consultez votre propre console avant de modifier quoi que ce soit. Le texte affiché à l’écran détermine la catégorie de panne, et deux serveurs qui « ne redémarrent pas » peuvent nécessiter des corrections opposées.
Comment accéder à la console lorsque SSH ne fonctionne plus ?
Ouvrez le panneau de contrôle de votre fournisseur et recherchez une console. Les appellations courantes sont VNC console, web console, noVNC et serial console. Si les deux options sont disponibles, préférez la serial console : elle fournit du vrai texte que vous pouvez faire défiler et copier, alors qu’une vue VNC n’est qu’une image de l’écran. Repérez cette fonction maintenant, pendant que la machine fonctionne correctement, et vérifiez qu’elle s’ouvre. La chercher pendant une panne vous prive du calme nécessaire. Cette vérification fait partie des dix premières minutes sur un nouveau VPS, au même titre que les règles du pare-feu et les clés SSH.
La plupart des panneaux proposent également un rescue mode ou une recovery image. Ce mode démarre un système minimal depuis le réseau du fournisseur et attache votre disque comme périphérique supplémentaire, de sorte qu’aucun élément présent sur votre disque ne s’exécute. Le rescue mode sert de solution de secours lorsque GRUB est lui-même endommagé. Il permet aussi de copier les données depuis un serveur que vous avez décidé de ne pas sauvegarder.
Vous devrez généralement effectuer un hard reset depuis le panneau pour accéder au menu de démarrage, puisque vous ne pouvez pas exécuter sudo reboot sur une machine à laquelle vous ne pouvez pas vous connecter. Un hard reset revient à couper l’alimentation. Les systèmes de fichiers subissent alors un arrêt incorrect. Prévoyez donc un contrôle du système de fichiers au démarrage suivant.
Comment sélectionner un ancien kernel dans le menu GRUB ?
Surveillez la console dès que vous appuyez sur le bouton de réinitialisation. Appuyez plusieurs fois sur Esc pendant les premières secondes, ou maintenez la touche Shift sur une machine qui démarre en mode BIOS legacy. La fenêtre est courte et le visualiseur de console met souvent une seconde à se connecter. Commencez donc à appuyer tôt et continuez.
Lorsque le menu s’affiche, sélectionnez « Advanced options for Ubuntu ». Ce sous-menu répertorie tous les kernels installés, du plus récent au plus ancien, avec une entrée en mode recovery pour chacun. Sélectionnez la deuxième entrée normale, c’est-à-dire le kernel qui précède le plus récent, puis appuyez sur Entrée. Le mode recovery est différent : il démarre un système minimal en mode single user. Il sert aux opérations de réparation, pas à remettre vos services en ligne.
Si l’ancien kernel démarre, votre serveur fonctionne de nouveau. Vérifiez le kernel utilisé et notez les numéros.
uname -r
dpkg -l 'linux-image-*' | grep '^ii'La sortie de dpkg correspond à la liste des kernels installés. Si elle ne contient qu’une seule ligne, vous n’avez aucun fallback. C’est le premier problème à corriger.
Le menu GRUB ne s’affiche jamais. Que faire ?
Les images cloud fournissent une configuration qui masque le menu. Les images Ubuntu définissent généralement le délai d’attente à 0 dans un fichier situé sous /etc/default/grub.d/. Le dernier kernel démarre donc immédiatement et aucune touche ne peut être utilisée.
Le cas inverse existe aussi : le menu est affiché et attend une action, ce qui ressemble à un blocage. GRUB enregistre un échec du démarrage et, au démarrage suivant, peut maintenir le menu affiché jusqu’à ce qu’une personne appuie sur une touche. Sur une machine sans clavier, cette attente ne se termine jamais. Si votre console affiche un menu et que rien ne bouge, c’est ce qui s’est produit. Sélectionnez une entrée et poursuivez.
Corrigez ces deux cas lorsque la machine fonctionne, et ne placez pas les paramètres dans /etc/default/grub sur une image cloud. Lorsque update-grub s’exécute, le GRUB d’Ubuntu lit d’abord /etc/default/grub, puis chaque fichier .cfg de /etc/default/grub.d/ dans l’ordre de tri. Le fichier 50-cloudimg-settings.cfg de l’image est lu après votre modification, redéfinit ses propres valeurs et prend donc le dessus. Créez un drop-in dont le nom est placé après ce fichier dans l’ordre de tri, par exemple /etc/default/grub.d/99-console-menu.cfg :
GRUB_TIMEOUT_STYLE=menu
GRUB_TIMEOUT=10
GRUB_RECORDFAIL_TIMEOUT=10
GRUB_TERMINAL="console serial"
GRUB_SERIAL_COMMAND="serial --unit=0 --speed=115200"
GRUB_CMDLINE_LINUX_DEFAULT="console=tty1 console=ttyS0,115200"Ce fichier remplace entièrement GRUB_CMDLINE_LINUX_DEFAULT. Copiez donc d’abord dans votre ligne les arguments déjà définis par l’image dans 50-cloudimg-settings.cfg, puis ajoutez ceux de console=. Appliquez la configuration et vérifiez que votre fichier est le dernier à définir chaque valeur, car GRUB utilise la dernière affectation.
sudo update-grub
grep -E 'TIMEOUT|TERMINAL' /etc/default/grub /etc/default/grub.d/*.cfgGRUB_TERMINAL="console serial" envoie le menu vers la console graphique et le port série. Il s’affiche donc dans le viewer fourni par votre panel, quel qu’il soit. Les arguments du kernel console= font de même pour les messages de démarrage qui suivent. Un délai de 10 secondes à chaque démarrage est un prix raisonnable pour disposer d’un menu réellement accessible à 2 h du matin.
Sur quelle classe de panne suis-je tombé ?
Lisez les vingt dernières lignes avant que la console cesse de défiler. Quatre scénarios couvrent la plupart des problèmes qui surviennent après une mise à jour du kernel.
GRUB ne trouve pas ses propres fichiers. Vous obtenez une invite grub rescue>, ou une erreur concernant une partition ou un fichier inexistant, et aucun message du kernel n’apparaît. Le kernel n’est pas encore intervenu. Ce problème survient après une modification du disque ou des partitions, ou lorsque le bootloader a été écrit sur le mauvais périphérique. Il n’est généralement pas causé par le seul paquet du kernel.
Le kernel démarre, mais ne peut pas monter la racine. Les messages du kernel défilent, puis vous arrivez dans un shell busybox dont l’invite est (initramfs), ou le boot se termine par un panic indiquant que le filesystem root ne peut pas être monté. Le kernel a bien été chargé. L’initramfs, qui est la petite racine temporaire chargée de trouver et de monter votre véritable filesystem root, n’a pas trouvé le disque. Sur Ubuntu, ce shell est généralement précédé d’un message indiquant que le système a cessé d’attendre le périphérique root, avec l’UUID recherché. Copiez cet UUID et comparez-le ensuite à la sortie de blkid.
Un logical volume n’apparaît jamais. Il s’agit de la classe précédente, avec une cause précise. À l’invite (initramfs), exécutez ls /dev/mapper. Si la seule entrée est control, aucun volume LVM (logical volume manager) n’a été activé. Le périphérique root n’existe donc pas encore. Activez les volume groups manuellement :
lvm vgchange -ay
ls /dev/mapper
exitexit rend la main au script de l’initramfs, qui réessaie de monter le filesystem. Si le système démarre ensuite, le nouvel initramfs ne contient pas les composants LVM. Il faut alors reconstruire cette image, et non modifier le kernel.
Aucun Linux ne démarre. La console affiche des messages du firmware, un shell UEFI (unified extensible firmware interface), un écran vide sans sortie du kernel ou une boucle de redémarrage. La panne survient avant le lancement de Linux. Vérifiez le mode réellement utilisé par votre serveur une fois le système de nouveau disponible, car de nombreuses instances VPS démarrent en mode BIOS legacy et n’utilisent jamais le chemin EFI :
[ -d /sys/firmware/efi ] && echo UEFI || echo BIOS
mountpoint /boot/efi
sudo efibootmgr -vUn /boot/efi non monté pendant la mise à niveau est une cause fréquente sur les machines UEFI. Les paquets qui gèrent la partition système EFI écrivent alors dans un répertoire vide ordinaire. Le firmware continue de lancer l’ancienne entrée de boot jusqu’à ce qu’elle ne corresponde plus au contenu du disque.
Un autre scénario ne correspond pas à une panne de boot. Si vous atteignez un shell root indiquant que le système est en mode emergency, le kernel a démarré, puis l’espace utilisateur s’est arrêté. Cela signifie généralement qu’une ligne incorrecte se trouve dans /etc/fstab, ou qu’un filesystem n’a pas réussi son contrôle. Exécutez journalctl -xb dans ce shell et lisez le nom de l’unité qui a échoué.
Le paquet du kernel est-il défectueux ou est-ce l’initramfs ?
Ces deux problèmes se ressemblent depuis la console, mais leur résolution est différente. Démarrez sur l’ancien kernel, puis comparez les fichiers.
ls -l /boot/vmlinuz-* /boot/initrd.img-*
df -h /bootVous devez avoir un vmlinuz- et un initrd.img- correspondant pour chaque version installée, avec une taille plausible. Un initrd absent, ou nettement plus petit que les autres, indique un échec de la génération de l’initramfs. La cause habituelle est un /boot plein. Les éléments de preuve se trouvent dans les journaux des paquets :
sudo grep -iE 'no space|update-initramfs' /var/log/apt/term.log
sudo tail -n 40 /var/log/apt/history.loghistory.log indique également quels paquets ont été installés lors des dernières exécutions et à quel moment. Cela permet de déterminer précisément ce qui a changé.
Commencez par libérer de l’espace si /boot est plein. Reconstruisez ensuite l’image pour la version nécessaire, puis actualisez le menu. Reprenez la chaîne de version depuis votre propre sortie ls, car l’emplacement réservé ci-dessous ne correspond pas à une version réelle :
KVER=6.8.0-XX-generic
sudo update-initramfs -c -k "$KVER"
sudo update-grub
ls -l /boot/initrd.img-$KVERCe dernier ls permet d’effectuer la vérification. Un fichier de taille normale indique que l’image est maintenant présente. Si l’image du kernel elle-même est endommagée, ou si dpkg -l indique un état autre que ii pour le paquet, réinstallez celui-ci :
sudo apt install --reinstall linux-image-$KVER
sudo dpkg --configure -aRéparer depuis le mode rescue lorsqu’aucun kernel ne démarre
Si chaque entrée du menu échoue, démarrez l’image rescue du fournisseur et réparez le disque depuis l’extérieur. Votre disque apparaît comme un périphérique non monté. Rien n’y est donc exécuté et aucun processus ne peut bloquer vos opérations.
Séquence complète de réparation avec chroot
Exécutez lsblk -f en premier et relevez les vrais noms des périphériques sur votre machine. /dev/vda est courant avec KVM, et les installations Ubuntu Server placent souvent la racine sur LVM avec /dev/ubuntu-vg/ubuntu-lv.
sudo lsblk -f
sudo vgchange -ay
sudo mount /dev/ubuntu-vg/ubuntu-lv /mnt
sudo mount /dev/vda2 /mnt/boot
sudo mount /dev/vda1 /mnt/boot/efiIgnorez les lignes qui ne vous concernent pas. De nombreuses images n’ont pas de /boot séparé ni de partition EFI. Montez ensuite les interfaces du kernel dans l’environnement, puis entrez dans le système :
for d in dev proc sys run; do sudo mount --rbind /$d /mnt/$d; done
sudo chroot /mnt /bin/bashDans le chroot, vous travaillez sur le système défaillant, tandis qu’un kernel fonctionnel s’exécute sous celui-ci. Effectuez la réparation à cet endroit :
df -h /boot
update-initramfs -u -k all
update-grub
grub-install /dev/vda
exitgrub-install utilise l’intégralité du disque sur un système BIOS, et non une partition. Sur un système UEFI, utilisez grub-install --target=x86_64-efi --efi-directory=/boot/efi pour x86_64. Remplacez x86_64-efi par i386-efi ou arm64-efi pour ces architectures, et vérifiez que ce répertoire est monté avant d’exécuter la commande. Quittez avec exit, démontez tout avec sudo umount -R /mnt, repassez ensuite le panneau en démarrage normal et redémarrez.
Tester un nouveau kernel sans risquer le prochain démarrage
GRUB peut démarrer une entrée une seule fois, puis revenir à la valeur par défaut que vous avez choisie. Définissez comme valeur par défaut un kernel auquel vous faites confiance, puis lancez le nouveau kernel pour un seul démarrage. En cas d’échec, un hard reset depuis le panel vous ramène au bon kernel, sans devoir intervenir dans la console au bon moment, à condition que GRUB puisse écrire dans son environment block au démarrage.
Définissez GRUB_DEFAULT=saved dans /etc/default/grub.d/99-console-menu.cfg, exécutez sudo update-grub, puis affichez les titres des entrées pour pouvoir en reprendre un exactement :
grep -E "(menuentry|submenu) " /boot/grub/grub.cfg | cut -d"'" -f2
sudo grub-set-default "Advanced options for Ubuntu>Ubuntu, with Linux 6.8.0-XX-generic"
sudo grub-editenv list
sudo grub-reboot 0
sudo rebootgrub-editenv list doit afficher le titre choisi sous la forme saved_entry. Cette sortie confirme la valeur par défaut enregistrée, mais ne prouve pas que GRUB peut écrire dans /boot/grub/grubenv au démarrage. Si l’environment block se trouve sur LVM ou MDRAID et que GRUB ne peut pas y écrire, l’entrée à utiliser une seule fois reste sélectionnée après le reboot au lieu de revenir à la valeur par défaut. L’entrée 0 se trouve en haut du menu : c’est le kernel le plus récent. Les titres sont plus sûrs que les numéros dans ce cas, car les numéros changent chaque fois qu’un kernel est installé ou supprimé.
Pourquoi autoremove est risqué sur un serveur sans interface graphique
APT protège les paquets du noyau contre la suppression automatique. Consultez votre configuration :
apt-config dump | grep -E 'Protect-Kernels|NeverAutoRemove|VersionedKernelPackages'
dpkg -l 'linux-image-*' | grep -c '^ii'Par défaut, APT protège actuellement deux noyaux : le noyau en cours d’exécution et le plus récent, ou l’avant-dernier lorsque le noyau en cours d’exécution est déjà le plus récent. Les anciennes installations utilisent également un fichier /etc/apt/apt.conf.d/01autoremove-kernels généré automatiquement. Le piège consiste à faire confiance à l’ensemble protégé sans vérifier les versions qu’il contient. Avant d’exécuter sudo apt autoremove --purge, consultez la liste des suppressions proposées et vérifiez que le noyau auquel vous faites confiance restera installé.
Conservez au minimum deux noyaux, et trois lorsque /boot dispose de suffisamment d’espace. Supprimez les anciennes versions par leur nom après avoir vérifié uname -r, afin de ne jamais supprimer celle que vous utilisez :
uname -r
sudo apt purge linux-image-6.8.0-XX-generic
dpkg -l 'linux-image-*' | grep '^ii'Exécutez ensuite cette dernière commande une nouvelle fois. Le passage de trois à deux noyaux correspond à un nettoyage. Le passage à un seul noyau annonce une interruption de service au prochain redémarrage.
Prendre un snapshot avant la mise à niveau
Un snapshot pris avant apt upgrade est la seule méthode de récupération qui ne dépend pas du démarrage d’un système. Sa restauration remet le disque dans l’état où l’ancien kernel était la version par défaut, puis vous pouvez réessayer la mise à niveau avec la console déjà ouverte. Les snapshots d’une machine en fonctionnement sont cohérents après incident : ils capturent le disque comme si l’alimentation avait été coupée. Arrêtez donc d’abord le serveur lorsque votre fournisseur prend en charge les snapshots hors ligne. Un snapshot ne constitue pas non plus une sauvegarde, car il se trouve généralement sur la même infrastructure que le volume copié. Comprendre la différence entre les snapshots de VPS et les vraies sauvegardes permet de savoir lequel vous sauvera lorsque la panne dépasse le cadre du kernel.
Cela est particulièrement important lors d’une mise à niveau de version, car le kernel, les outils initramfs, le bootloader et la configuration GRUB sont tous modifiés au cours de la même opération. Prenez le snapshot juste avant de commencer une mise à niveau d’Ubuntu 24.04 vers 26.04, et non la veille au soir, afin que le point de restauration corresponde à la machine que vous allez modifier. Une migration LTS vers LTS attend la première version corrective, 26.04.1 ; Ubuntu a annoncé que les mises à niveau d’Ubuntu 24.04 LTS vers 26.04.1 LTS seraient activées le 29 septembre 2026. Si votre serveur n’indique toujours aucune nouvelle version, vérifiez la configuration de la machine avec les vérifications de do-release-upgrade lorsqu’aucune nouvelle version n’est disponible.
Traitement des paquets du noyau par unattended-upgrades
unattended-upgrades sur Ubuntu installe les mises à jour de sécurité sans demander de confirmation. Les paquets du noyau arrivent par le security pocket, comme les autres paquets. Deux conséquences en découlent.
Premièrement, le nouveau noyau est installé, mais il n’est pas en cours d’exécution. Un noyau ne prend effet qu’au démarrage. Le fichier /var/run/reboot-required apparaît, et /var/run/reboot-required.pkgs indique ce qui a demandé le redémarrage. Toutefois, unattended-upgrades ne redémarre pas la machine si la valeur effective de Unattended-Upgrade::Automatic-Reboot n’est pas true. Placez les remplacements locaux dans un fragment de configuration APT distinct, trié après 50unattended-upgrades, par exemple /etc/apt/apt.conf.d/52unattended-upgrades-local.
cat /var/run/reboot-required.pkgs
apt-config dump | grep -E 'Automatic-Reboot|Blacklist'Deuxièmement, cet intervalle masque la cause du problème. Un serveur peut installer un noyau en mars, puis redémarrer en juin pour une raison totalement différente et ne plus redémarrer correctement. La modification qui a empêché le démarrage date alors de trois mois. Rien de ce que vous avez fait ce jour-là ne permet de l’expliquer. /var/log/apt/history.log permet de trouver l’exécution qui a installé le noyau sur lequel le démarrage échoue maintenant.
Redémarrez volontairement la machine le jour de votre choix, avec la console déjà ouverte. Cette simple habitude transforme une panne inexpliquée en une sélection dans un menu qui prend deux minutes. Si vous voulez automatiser les installations sans subir de redémarrage imprévu, laissez les installations automatiques activées et les redémarrages automatiques désactivés. Consultez la configuration de unattended-upgrades sur Ubuntu pour connaître les paramètres exacts. Bloquer linux-image-generic avec sudo apt-mark hold linux-image-generic empêche la mise à niveau de ce metapaquet. Cela ne bloque pas tous les paquets du noyau ni toutes ses variantes. Bloquer les mises à jour du noyau bloque également leurs correctifs de sécurité. Considérez donc cette configuration comme un compromis décidé en connaissance de cause, et non comme une mesure de sécurité.
FAQ
Comment démarrer un ancien kernel sur un VPS sans clavier ?
Ouvrez la console du fournisseur (VNC ou série) et déclenchez un hard reset depuis le panneau de contrôle, car vous ne pouvez pas vous connecter pour redémarrer proprement. Au redémarrage de la machine, appuyez plusieurs fois sur Esc ou maintenez Shift lors d’un boot avec un BIOS legacy afin d’afficher le menu GRUB. Choisissez « Advanced options for Ubuntu », puis sélectionnez l’entrée située sous le kernel le plus récent. Une fois l’invite de connexion affichée, exécutez uname -r pour confirmer le kernel utilisé et dpkg -l 'linux-image-*' pour voir les autres kernels installés. Ne lancez le diagnostic qu’une fois le système de nouveau opérationnel.
Pourquoi mon VPS n’affiche-t-il aucun menu GRUB ?
Les images cloud définissent souvent le délai d’attente de GRUB à 0 dans /etc/default/grub.d/50-cloudimg-settings.cfg. Le kernel le plus récent démarre donc sans laisser le temps d’appuyer sur une touche. Modifier /etc/default/grub ne suffit pas, car le GRUB d’Ubuntu lit les fichiers de /etc/default/grub.d/ après le fichier principal, et la configuration de l’image est prioritaire. Placez GRUB_TIMEOUT=10, GRUB_TIMEOUT_STYLE=menu et GRUB_TERMINAL="console serial" dans un drop-in chargé plus tard, par exemple /etc/default/grub.d/99-console-menu.cfg, puis exécutez sudo update-grub. Vérifiez le résultat avec grep TIMEOUT /etc/default/grub /etc/default/grub.d/*.cfg. Le dernier fichier listé qui définit une valeur est celui utilisé par GRUB.
Dois-je supprimer les anciens kernels pour libérer de l’espace dans /boot ?
Supprimez les plus anciens et conservez-en au moins deux. Un /boot plein constitue un mode de panne distinct, car la génération de l’initramfs échoue et vous vous retrouvez avec un kernel qui ne dispose d’aucune image fonctionnelle. Supprimez les paquets en indiquant leur nom exact après avoir vérifié uname -r, afin que le kernel en cours d’exécution ne puisse jamais être sélectionné. Avant de valider sudo apt autoremove --purge sur une machine headless, comparez les suppressions proposées avec le kernel auquel vous faites confiance. APT conserve par défaut deux kernels, mais cela ne garantit pas qu’il conservera précisément l’ancienne version dont vous avez besoin.
Les unattended-upgrades peuvent-ils empêcher le démarrage ?
Ils peuvent installer un kernel qui échouera ensuite au démarrage, mais ils ne redémarrent pas la machine tant que le paramètre effectif Unattended-Upgrade::Automatic-Reboot n’est pas défini sur true, quel que soit le fichier de configuration APT qui le fournit. Le scénario habituel est une panne différée : le kernel est installé pendant une exécution automatique, /var/run/reboot-required apparaît, puis le problème ne se manifeste qu’au redémarrage suivant, plusieurs semaines plus tard. Redémarrez volontairement avec la console déjà ouverte et consultez /var/log/apt/history.log pour déterminer quelle exécution a installé le kernel que vous êtes en train de démarrer.