VPS پر ڈسک کی صحت کیسے مانیٹر کریں؟
زیادہ تر VPS میں ڈسک virtual ہوتی ہے، اس لیے SMART guest تک نہیں پہنچتا۔ جانیں کون سے I/O errors، latency اور space alerts واقعی writes ناکام ہونے سے پہلے خبردار کرتے ہیں۔
VPS پر ڈسک کی صحت کی نگرانی حقیقت میں کیا دیکھ سکتی ہے
VPS پر ڈسک کی صحت کی نگرانی ایک ایسی حقیقت سے شروع ہوتی ہے جس سے زیادہ تر رہنما اجتناب کرتے ہیں: ڈسک آپ کی ملکیت نہیں ہے۔ آپ کا guest ایک virtual block device دیکھتا ہے۔ physical drive اور اس میں محفوظ ہر counter host کی ملکیت ہوتا ہے۔ smartctl /dev/vda اس لیے fail نہیں ہوتا کہ آپ نے command غلط لکھی ہے۔ یہ اس لیے fail ہوتا ہے کہ اس device کے پیچھے موجود کوئی چیز اس سوال کا جواب نہیں دے سکتی۔
SMART (self-monitoring, analysis and reporting technology) counters کی ایک table ہے جو خود drive پر محفوظ ہوتی ہے: reallocated sectors، pending sectors، power-on hours اور media errors۔ اس table کو پڑھنے کے لیے ATA یا NVMe (non-volatile memory express) commands کو حقیقی hardware تک پہنچانے والا path درکار ہوتا ہے۔ paravirtual disk ایسا path فراہم نہیں کرتی، اس لیے guest کو وہ storage ملتی ہے جس سے telemetry ہٹا دی گئی ہوتی ہے۔
tenant hardware کے بجائے اس کے اثرات monitor کرتا ہے۔ guest کے اندر سے چار signals نظر آتے ہیں: kernel log میں I/O (input/output) errors، ایسا filesystem جو read-only کے طور پر دوبارہ mount ہو جائے، بڑھتی ہوئی latency، اور ختم ہوتی ہوئی space۔ ان چاروں پر آج ہی alerts قائم کیے جا سکتے ہیں، اور user کی شکایت سے پہلے یہ چاروں ظاہر ہو جاتے ہیں۔ پہلے انہیں configure کریں۔ ذمہ داری کی تقسیم آخر میں آتی ہے، کیونکہ اس سے طے ہوتا ہے کہ آپ کو اپنی کوشش کہاں صرف کرنی چاہیے۔
اپنا سرور کیا expose کرتا ہے، اس کی تصدیق کریں
یہ فرض نہ کریں کہ آپ کی صورتِ حال کون سی ہے۔ پہلے معائنہ کریں، پھر اس صورتِ حال سے متعلق section پڑھیں۔
sudo apt update && sudo apt install -y smartmontools nvme-cli
lsblk -o NAME,TYPE,SIZE,MODEL,TRAN
sudo smartctl -a /dev/vdavirtio-blk، جو عام KVM (kernel-based virtual machine) disk ہے۔ device /dev/vda ہے اور smartctl کوئی request بھیجنے سے پہلے رک جاتا ہے:
/dev/vda: Unable to detect device type
Please specify device type with the -d option.virtio-blk ایک paravirtual transport ہے جس کے پیچھے ATA یا SCSI command set موجود نہیں ہوتا، اس لیے SMART request منتقل کرنے کا کوئی channel نہیں ہوتا۔ -d sat اور -d scsi بھی اسی طرح fail ہوتے ہیں، کیونکہ مسئلہ transport میں ہے، flag میں نہیں۔
Emulated SATA یا SCSI disk۔ device /dev/sda ہے اور smartctl اتنا آگے پہنچ جاتا ہے کہ device کی شناخت کر سکے۔ model line میں QEMU HARDDISK درج ہوتا ہے۔ یہ string خود ہی سوال کا جواب دیتی ہے: آپ وہ device پڑھ رہے ہیں جسے emulator نے بنایا ہے، اور یہ usable SMART capability رپورٹ نہیں کرتا۔
NVMe namespace۔ sudo nvme smart-log /dev/nvme0n1 مکمل log واپس کرتا ہے، اور یہی وہ مقام ہے جہاں لوگ غلط فہمی کا شکار ہوتے ہیں۔ پہلے sudo nvme id-ctrl /dev/nvme0 | grep -E '^(mn|sn)' سے controller identity چیک کریں۔ اگر model number کسی network storage product کا نام بتاتا ہے تو controller software پر مبنی ہے۔ اس صورت میں percentage_used اور media_errors آپ کے data کے نیچے موجود flash کے بجائے اسی emulation کی وضاحت کرتے ہیں۔ اگر آپ جاننا چاہتے ہیں کہ آپ کی storage حقیقت میں کیا ہے تو plan description پر بھروسا کرنے کے بجائے Linux پر NVMe disk کی تصدیق کریں۔
Container، جیسے LXC (Linux containers) یا OpenVZ۔ آپ کے پاس اپنا کوئی block device نہیں ہوتا۔ lsblk host کے devices دکھاتا ہے یا کچھ بھی نہیں دکھاتا، اور smartctl کو منع کر دیا جاتا ہے کیونکہ container کے پاس CAP_SYS_RAWIO موجود نہیں:
Smartctl open device: /dev/sda failed: Permission deniedاس صورتِ حال کے بارے میں ایک تنبیہ جس میں یہ کام کرتا ہے۔ اگر VPS پر smartctl مکمل attribute table واپس کرے تو اس پر کوئی کارروائی کرنے سے پہلے serial number پڑھیں۔ بعض hosts passthrough device node expose کرتے ہیں، اور یہ counters اس hardware سے متعلق ہوتے ہیں جسے اس machine کے تمام tenants share کرتے ہیں۔ وہاں Reallocated_Sector_Ct کا بڑھنا support ticket کا معاملہ ہے۔ یہ آپ کے data کے بارے میں کوئی بیان نہیں ہے۔
اشارہ 1: کرنل لاگ میں I/O غلطیاں
یہ کرایہ دار (tenant) کے پاس موجود سب سے زیادہ اہمیت کا حامل اشارہ ہے، اور اس کے لیے کسی ایجنٹ کی ضرورت نہیں ہے۔
sudo journalctl -k -p err -b
sudo journalctl -k --since "7 days ago" | grep -iE 'i/o error|remount|ext4-fs error|buffer i/o'کرنل 5.16 اور اس کے بعد کے ورژنز پر، جس میں Ubuntu 24.04 اور Debian 12 شامل ہیں، ورچوئل ڈسک سے ناکام ہونے والی درخواست کچھ اس طرح نظر آتی ہے:
I/O error, dev vda, sector 2101248 op 0x1:(WRITE) flags 0x800 phys_seg 1 prio class 0پرانے کرنلز، جیسے کہ 5.15 کرنل جو Ubuntu 22.04 کے ساتھ آتا ہے، وہی لائن blk_update_request: کے سابقہ (prefix) کے ساتھ پرنٹ کرتے ہیں۔ اوپر دیا گیا grep دونوں کا احاطہ کرتا ہے۔
بلاک لیئر نے ہوسٹ سے رائٹ (write) کی درخواست کی اور ہوسٹ نے ناکامی کا جواب دیا۔ VPS پر یہ شاذ و نادر ہی کسی خراب فلیش سیل کی وجہ سے ہوتا ہے۔ یہ عام طور پر ہوسٹ اسٹوریج لیئر یا نیٹ ورک اٹیچڈ اسٹوریج (NAS) تک جانے والے نیٹ ورک پاتھ کا مسئلہ ہوتا ہے، لہذا یہ پرووائیڈر کی جانب سے ہونے والا واقعہ ہے۔ ٹائم اسٹیمپ، ڈیوائس کا نام اور سیکٹر کو اپنے ٹکٹ میں کاپی کریں، کیونکہ اسٹوریج ٹیم انہی کی مدد سے اپنے لاگز میں اس کا موازنہ کر سکتی ہے۔
ext4 کا وہ تسلسل جو سب سے زیادہ اہمیت رکھتا ہے، یہ جوڑا ہے:
EXT4-fs error (device vda1): ext4_journal_check_start:83: comm cron: Detected aborted journal
EXT4-fs (vda1): Remounting filesystem read-onlyدوسری لائن سب سے زیادہ نقصان دہ ہے، کیونکہ مشین چلتی رہتی ہے۔ یہ ping کا جواب دیتی ہے، SSH کا جواب دیتی ہے، اور ہر رائٹ (write) ناکام ہو جاتا ہے۔ ایک سادہ HTTP چیک پاس ہوتا رہتا ہے جبکہ آپ کی ایپلیکیشن ہر درخواست پر ایرر دیتی ہے۔
XFS اس کے برعکس فائل سسٹم کو بند (shutdown) کر دیتا ہے:
XFS (vda1): metadata I/O error in "xfs_trans_read_buf_map+0x1c0/0x2e0" at daddr 0x2 len 1 error 5
XFS (vda1): I/O Error Detected. Shutting down filesystemjournalctl -k صرف موجودہ بوٹ کو پڑھتا ہے جب تک کہ جرنل ڈسک پر محفوظ نہ ہو، اور بہت سی امیجز ایک غیر مستحکم (volatile) جرنل کے ساتھ آتی ہیں جو RAM میں رہتا ہے۔ استقامت (persistence) کو آن کریں، ورنہ ٹربل شوٹنگ کے دوران آپ جس ریبوٹ کو انجام دیں گے، اسی وقت ثبوت غائب ہو جائیں گے۔
sudo mkdir -p /var/log/journal
sudo systemd-tmpfiles --create --prefix /var/log/journal
sudo systemctl restart systemd-journald
journalctl --list-bootsآپ کے اگلے ریبوٹ کے بعد، journalctl --list-boots کو ایک سے زیادہ بوٹس کی فہرست دکھانی چاہیے۔ استقامت آن ہونے کے باوجود، ایک فائل سسٹم جو read-only ہو چکا ہو، وہ بعد میں پیش آنے والے واقعات کو ریکارڈ نہیں کر سکتا، یہی وہ ٹھوس دلیل ہے جس کی وجہ سے لاگز کو سرور سے باہر بھیجنا ضروری ہے۔
سگنل 2: read-only remount کو پکڑنا
ناکامی کو پکڑنے کی کوشش سے پہلے اسے واضح اور نمایاں بنائیں۔
findmnt -no SOURCE,FSTYPE,OPTIONS /options میں errors=remount-ro تلاش کریں۔ Ubuntu اور Debian کی کلاؤڈ امیجز اسے /etc/fstab میں سیٹ کرتی ہیں، تاکہ metadata کی خرابی کی صورت میں فائل سسٹم کو نقصان بڑھنے سے روکنے کے لیے read-only موڈ میں منتقل کر دیا جائے۔ اگر یہ موجود نہ ہو تو اسے /etc/fstab میں root انٹری میں شامل کریں، یا sudo tune2fs -e remount-ro /dev/vda1 کے ذریعے superblock میں سیٹ کریں۔ خاموش کرپشن کے مقابلے میں واضح رکاوٹ بہتر ہے۔
mount فلیگ ثبوت نہیں ہے۔ لکھ کر جانچ کریں:
touch /var/tmp/.disk-probeایک read-only root پر یہ بالکل درج ذیل آؤٹ پٹ دے گا:
touch: cannot touch '/var/tmp/.disk-probe': Read-only file system/var/tmp استعمال کریں، /tmp نہیں۔ زیادہ تر امیجز پر /tmp میموری میں موجود tmpfs ہوتا ہے، لہذا وہاں کامیاب رائٹ آپ کی ڈسک کے بارے میں کچھ ثابت نہیں کرتا۔
رائٹ ٹیسٹ کو ڈسک اسپیس چیک کے ساتھ ملائیں، اور صرف تب heartbeat بھیجیں جب ہر چیک کامیاب ہو:
sudo tee /usr/local/sbin/disk-probe >/dev/null <<'EOF'
#!/bin/sh
set -eu
probe=/var/tmp/.disk-probe
echo ok > "$probe"
test "$(cat "$probe")" = ok
rm -f "$probe"
used=$(df --output=pcent / | tail -n1 | tr -dc '0-9')
test "$used" -lt 90
inodes=$(df --output=ipcent / | tail -n1 | tr -dc '0-9')
test "$inodes" -lt 90
curl -fsS --max-time 10 "https://status.example.com/api/push/REPLACE_TOKEN?status=up&msg=OK" >/dev/null
EOF
sudo chmod 755 /usr/local/sbin/disk-probe
sudo /usr/local/sbin/disk-probe && echo probe-okآخری لائن پر probe-ok کا مطلب ہے کہ پوری چین کام کر رہی ہے۔ set -eu کسی بھی ناکام چیک کو curl لائن چلنے سے پہلے non-zero exit دینے پر مجبور کرتا ہے، تاکہ کوئی heartbeat نہ جائے۔ اس انورژن کا مقصد یہ ہے: مانیٹر سرخ ہو جاتا ہے کیونکہ کچھ موصول نہیں ہوا، اور جو سرور لکھ نہیں سکتا اس پر اپنے مسئلے کی وضاحت کرنے کے لیے بھروسہ نہیں کیا جا سکتا۔ read-only فائل سسٹم پر بھی reads کام کرتی ہیں، اس لیے اسکرپٹ خود چلتا رہتا ہے۔
اسے systemd ٹائمر سے چلائیں۔
# /etc/systemd/system/disk-probe.service
[Unit]
Description=Disk writability and space probe
[Service]
Type=oneshot
ExecStart=/usr/local/sbin/disk-probe# /etc/systemd/system/disk-probe.timer
[Unit]
Description=Run the disk probe every five minutes
[Timer]
OnBootSec=2min
OnUnitActiveSec=5min
[Install]
WantedBy=timers.targetsudo systemctl daemon-reload
sudo systemctl enable --now disk-probe.timer
systemctl list-timers disk-probe.timer
journalctl -u disk-probe.service -n 20 --no-pagersystemctl list-timers کو یونٹ کو پانچ منٹ سے کم وقت کے NEXT کے ساتھ دکھانا چاہیے۔ ایک ناکام رن journalctl -u disk-probe.service میں شیل کے اپنے ایرر ٹیکسٹ کے ساتھ ظاہر ہوتا ہے، لہذا آپ لاگ ان کیے بغیر یہ بتا سکتے ہیں کہ فائل سسٹم read-only ہے یا مکمل بھر چکا ہے۔
وہ push URL ایک Uptime Kuma پش مانیٹر ہے۔ Push قسم کا مانیٹر بنائیں، اس کا ٹوکن اسکرپٹ میں کاپی کریں، اور مانیٹر کا heartbeat وقفہ ٹائمر کے وقفے سے تھوڑا زیادہ رکھیں تاکہ ایک سست رن آپ کو رات 3 بجے الرٹ نہ کرے۔ اگر آپ کے پاس ابھی تک اسٹیٹس پیج نہیں ہے تو، ایک self-hosted Uptime Kuma instance اس چیک کو رکھنے کے لیے سب سے سستا ذریعہ ہے۔
دو ایماندارانہ حدود۔ یہ پروب تصدیق کرتی ہے کہ رائٹ قبول کیا گیا، نہ کہ بائٹس پائیدار اسٹوریج تک پہنچ گئے، کیونکہ ریڈ بیک پیج کیش سے بھی ہو سکتا ہے۔ اور یہ اسی مشین پر چلتا ہے جس کی یہ نگرانی کرتا ہے، لہذا مکمل طور پر جام ہو جانے والا سرور تشخیص رپورٹ کرنے کے بجائے خاموش ہو جاتا ہے۔
جب root فائل سسٹم پہلے سے read-only ہو تو کیا کریں
- اس کی تصدیق کریں۔
findmnt -no OPTIONS /کا آغازroسے ہوتا ہے۔ - ثبوت کو پہلے RAM میں محفوظ کریں:
journalctl -k -b > /dev/shm/kernel.log، پھر اسے اپنے لیپ ٹاپ سےscp user@server:/dev/shm/kernel.log .کے ذریعے سرور سے نکال لیں۔ - صرف
mount -o remount,rw /چلا کر کام جاری نہ رکھیں۔ اگر ext4 نے جرنل کو ختم کر دیا ہے تو remount فوراً دوبارہ ناکام ہو جائے گا، اور اگر یہ کامیاب ہو بھی جائے تو آپ اس نقصان پر لکھ رہے ہوں گے جسے کسی نے دیکھا نہیں ہے۔ - اپنے پرووائیڈر کے rescue موڈ میں ریبوٹ کریں اور فائل سسٹم کو ان ماؤنٹ ہونے کی حالت میں چیک کریں: ext4 کے لیے
e2fsck -fy /dev/vda1، XFS کے لیےxfs_repair /dev/vda1۔ - پرووائیڈر کو اس کے ٹائم اسٹیمپ اور سیکٹر کے ساتھ
I/O error, dev vdaلائن بھیجیں۔ - بیک اپ سے بحال کریں اور موازنہ کریں، کیونکہ جس فائل سسٹم کو مرمت کی ضرورت تھی اس میں حالیہ رائٹس کا آخری حصہ ضائع ہو سکتا ہے۔
سگنل 3: تاخیر اور throughput کے رجحانات
sudo apt install -y sysstat
iostat -xdz 5 3پہلے r_await اور w_await دیکھیں۔ یہ اوسط milliseconds ہیں جو کسی read یا write کو مکمل ہونے میں لگے، جس میں queue میں انتظار کا وقت بھی شامل ہے۔ اس کے بعد aqu-sz دیکھیں، جو in-flight requests کی اوسط تعداد ہے۔ virtual disk پر %util کو نظرانداز کریں: اس کا مطلب صرف یہ ہے کہ queue خالی نہیں تھی۔ جو device متعدد requests کو متوازی طور پر پورا کرتا ہے، وہ اپنی حد سے بہت دور ہوتے ہوئے بھی تقریباً 100 percent پر رہ سکتا ہے۔ await وہ عدد ہے جو صارفین کے محسوس کردہ performance کو ظاہر کرتا ہے۔
Absolute values کی نسبت آپ کا اپنا baseline زیادہ اہم ہے، اس لیے ایک پُرسکون گھنٹے کے اعداد record کریں اور محفوظ رکھیں۔ اگر آپ counters خود collect کرنا چاہیں تو /proc/diskstats raw source ہے۔
جان بوجھ کر measurement کرنے کے لیے:
sudo apt install -y fio
fio --name=readlat --filename=/var/tmp/fio.probe --size=512M --rw=randread --bs=4k --iodepth=1 --direct=1 --runtime=30 --time_based --group_reporting
rm -f /var/tmp/fio.probeclat percentiles block دیکھیں، خاص طور پر 99th percentile۔ --direct=1 آپ کے page cache کو bypass کرتا ہے۔ یہ host کے cache کو bypass نہیں کرتا، اس لیے نتیجہ آپ کے process سے platform کے storage تک پورے راستے کی عکاسی کرتا ہے۔ اسے اس وقت چلائیں جب server idle ہو، کیونکہ یہ آپ کے اپنے workload کے ساتھ resources کے لیے مقابلہ کرتا ہے۔
Kernel log میں errors کے بغیر await کا بڑھنا عموماً failing drive کی علامت نہیں ہوتا۔ یہ host پر contention ہوتا ہے؛ storage کے لیے وہی صورتِ حال جو مصروف پڑوسی کی وجہ سے CPU steal time میں ہوتی ہے۔ اگر یہ ہر روز اسی گھنٹے میں دوبارہ ظاہر ہو اور آپ کا ticket معمول کے مطابق close ہو جائے، تو حل ایسا plan ہے جس میں I/O اسی طرح shared نہ ہو۔ Disk-bound workload کی صورت میں یہ regular VPS کے مقابلے میں storage VPS کا معاملہ ہوتا ہے۔
سگنل 4: فائل سسٹم کی جانچ جو ماؤنٹ ہونے کے دوران کی جا سکتی ہے
ext4 اپنے superblock میں غلطیوں کا ایک کاؤنٹر رکھتا ہے، اور یہ ریبوٹ کے بعد بھی محفوظ رہتا ہے، تب بھی جب آپ کے لاگز ختم ہو چکے ہوں۔
sudo dumpe2fs -h /dev/vda1 2>/dev/null | grep -iE 'filesystem state|error count|first error|last error'ایک صحت مند فائل سسٹم صرف Filesystem state: clean پرنٹ کرتا ہے اور کچھ نہیں، کیونکہ dumpe2fs تبھی FS Error count لائن اور پہلی و آخری غلطی کی لائنیں پرنٹ کرتا ہے جب کوئی غلطی ریکارڈ کی گئی ہو۔ clean with errors، یا کوئی بھی FS Error count لائن، کا مطلب ہے کہ کرنل کو کسی مرحلے پر میٹا ڈیٹا کی غلطی کا سامنا ہوا ہے، چاہے کسی کی نظر اس پر نہ پڑی ہو اور لاگ فائل رول ہو چکی ہو۔ یہ ایک کمانڈ ہفتہ وار جانچ میں شامل ہونی چاہیے۔
آپ ماؤنٹ شدہ روٹ فائل سسٹم پر fsck نہیں چلا سکتے، اور لائیو فائل سسٹم پر e2fsck -n صرف ان مسائل کی اطلاع دیتا ہے جو ڈیٹا کے مسلسل تبدیل ہونے کی وجہ سے ہوتے ہیں۔ حقیقی جانچ کو زبردستی چلانے کے لیے، اپنے پرووائیڈر کے کنسول سے ایک بار بوٹ کرنے کے لیے کرنل کمانڈ لائن میں fsck.mode=force fsck.repair=yes شامل کریں۔ اس کے بعد systemd-fsck روٹ کے read-write ماؤنٹ ہونے سے پہلے جانچ مکمل کر لیتا ہے۔
XFS کا آف لائن چیکر، xfs_repair -n /dev/vda1، ماؤنٹ شدہ فائل سسٹم پر چلنے سے انکار کر دیتا ہے، اس لیے اسے ریسکیو موڈ میں چلانا چاہیے۔ xfsprogs کا xfs_scrub ماؤنٹ شدہ XFS فائل سسٹم کو تب چیک کر سکتا ہے جب کرنل کو آن لائن اسکرپ سپورٹ کے ساتھ بنایا گیا ہو، حالانکہ اس کا اپنا مین پیج اسے ابھی بھی ایک نامکمل یوٹیلیٹی قرار دیتا ہے۔ XFS اس کمی کو اپنی آواز سے پورا کرتا ہے: یہ میٹا ڈیٹا کی غلطی پر فائل سسٹم کو جاری رکھنے کے بجائے بند کر دیتا ہے۔
Btrfs میں کاؤنٹرز پہلے سے موجود اور مستقل ہوتے ہیں۔
sudo btrfs device stats /
sudo btrfs scrub start -B /write_io_errs یا corruption_errs کا صفر سے اوپر ہونا ایک حقیقی واقعہ ہے، اور یہ کاؤنٹرز ریبوٹ کے بعد بھی اپنی اقدار برقرار رکھتے ہیں جب تک کہ آپ انہیں ری سیٹ نہ کریں۔ scrub ہر بلاک کو دوبارہ پڑھتا ہے اور اس کے چیک سم کی تصدیق کرتا ہے، جو ورچوئل ڈسک پر دستیاب میڈیا ٹیسٹ کے سب سے قریب ہے۔ یہ I/O پر بوجھ ڈالتا ہے، اس لیے اسے کسی پرسکون وقت کے لیے شیڈول کریں۔
خلا کا اشارہ 5: free space، بشمول وہ حصے جو df چھپا دیتا ہے
Space ختم ہونے سے سرور اسی طرح متاثر ہوتا ہے جیسے خراب disk سے، اور یہ کہیں زیادہ عام ہے۔
df -h /
df -i /
sudo du -xh --max-depth=1 / | sort -h | tail -n 20No space left on device جبکہ df -h یہ دکھاتا ہے کہ free space موجود ہے، اس کا مطلب ہے کہ bytes کے بجائے inodes ختم ہو گئے ہیں، اور df -i یہ دکھاتا ہے کہ IUse% 100 percent پر ہے۔ Cache directory یا mail spool میں موجود لاکھوں چھوٹی files اس مسئلے کا سبب بنتی ہیں، اور بڑی files حذف کرنے سے مسئلہ حل نہیں ہوتا۔
Delete کرنے کے بعد واپس نہ آنے والی space عموماً ایسی deleted file کی ہوتی ہے جسے running process نے ابھی open رکھا ہوا ہے۔ sudo lsof +L1 ان files کی فہرست دیتا ہے جن کا link count صفر ہو چکا ہے۔ جس process نے ایسی file کھول رکھی ہو، اسے restart کرنے سے space آزاد ہو جاتی ہے۔
Journal خاموشی سے space استعمال کرنے والا ایک عام جزو ہے۔ journalctl --disk-usage بتاتا ہے کہ یہ کتنی space استعمال کر رہا ہے۔ /etc/systemd/journald.conf میں SystemMaxUse=200M کے ذریعے اس کی حد مقرر کریں، پھر sudo systemctl restart systemd-journald کے بعد sudo journalctl --vacuum-size=200M سے ابھی space واپس حاصل کریں۔
ایک صورت bug جیسی دکھائی دیتی ہے، لیکن bug نہیں ہوتی۔ Thin-provisioned host storage میں host کا pool بھر سکتا ہے، جبکہ آپ کا df اب بھی کئی gigabytes free دکھاتا ہے۔ اس کے بعد آپ کی writes kernel log میں I/O errors کے ساتھ fail ہوتی ہیں، اور guest کے اندر کہیں بھی space ختم ہونے کی warning نہیں آتی۔ Full filesystem کے بغیر errors ایک ایسا مجموعہ ہے جس کے لیے اسی گھنٹے ticket بنانا چاہیے۔
signals کو metrics agent تک پہنچانا
Push probe صرف ہاں یا نہیں کا جواب دیتا ہے۔ رجحانات کے لیے metrics agent درکار ہوتا ہے، اور Prometheus node_exporter بغیر کسی اضافی configuration کے اوپر بیان کردہ تمام metrics پہلے ہی export کرتا ہے۔ جن metric names کو بنیاد بنانا ہے:
node_filesystem_readonlyاس وقت 1 ہو جاتا ہے جب mount read-only ہو، اور یہی آپ کا remount alarm ہے۔node_filesystem_avail_bytesاورnode_filesystem_files_freeبالترتیب bytes اور inodes کو الگ الگ ظاہر کرتے ہیں۔node_disk_io_time_seconds_totalاورnode_disk_read_time_seconds_totalbusy time اور latency کو counters کے طور پر فراہم کرتے ہیں، جنہیں آپ graph میں دکھا سکتے ہیں۔
درج ذیل دو rules ان صورتوں کو پکڑتے ہیں جن پر واقعی page بھیجنا ضروری ہوتا ہے:
- alert: FilesystemReadOnly
expr: node_filesystem_readonly{fstype!~"tmpfs|overlay"} == 1
for: 2m
- alert: FilesystemFillingUp
expr: predict_linear(node_filesystem_avail_bytes{mountpoint="/"}[6h], 4*24*3600) < 0
for: 30mدوسرا rule اس وقت fire ہوتا ہے جب موجودہ رجحان چار دن کے اندر zero تک پہنچنے کا اندازہ ہو۔ اس طرح آپ کو 95 percent full ہونے کے وقت alert ملنے کے بجائے کئی دن پہلے warning مل جاتی ہے، جب عموماً صرف چند minutes باقی ہوتے ہیں۔
کس کی کیا ذمہ داری ہے
آپ کا provider physical drives کا مالک ہوتا ہے۔ وہ SMART پڑھتا ہے، array چلاتا ہے، اور rising reallocated sectors والی drive تبدیل کرتا ہے۔ عموماً وہ آپ کو اطلاع نہیں دیتا، کیونکہ array failure کو absorb کر لیتا ہے۔ آپ کے VPS کے تحت RAID 10 کا مقصد یہی ہے: dead drive outage کے بجائے rebuild کا سبب بنتی ہے۔ آپ اس میں سے کچھ بھی نہیں دیکھ سکتے، اور virtual server کرائے پر لینے کی abstraction کی اصل قدر بھی یہی ہے۔
آپ اپنے data کے ذمہ دار ہیں، اور drive telemetry بہرحال آپ کے data کو محفوظ نہیں رکھتی۔ وہ واقعات جو tenant data کو حقیقتاً تباہ کرتے ہیں، ان میں ایک غلط rm، خراب deploy، آپ کی SSH key رکھنے والا intruder، اور platform incident شامل ہیں جو array کو بھی متاثر کر دے۔ SMART attributes ان میں سے کسی کی پیش گوئی نہیں کرتیں۔
اس لیے tenant کا حقیقی تحفظ ایسی backup ہے جو server سے باہر موجود ہو، اور ایسا restore ہے جسے آپ نے خود انجام دیا ہو۔ Provider snapshots سہولت فراہم کرتے ہیں، لیکن وہ اسی platform پر موجود ہوتے ہیں جس چیز کی حفاظت کر رہے ہوتے ہیں۔ اسی لیے snapshots اور backups مختلف تحفظات ہیں۔ Calendar میں drill مقرر کریں: ہر quarter میں newest backup کو ایک fresh VPS پر restore کریں، application شروع کریں، اور لکھیں کہ اس میں کتنا وقت لگا۔ یہی عدد آپ کا حقیقی recovery time ہے۔ پہلی drill ہمیشہ اندازے سے زیادہ وقت لیتی ہے۔
SMART آپ پر کب لاگو ہوتا ہے
جو گائیڈز smartctl سکھاتی ہیں وہ درست ہیں، اور ان کا اطلاق اسی لمحے ہوتا ہے جب ہارڈویئر واقعی آپ کی ملکیت ہو:
- ایک ڈیڈیکیٹڈ یا bare metal سرور، جہاں
sudo smartctl -a /dev/sdaمکمل ایٹریبیوٹ ٹیبل واپس کرتا ہے اورsmartdکسی ایٹریبیوٹ کے تبدیل ہونے پر آپ کو میل کر سکتا ہے۔ - سٹوریج پلانز جو فزیکل ڈسک کو گیسٹ تک پہنچاتے ہیں۔ پرووائیڈرز اس کی وضاحت واضح طور پر کرتے ہیں، کیونکہ یہ ایک سیلنگ پوائنٹ ہے۔
- وہ ہارڈویئر جو آپ کی ملکیت ہے، گھر پر یا کرائے پر لی گئی ریک سپیس میں۔
- RAID کنٹرولر کے پیچھے موجود ڈسک، جو
sudo smartctl -a -d megaraid,0 /dev/sdaکے ذریعے قابل رسائی ہو، یا-d satکے ساتھ USB انکلوژر۔
اصلی NVMe پر، sudo smartctl -a -d nvme /dev/nvme0 اور sudo nvme smart-log /dev/nvme0n1 ڈرائیو سے ہی critical_warning اور percentage_used رپورٹ کرتے ہیں۔ اصلی SATA پر، ناکامی کی پیش گوئی کرنے والے ایٹریبیوٹس Reallocated_Sector_Ct (5)، Current_Pending_Sector (197)، Offline_Uncorrectable (198) اور Reported_Uncorrect (187) ہیں۔ ان میں سے کسی کا بھی صفر سے ہٹنا اس بات کا مطلب ہے کہ تبدیلی (replacement) کی منصوبہ بندی کریں۔ بڑے پیمانے پر ڈرائیو اسٹڈیز کا نتیجہ اسی مختصر فہرست پر نکلتا ہے، اور باقی زیادہ تر ایٹریبیوٹس صرف شور (noise) ہیں۔
ہاتھ سے چیک کرنے کے بجائے ڈیمن (daemon) چلائیں۔
sudo systemctl enable --now smartd
sudo smartctl -t short /dev/sda
sudo smartctl -l selftest /dev/sdaسیلف ٹیسٹ لاگ میں اس رن کے لیے Completed without error نظر آنا چاہیے جسے آپ نے ابھی شروع کیا ہے۔ Ubuntu اور Debian میں /etc/smartd.conf ایک DEVICESCAN لائن کے ساتھ آتا ہے، جو اکتوبر 2026 تک اپ ڈیٹ ہے، لہذا ڈیمن ہر اس ڈسک کو اٹھا لیتا ہے جسے وہ دیکھ سکتا ہے اور تبدیلی ہونے پر root کو میل کر دیتا ہے۔ ان میں سے کوئی بھی چیز ورچوئل ڈسک پر کام نہیں کرتی، اسی لیے اس گائیڈ کا باقی حصہ موجود ہے۔
FAQ
میرے VPS پر smartctl کیوں کام نہیں کرتا؟
کیونکہ ڈسک ورچوئل ہے۔ virtio-blk استعمال کرنے والے KVM گیسٹ پر، smartctl -a /dev/vda کمانڈ /dev/vda: Unable to detect device type پرنٹ کرتی ہے، کیونکہ پیرا ورچوئل ڈسک میں SMART درخواست کے لیے کوئی ATA یا SCSI کمانڈ چینل موجود نہیں ہوتا۔ ایمولیٹڈ ڈسک پر آپ ایک ایسی ڈیوائس تک پہنچتے ہیں جس کا ماڈل QEMU HARDDISK ظاہر ہوتا ہے، جس کے پیچھے کوئی قابلِ استعمال SMART ڈیٹا نہیں ہوتا۔ کنٹینر کے اندر، CAP_SYS_RAWIO کی کمی کی وجہ سے smartctl کو براہ راست مسترد کر دیا جاتا ہے۔ ان میں سے کوئی بھی غلط کنفیگریشن نہیں ہے، اور کوئی بھی -d فلیگ انہیں ٹھیک نہیں کر سکتا۔
مجھے کیسے معلوم ہوگا کہ میری VPS ڈسک خراب ہو رہی ہے؟
ہارڈ ویئر کے بجائے اثرات پر نظر رکھیں۔ sudo journalctl -k -p err -b میں I/O error, dev vda لائنز (5.16 سے پرانے کرنلز پر blk_update_request: کے ساتھ) اور Remounting filesystem read-only کے لیے چیک کریں۔ ان غلطیوں کو تلاش کرنے کے لیے sudo dumpe2fs -h /dev/vda1 | grep -i 'error count' چلائیں جو لاگز میں پہلے ہی ضائع ہو چکی ہیں۔ کوئی آؤٹ پٹ نہ آنے کا مطلب ہے کہ کوئی غلطی ریکارڈ نہیں ہوئی۔ iostat -xdz 5 سے r_await کا موازنہ اس بیس لائن سے کریں جو آپ نے سسٹم کے درست حالت میں ہونے پر ریکارڈ کی تھی۔ VPS پر I/O ایرر کا مطلب عام طور پر ہوسٹ اسٹوریج کا مسئلہ ہوتا ہے نہ کہ ڈسک کا خراب ہونا، لہذا اسے ٹائم اسٹیمپ اور سیکٹر کے ساتھ سپورٹ ٹکٹ میں درج کریں۔
مجھے VPS ڈسک کی صحت کے لیے کن چیزوں پر الرٹ لگانا چاہیے؟
چار الرٹس کافی ہیں۔ node_filesystem_readonly == 1 سے ریڈ اونلی ماؤنٹ، یا رائٹ پروب جو ناکام ہو جائے۔ خالی جگہ اور فری انوڈز کا صفر کی طرف رجحان۔ پچھلے وقفے میں کوئی بھی کرنل I/O error۔ سرور سے ہارٹ بیٹ، تاکہ جب باکس جواب دینا بند کر دے تو آپ کو اطلاع مل جائے۔ SMART سے اخذ کردہ کسی بھی چیز کو چھوڑ دیں، کیونکہ ورچوئل ڈسک پر وہ اقدار یا تو غائب ہوتی ہیں یا ہائپر وائزر کی ایمولیشن کو بیان کرتی ہیں۔
میرا فائل سسٹم ریڈ اونلی موڈ میں کیوں ری ماؤنٹ ہوا؟
errors=remount-ro کے ساتھ ماؤنٹ شدہ ext4 میٹا ڈیٹا ایرر آنے پر جان بوجھ کر ایسا کرتا ہے: یہ نقصان کو بڑھانے کے بجائے لکھنا بند کر دیتا ہے۔ اس کی وجہ ری ماؤنٹ لائن کے بالکل اوپر کرنل لاگ میں ہوتی ہے، عام طور پر یہ EXT4-fs error ہوتا ہے جو بنیادی ڈیوائس سے I/O ایرر ملنے کے بعد جرنل کے ختم ہونے کی نشاندہی کرتا ہے۔ فائل سسٹم کو چیک کیے بغیر دوبارہ ریڈ-رائٹ ماؤنٹ کرنا علامت کو چھپاتا ہے اور وجہ کو برقرار رکھتا ہے۔ لاگ کو محفوظ کریں، پھر ریسکیو موڈ سے ان ماؤنٹ کر کے فائل سسٹم کو e2fsck -fy /dev/vda1 سے چیک کریں۔
کیا میں کبھی ورچوئل سرور پر SMART ڈیٹا پڑھ سکتا ہوں؟
مخصوص حالات میں، ہاں۔ ڈیڈیکیٹڈ اور بیئر میٹل سرورز آپ کو حقیقی ایٹریبیوٹس دیتے ہیں۔ اسی طرح وہ اسٹوریج پلانز جو فزیکل ڈسک کو گیسٹ تک پہنچاتے ہیں، اور کوئی بھی ہوسٹ جس کے آپ خود مالک ہیں۔ کچھ پلیٹ فارمز گیسٹ کو NVMe کنٹرولر پیش کرتے ہیں اور nvme smart-log ایک لاگ واپس کرتا ہے، لہذا پہلے sudo nvme id-ctrl /dev/nvme0 چلائیں: نیٹ ورک اسٹوریج سروس کا ماڈل نمبر ظاہر کرنے کا مطلب ہے کہ وہ کاؤنٹرز سافٹ ویئر کنٹرولر سے آتے ہیں۔ اور جہاں پاس تھرو نوڈ شیئرڈ مشین پر حقیقی کاؤنٹرز ظاہر کرتا ہے، وہ ہارڈ ویئر دوسرے کرایہ داروں کے ساتھ شیئر ہوتا ہے، لہذا واحد مفید عمل سپورٹ ٹکٹ جمع کروانا ہے۔