SSD Nodes Learn Hosting plans →
تعلیمی Matt Connorتحریر: Matt Connor

ٹریڈنگ bots کے لیے VPS میں اصل اہم چیزیں کیا ہیں؟

جانیں کہ trading bot کے لیے systemd restart، درست clock، محفوظ API keys اور heartbeats کیوں ضروری ہیں، اور latency کے بارے میں حقیقتاً کتنی توقع رکھنی چاہیے۔

VPS کو trading bots کے لیے کن چیزوں کی ضرورت ہوتی ہے

trading bots کے لیے VPS کو چار چیزوں کی بنیاد پر پرکھا جاتا ہے: کیا process بند ہونے کے بعد دوبارہ شروع ہو جاتا ہے، کیا system clock درست ہے، کیا API (application programming interface) keys چوری کرنا مشکل ہے، اور کیا bot رکنے پر آپ کو بروقت اطلاع مل جاتی ہے۔ retail bot کے لیے raw speed اس فہرست میں بہت نیچے آتی ہے، کیونکہ order path کا سست حصہ آپ کا broker اور اس تک network distance ہے، نہ کہ وہ host جہاں آپ کا Python چل رہا ہو۔

یہ ایک engineering guide ہے۔ اس میں موجود کوئی بات financial advice نہیں ہے، اور کسی strategy پر بحث نہیں کی گئی۔

Uptime نظمِ restart ہے، sales page پر درج کوئی عدد نہیں

Advertised uptime commitments مختلف ہوتے ہیں۔ AWS ایک واحد EC2 instance کے لیے کم از کم 99.5 percent اور متعدد availability zones پر اہل deployments کے لیے 99.99 percent بیان کرتا ہے۔ یہ commitments infrastructure availability کا احاطہ کرتے ہیں، آپ کے bot کی صحت کا نہیں۔ کوئی bot unhandled exception، کبھی reconnect نہ ہونے والے websocket، یا OOM (out of memory) killer کی وجہ سے بند ہو سکتا ہے، جبکہ server پورے وقت چلتا رہتا ہے۔ اس لیے مفید سوال یہ ہے کہ آپ کا process exit ہونے کے بعد اگلے دس seconds میں کیا ہوتا ہے۔

bot کو systemd service کے طور پر چلائیں اور restart کی ذمہ داری init system کو دیں۔ ایک unit file یہ کام کرتی ہے۔

[Unit]
Description=Trading bot
After=network-online.target
Wants=network-online.target
StartLimitIntervalSec=0

[Service]
Type=simple
User=bot
WorkingDirectory=/opt/tradingbot
EnvironmentFile=/etc/tradingbot/api.env
ExecStart=/opt/tradingbot/venv/bin/python -m tradingbot
Restart=always
RestartSec=10
NoNewPrivileges=true
ProtectSystem=strict
ProtectHome=true
PrivateTmp=true
ReadWritePaths=/var/lib/tradingbot

[Install]
WantedBy=multi-user.target

StartLimitIntervalSec=0 وہ line ہے جسے لوگ نظرانداز کر دیتے ہیں۔ upstream systemd کے default settings 10 seconds میں 5 starts کی اجازت دیتی ہیں، جن میں initial start اور manual starts بھی شامل ہیں؛ manager configuration ان defaults کو override کر سکتی ہے۔ limit پوری ہونے پر automatic restart attempts رک جاتی ہیں، لیکن interval گزرنے کے بعد unit کو manually یا timer یا socket کے ذریعے start کیا جا سکتا ہے۔ اسے 0 پر set کرنے سے rate limit disable ہو جاتی ہے، اس لیے crash-loop میں پھنسا bot خاموش ہونے کے بجائے دوبارہ کوشش کرتا رہتا ہے۔ RestartSec=10 اس loop کو exchange پر مسلسل reconnects بھیجنے سے روکتا ہے۔

فائل پر اعتماد کرنے سے پہلے اسے check کریں، پھر اسے start کریں:

sudo systemd-analyze verify /etc/systemd/system/tradingbot.service
sudo systemctl daemon-reload
sudo systemctl enable --now tradingbot
systemctl status tradingbot

enable وہ حصہ ہے جو reboot کے بعد بھی برقرار رہتا ہے، اور kernel updates کا مطلب reboot ہوتا ہے۔ یہ دیکھنے کے لیے کہ bot خاموشی سے بند تو نہیں ہو رہا، systemd سے restart counter دیکھیں:

systemctl show tradingbot -p NRestarts
journalctl -u tradingbot --since "24 hours ago" | tail -50

NRestarts=0 آخری بار counter reset ہونے کے بعد ہونے والی automatic restart jobs کی تعداد ہے؛ یہ صحت مند یا crash-free week ثابت نہیں کرتا۔ Manual restarts اور systemctl reset-failed counter کو reset کرتے ہیں، اور hung bot پھر بھی zero دکھا سکتا ہے۔ NRestarts=812 812 restart jobs شمار کرتا ہے، کامیاب exchange reconnections یا trades نہیں، اور یہ بھی نہیں بتاتا کہ وہ کب ہوئے۔ Timing اور وجہ معلوم کرنے کے لیے journal check کریں، ان failures سمیت جو bot کے connect ہونے سے پہلے ہوئی ہوں۔ مکمل unit file anatomy، جس میں روزانہ report جیسے scheduled jobs کے لیے timers بھی شامل ہیں، systemd service کے طور پر program چلانا میں بیان کی گئی ہے۔

گھڑی کو UTC پر سیٹ کریں اور ثابت کریں کہ یہ ہم وقت ساز ہے

Exchange APIs دستخط شدہ requests کی توثیق کے لیے timestamps استعمال کرتی ہیں؛ Binance Spot میں بطور default 5-second receive window ہوتی ہے اور server time سے کم از کم 1 second آگے کے timestamps مسترد کر دیے جاتے ہیں۔ گھڑی میں drift ایسی errors پیدا کرتی ہے جو authentication failures جیسی دکھائی دیتی ہیں، اس لیے لوگ وقت چیک کرنے سے پہلے کئی گھنٹوں تک keys rotate کرتے رہتے ہیں۔ Binance طرز کی APIs میں message واضح ہوتا ہے: Timestamp for this request was 1000ms ahead of the server's time۔

Server کو UTC پر سیٹ کریں۔ Local time zones displayed times میں daylight saving کی چھلانگیں پیدا کرتے ہیں؛ APIs کے استعمال کردہ Unix timestamps display timezone تبدیل ہونے پر نہیں بدلتے۔

sudo timedatectl set-timezone UTC
timedatectl

Ubuntu، 25.10 سے آگے، بطور default chrony استعمال کرتا ہے؛ پرانی installations میں systemd-timesyncd استعمال کیا جا سکتا ہے، جو ایک SNTP (simple network time protocol) client ہے۔ systemd-timesyncd گھڑی کو adjust کرتا ہے، لیکن یہ بیک وقت متعدد servers کو poll نہیں کر سکتا تاکہ غلط time source کا پتا چل سکے۔ اس کے بجائے chrony استعمال کریں:

sudo apt update && sudo apt install -y chrony
sudo systemctl enable --now chrony
chronyc tracking
chronyc sources -v

chronyc tracking سے پڑھنے والی line System time ہے، مثلاً System time : 0.000031415 seconds fast of NTP time۔ چھوٹی value chrony's NTP clock کے لیے باقی رہ جانے والی معمولی correction ظاہر کرتی ہے؛ accuracy کا فیصلہ کرنے سے پہلے synchronisation، Root delay اور Root dispersion بھی چیک کریں۔ اگر اس میں Leap status : Not synchronised پڑھا جائے تو chrony synchronised نہیں ہے، چاہے servers نے response دیا ہو؛ measurements کو بہت کم accurate ہونے کی وجہ سے مسترد کیا جا سکتا ہے۔ ایک منٹ انتظار کریں، پھر دوبارہ چیک کریں؛ اس سے پہلے firewall rules میں تبدیلی نہ کریں۔

API keys ان جگہوں سے دور رکھیں جہاں آپ انہیں copy کرتے ہیں

لیک ہونے والی exchange key، لیک ہونے والی SSH key سے زیادہ خطرناک ہوتی ہے، کیونکہ withdrawal permission اسے فوراً رقم میں تبدیل کر دیتی ہے۔ زیادہ تر خطرے کے لیے دو عادات کافی ہیں۔

اول، bot key کو کبھی withdrawal permission نہ دیں۔ جہاں exchange یہ سہولت فراہم کرے، key کو اپنے server کے IP address کے ساتھ bind کریں۔ یہی وہ واحد control ہے جو چوری شدہ key کو تقریباً بے کار بنا دیتا ہے۔

دوم، secret کو code directory سے باہر رکھیں۔ /opt/tradingbot کے اندر موجود ہر چیز بالآخر git repository یا backup archive میں پہنچ جاتی ہے۔ اسے root-owned file میں رکھیں جسے systemd پڑھ سکے:

sudo install -d -m 750 -o root -g bot /etc/tradingbot
sudo install -m 640 -o root -g bot /dev/null /etc/tradingbot/api.env
sudo nano /etc/tradingbot/api.env

اس file میں plain KEY=value lines ہوتی ہیں۔ ان میں quotes یا export نہیں ہوتے۔ Mode 640 سے root owner کو read/write access اور group bot کے members کو read access ملتا ہے۔ دیگر users کے لیے کوئی permission نہیں ہوتی۔ sudo -u bot cat /etc/tradingbot/api.env سے تصدیق کریں، پھر group bot سے باہر موجود unprivileged user کے ذریعے بھی آزمائیں۔ وہاں یہ ناکام ہونا چاہیے، اور error Permission denied آنا چاہیے۔

Bot کو root یا اپنے login user کے طور پر نہیں چلنا چاہیے۔ Service شروع کرنے یا group bot کی ملکیت والی files بنانے سے پہلے، nologin shell اور home directory کے طور پر /var/lib/tradingbot رکھنے والا system account بنائیں:

sudo useradd --system --shell /usr/sbin/nologin --home-dir /var/lib/tradingbot --create-home bot

ان flags کی وجوہات اور ProtectSystem=strict کے حقیقی دائرۂ کار کی وضاحت unprivileged user کے طور پر services چلانا میں ہے۔ Server baseline کے باقی حصے، یعنی SSH keys اور firewall، نئے VPS پر پہلے دس منٹ میں شامل ہیں۔

اپنے broker سے پہلے معلوم کریں کہ یہ بند ہے

systemctl status بتاتا ہے کہ process چل رہا ہے۔ یہ نہیں بتاتا کہ bot کوئی کام کر رہا ہے۔ کسی dead websocket کے خلاف retry loop میں پھنسا ہوا process اوپر والے unit کے process checks میں کامیاب ہو جاتا ہے۔

اس کے بجائے heartbeat استعمال کریں۔ Uptime Kuma میں push monitors موجود ہیں: یہ توقع کرتا ہے کہ آپ کا bot مقررہ وقفے سے ایک URL کو call کرے، اور جب یہ call آنا بند ہو جائے تو alert بھیجتا ہے۔ یہ call اپنی main loop کے آخر میں شامل کریں، اس حصے کے بعد جو ثابت کرتا ہے کہ bot زندہ ہے، مثلاً market data کا کامیاب read۔

curl -fsS "http://monitor.example.com:3001/api/push/YOUR_TOKEN?status=up&msg=loop_ok"

Monitor کا interval آپ کی loop time سے تقریباً دو گنا رکھیں، تاکہ معمولی jitter کی وجہ سے page نہ ہو۔ Monitor کو bot سے مختلف server پر چلائیں، کیونکہ جو monitor اس چیز کے ساتھ ہی بند ہو جائے جس کی نگرانی کر رہا ہے، وہ کچھ report نہیں کر سکتا۔ Setup کی تفصیل Uptime Kuma کے ساتھ self-hosted status monitoring میں موجود ہے۔

Disk alert بھی شامل کریں۔ Verbose logs لکھنے والا bot چند ہفتوں میں root filesystem بھر دے گا، اور full disk network call کے بجائے database write روک دیتی ہے، اس لیے علامات غیر واضح ہوتی ہیں۔ journalctl --vacuum-time=14d اور /etc/systemd/journald.conf میں موجود SystemMaxUse= line journal کو محدود رکھتے ہیں۔

ایمان دارانہ بات: latency کا زیادہ تر حصہ آپ کے host کی وجہ سے نہیں ہوتا

یہاں trading VPS products کی مارکیٹ technical دائرے سے باہر نکل جاتی ہے۔ Marketing pages sub-millisecond اعداد و شمار پیش کرتی ہیں اور یہ تاثر دیتی ہیں کہ fill تک پہنچنے میں اصل رکاوٹ host ہے۔ تقریباً ہر retail bot کے لیے ایسا نہیں ہے۔

آپ کا order bot سے exchange یا broker endpoint تک public internet کے ذریعے جاتا ہے۔ اس راستے پر physical distance اور آپ کے provider اور broker کے provider کے درمیان peering کا اثر غالب ہوتا ہے۔ اس کے بعد broker کے اپنے systems queue، risk checks اور rate limits شامل کرتے ہیں۔

اندازہ لگانے کے بجائے اسے measure کریں۔ curl کسی حقیقی endpoint کے لیے connection اور first-byte times report کرتا ہے:

curl -s -o /dev/null -w 'dns=%{time_namelookup}s connect=%{time_connect}s ttfb=%{time_starttransfer}s\n' \
  https://api.kraken.com/0/public/Time
mtr -rwzc 100 api.kraken.com

کسی candidate server کو منتخب کرنے سے پہلے وہاں سے یہ command چلائیں۔ اگر connect 0.180 seconds ہے تو اس میں DNS resolution اور TCP connection شامل ہیں؛ اس سے یہ معلوم نہیں ہوتا کہ آپ کس continent میں موجود ہیں۔ اگر connect 0.004 seconds اور ttfb 0.140 seconds ہے تو اس فرق میں TLS setup، request transmission، network delays اور server processing شامل ہیں۔ Host تبدیل کرنے سے ان میں سے کچھ components متاثر ہو سکتے ہیں، اس لیے candidate locations سے حاصل کی گئی measurements کا تقابل کریں۔

تو host کب اہم ہوتا ہے؟ جب آپ venue کے ساتھ colocated یا cross-connected ہوں اور queue position کے لیے مقابلہ کر رہے ہوں۔ یہ مختلف budget والا مختلف کاروبار ہے۔ Host اس وقت بھی اہم ہوتا ہے جب bottleneck آپ کا اپنا code ہو۔ ایک bot جو ہر tick پر پوری history کے indicators دوبارہ calculate کرتا ہے، ہر loop میں CPU کے 200 milliseconds استعمال کر سکتا ہے۔ یہ حقیقی latency ہے جسے آپ بغیر کسی لاگت کے control کر سکتے ہیں۔ تیز server تلاش کرنے سے پہلے loop کو profile کریں۔

آپ کے منتخب کردہ host میں اصل اہمیت geography، stable networking، اور اتنی memory کی ہے کہ OOM killer کو کبھی مداخلت کا موقع نہ ملے۔ اگر آپ tick history کو local database میں محفوظ رکھتے ہیں تو memory بڑھا دیں۔

لائیو کرنے سے پہلے مختصر چیک لسٹ

  1. systemctl is-enabled tradingbot، enabled دکھاتا ہے، اور سروس sudo reboot کے بعد بھی چلتی رہتی ہے۔
  2. chronyc tracking ہم وقت سازی، چند milliseconds سے کم system time offset، اور آپ کے timing budget کے اندر root delay اور dispersion رپورٹ کرتا ہے۔
  3. API key کو trading کی اجازت حاصل ہے، withdrawal کی اجازت نہیں، اور اگر exchange یہ سہولت فراہم کرتا ہے تو IP allowlist بھی configured ہے۔
  4. sudo systemctl kill -s SIGKILL tradingbot کے ذریعے process ختم کرنے کے بعد RestartSec کی تاخیر اور startup time گزرنے پر وہ دوبارہ شروع ہو جاتا ہے۔
  5. جب آپ bot کو جان بوجھ کر بند کرتے ہیں تو heartbeat monitor configured interval کے بعد آپ کو page کرتا ہے اور دوبارہ کوشش کرتا ہے۔
  6. Logs کی حد مقرر ہے، اور df -h میں root filesystem پر کافی خالی جگہ موجود ہے۔

حقیقی funds استعمال کرنے سے پہلے پورے نظام کو ایک ہفتے تک exchange کے sandbox یا paper mode میں چلائیں۔ اس ہفتے کے دوران اوپر دی گئی ہر چیز کم از کم ایک بار fail ہوتی ہے؛ یہی اس ہفتے کا مقصد ہے۔

FAQ

کیا trading bot کے لیے کم تاخیر والا یا bare metal server ضروری ہے؟

صرف اس صورت میں جب آپ اسی venue پر موجود دوسرے خودکار participants کے مقابلے میں execution speed پر مقابلہ کر رہے ہوں۔ عموماً اس کے لیے عام purpose VPS کے بجائے colocation درکار ہوتی ہے۔ Retail bot کے لیے round trip پر جغرافیائی فاصلہ اور broker کی اپنی processing زیادہ اثر انداز ہوتی ہے۔ اس لیے API endpoint کے قریب server منتخب کریں اور کسی تیز تر server کے لیے ادائیگی سے پہلے curl اور mtr کے ذریعے پیمائش کریں۔

trading bot کو کتنی RAM اور CPU درکار ہوتی ہے؟

زیادہ تر single-strategy bots network-bound ہوتے ہیں اور events کے درمیان idle رہتے ہیں۔ جب آپ tick history کو process میں رکھتے ہیں یا local database چلاتے ہیں تو memory رکاوٹ بن سکتی ہے۔ اس لیے اندازہ لگانے کے بجائے free -h اور journal میں OOM kill messages دیکھیں۔

exchange API timestamp error کے ساتھ requests کیوں مسترد کرتی ہے؟

request timestamp، exchange کی منظور شدہ window سے باہر ہے۔ clock drift اور request delays دونوں اہم ہیں۔ chrony install کریں، تصدیق کریں کہ chronyc tracking میں معمولی System time offset اور synchronised leap status ظاہر ہو، اور root delay اور dispersion بھی چیک کریں۔ machine کو UTC پر set کرنے سے displayed times یکساں رہتے ہیں، لیکن clock drift درست نہیں ہوتی۔ API key rotate کرنے سے clock کا مسئلہ حل نہیں ہوتا۔

میں اپنے bot کو رات کے وقت میرے علم کے بغیر بند ہونے سے کیسے روک سکتا ہوں؟

اسے systemd کے تحت Restart=always اور StartLimitIntervalSec=0 کے ساتھ چلائیں، تاکہ crash loop start rate limit تک پہنچنے کے بجائے retry کرتا رہے۔ پھر heartbeat شامل کریں جو ہر کامیاب loop کے اختتام پر bot بھیجتا ہے۔ restart process کو سنبھالتا ہے۔ heartbeat اس صورت کا پتا دیتا ہے جب process زندہ ہو لیکن stuck ہو۔

کیا میں bot اور اپنی monitoring ایک ہی VPS پر چلا سکتا ہوں؟

آپ چلا سکتے ہیں، لیکن جس دن اس کی ضرورت ہو گی monitoring آپ کو غلط معلومات دے گی، کیونکہ bot کو بند کرنے والا outage monitor کو بھی بند کر دے گا۔ Alerting کو الگ machine پر رکھیں، اور بہتر ہے کہ وہ مختلف provider یا region میں ہو۔ Bot کے server کو صرف bot اور اس کے logs کے لیے استعمال کریں۔

کیا یہ مضمون مفید تھا؟