SSD Nodes Learn Hosting plans →
تعلیمی Matt Connorتحریر: Matt Connor · اپ ڈیٹ شدہ 2026-10-24

Fable method: کسی بھی model کے لیے agent skills

Sahir619/fable-method کی ہر file کا کردار، Claude Fable 5 کے طریقوں کی منتقلی، اور VPS پر method کے ساتھ یا بغیر A/B ٹیسٹ میں tool calls اور لاگت ناپنے کا طریقہ جانیں۔

Fable method کا اصل دعویٰ

Fable method چند agent skills پر مشتمل ہے۔ یہ ایک model کے کام کرنے کے طریقوں کو ایک مرتب procedure کی صورت میں لکھتا ہے، تاکہ کوئی دوسرا model اسی procedure کو چلا سکے۔ اس repo کا نام Sahir619/fable-method ہے اور یہ MIT licensed ہے۔ اس کی اپنی ایک سطری وضاحت یہ ہے: "Claude Fable 5 نے کیسے کام کیا، اسے ایسی skills میں ڈھالا گیا ہے جنہیں کوئی بھی model چلا سکتا ہے، اور ساتھ وہ eval بھی ہے جو اس دعوے کو جانچتا رہتا ہے۔" جانچنے کے قابل دعویٰ اس جملے کا دوسرا حصہ ہے۔

کیا کوئی text file واقعی یہ محفوظ کر سکتی ہے کہ کسی مخصوص model نے کیسے سوچا، اس کی تصدیق Anthropic سے باہر کوئی نہیں کر سکتا۔ لیکن جب کوئی کم لاگت والا model وہ text file پڑھتا ہے تو کیا اس کا رویہ مختلف ہوتا ہے، یہ آپ خود ایک VPS پر ایک دوپہر میں جانچ سکتے ہیں۔ ذیل کی پوری مشق کا مقصد یہی پیمائش ہے: ایک ہی task کو دو مرتبہ چلانا، method کے ساتھ اور اس کے بغیر، اور tool calls اور لاگت گننا۔

اگر skill کی اصطلاح آپ کے لیے نئی ہے تو پہلے agent skill اصل میں کیا ہوتی ہے پڑھیں۔ یہ ایک folder ہوتی ہے جس میں SKILL.md file شامل ہوتی ہے، اور اس کے frontmatter description سے agent کو معلوم ہوتا ہے کہ body کب load کرنی ہے۔ جس model کے نام پر repo رکھا گیا ہے، اس کے بارے میں Claude Fable 5 کی لاگت اور اس کی موزوں استعمالات میں بتایا گیا ہے۔

Skills انسٹال کریں اور آزمائی گئی version کو pin کریں

انسٹال کرنے کے دو طریقے ہیں۔ Claude Code کے اندر plugin والا طریقہ دو commands پر مشتمل ہے:

/plugin marketplace add Sahir619/fable-method
/plugin install fable@fable-method

VPS پر، جہاں آپ disk پر pinned copy رکھنا چاہتے ہیں، پہلے repository کو clone کریں اور tag check out کریں:

git clone https://github.com/Sahir619/fable-method ~/fable-method
cd ~/fable-method
git checkout v1.4.0
bash install.sh
ls ~/.claude/skills

install.sh کو sudo کی ضرورت نہیں، کیونکہ یہ صرف $HOME/.claude/skills کے تحت لکھتا ہے۔ اس کے چلنے کے بعد ls ~/.claude/skills، fable-judge، fable-loop اور fable-method کی فہرست دکھاتا ہے۔ دیکھیں کہ کون سی چیز موجود نہیں۔ Repository میں چار skills شامل ہیں، لیکن v1.4.0 کا shell installer تین skills copy کرتا ہے۔ اس لیے standalone user کو fable-domain نہیں ملتا، جب تک وہ اسے دستی طور پر copy نہ کرے:

cp -r ~/fable-method/skills/fable-domain ~/.claude/skills/

Tag کو pin کریں، اور حاصل ہونے والے نتائج کے ساتھ tag بھی لکھ لیں۔ Changelog میں 2026-07-06 اور 2026-07-15 کے درمیان پانچ versions درج ہیں، 1.0.0 سے 1.4.0 تک، لیکن صرف چار tags بنائے گئے تھے: v1.0.0، v1.1.0، v1.2.0 اور v1.4.0۔ ان میں سے صرف v1.2.0 اور v1.4.0 بطور GitHub releases جاری ہوئے۔ v1.3.0 کا کوئی tag نہیں ہے؛ v1.4.0 کے release notes کے مطابق اس میں unreleased v1.3.0 کی تمام تبدیلیاں شامل ہیں۔ v1.4.0 نے نیا routing gate شامل کر کے خود method تبدیل کر دیا۔ اکتوبر 2026 تک v1.4.0 اب بھی جدید ترین tag ہے، لیکن main اس سے آگے بڑھ چکا ہے: 2026-10-03 کے ایک commit نے Codex install target شامل کیا اور install.sh کو چاروں skills copy کرنے کے قابل بنایا، مگر ابھی تک کسی tag میں یہ تبدیلی شامل نہیں ہوئی۔ اگر آپ کا control run rules کا ایک version پڑھتا ہے اور test run دوسرا، تو آپ نے کچھ بھی measure نہیں کیا۔

ماہارتوں میں سے ہر ایک ماڈل کو کیا کرنے کی ہدایت دیتی ہے

مرکزی فائل skills/fable-method/SKILL.md ہے۔ اس میں دو gates اور سات numbered steps ہیں، اور اس کے قواعد اتنے مخصوص ہیں کہ ان پر باقاعدہ بحث کی جا سکتی ہے۔

سب سے پہلے triviality gate آتا ہے: جب تبدیلی صرف ایک file کو متاثر کرے، تقریباً 10 lines سے کم میں مکمل ہو، کوئی نیا behavior شامل نہ کرے، اور آپ کو پہلے ہی معلوم ہو کہ کیا تبدیل کرنا ہے، تو بلا ضرورت رسمی کارروائی کے براہ راست کام کریں۔ پورا الگ skill صرف اسی رجحان پر مبنی ہے، Ponytail، جو agent کو کام کرنے والی سب سے چھوٹی تبدیلی کی طرف لے جاتا ہے، اور اس کا بنیادی rule اتنا مختصر ہے کہ کسی چیز کو install کیے بغیر اسے اپنی instructions میں copy کیا جا سکتا ہے۔ اس کے بعد fit gate آتا ہے، جو اس بات کے مطابق request کو route کرتا ہے کہ answer کہاں موجود ہے: وہ sources جنہیں آپ کھول سکتے ہیں، وہ technique جس پر پہلے research کرنا ضروری ہے، یا آپ کا اپنا inference، جسے fact کے طور پر پیش کرنے کے بجائے low confidence کے طور پر نشان زد کرنا ضروری ہے۔ یہ درمیانی branch صرف اسی وقت کام کرتی ہے جب agent واقعی web تک پہنچ سکے۔ locked-down VPS پر اس کے لیے agent کو اپنا search backend دینا پڑتا ہے، مثلاً ایک self-hosted SearXNG instance جسے JSON search tool کے طور پر expose کیا گیا ہو۔

پھر loop آتا ہے: request کو classify کریں، done کی تعریف کریں، evidence جمع کریں، فیصلہ کریں، action لیں، verify کریں، اور report کریں۔ Step 2 کہتا ہے کہ files منتخب کرنے سے پہلے directory کی listing کر کے صورت حال سمجھیں، recall کے مقابلے میں primary sources کو ترجیح دیں، اور جب مسلسل دو lookups میں کوئی نئی معلومات نہ ملے تو رک جائیں۔ Step 4 کہتا ہے کہ behavior تبدیل کرنے والی کسی بھی edit سے پہلے INTENT: line لکھیں۔ اس میں code کے کام، failing check کی توقع، اور spec کی بات کا نام ہونا چاہیے۔ اگر یہ تینوں ایک دوسرے سے متفق نہ ہوں تو بالکل edit نہ کریں، کیونکہ اصل finding یہی اختلاف ہے۔ Step 5 retries کی حد مقرر کرتا ہے: اسی issue پر fix-and-verify کے تین ناکام cycles کے بعد رک جائیں اور اصل output واپس دیں۔

فائل کا سب سے زیادہ testable حصہ اس کے چار report tokens ہیں۔ Behavior change کے ساتھ INTENT: line دینی ہوتی ہے۔ Outward-facing action کے ساتھ AUTH: user said "<exact words>" دینا ہوتا ہے، اور user کا حوالہ شامل کرنا ہوتا ہے، کیونکہ repo واضح طور پر کہتا ہے کہ documentation authorization نہیں ہوتی۔ Prescribed لیکن نہ کیے گئے action کے ساتھ PENDING: line دینی ہوتی ہے۔ Fixed defect کے ساتھ TWINS: searched <pattern> - found <N> other sites دینا ہوتا ہے۔ Method کے بارے میں کچھ بھی ماننے کی ضرورت نہیں۔ صرف یہ check کرنا کافی ہے کہ جہاں یہ چار strings درکار ہوں وہاں موجود ہیں یا نہیں۔ اسی وجہ سے پورا طریقہ محض تاثرات کے بجائے measurable بن جاتا ہے۔

fable-loop اسی method کو چار stages میں orchestration کے طور پر چلاتا ہے: parallel evidence subagents کے ساتھ plan بنانا، main thread پر execute کرنا، ایک سے تین attacker subagents کے ساتھ verify کرنا، جن میں ہر ایک مختلف lens استعمال کرتا ہے، پھر audit اور report کرنا۔ اس میں evidence اور attacker roles کے لیے کم لاگت والے models، جبکہ decisions اور edits کے لیے زیادہ مضبوط model فرض کیا گیا ہے۔

fable-judge وہ حصہ ہے جسے باقی سب چھوڑ دینے کے باوجود install کرنا مفید ہے۔ اس کا مؤقف ہے کہ "report claims کا مجموعہ ہے، evidence نہیں۔" یہ مکمل report سے claims جمع کرتا ہے، git diff اور git status سے ground truth قائم کرتا ہے، report میں درج ہر verification دوبارہ چلاتا ہے، اور fraud کی نامزد فہرست تلاش کرتا ہے: کمزور کیے گئے checks، false completion، scope creep، unauthorized action، spec betrayal، اور باقی رہ جانے والا debris۔ یہ VERIFIED، VERIFIED WITH CAVEATS، یا REFUTED واپس کرتا ہے، اور جس چیز کو reproduce نہ کر سکے اسے UNVERIFIABLE نشان زد کرتا ہے، اسے کامیاب فرض نہیں کرتا۔ Installer کی آخری line بھی اسی کی طرف اشارہ کرتی ہے: "Try it: open Claude Code and type /fable-judge after any agent claims work is done." اگر آپ یہ check بعد میں چلانے کے بجائے کام کے اندر شامل کرنا چاہیں تو Old Coder skill agent سے ایک SPEC منظور کرواتا ہے اور ایک EVIDENCE report تیار کرواتا ہے جسے آپ خود دوبارہ چلا سکتے ہیں۔ اس میں coverage کے بجائے mutation testing اس proof کے طور پر استعمال ہوتی ہے کہ کوئی test واقعی regression پکڑ لے گا۔

fable-domain trap fixtures اور smoke evals کے ساتھ domain adapter bundles بناتا ہے۔ آٹھ adapters ship ہوتے ہیں: marketing، research، data analysis، business and ops، finance، legal and compliance، design and UX، اور devops۔ Medical اور clinical کام کو جان بوجھ کر adapter کے بغیر چھوڑا گیا ہے۔

کون سے حصے دوسرے model پر منتقل کیے جا سکتے ہیں، اور کون سے نہیں

repo اس کا براہِ راست جواب AGENTS.md میں دیتا ہے، جو اس طرح شروع ہوتا ہے: "Portable version for any coding agent or harness (Codex, Cursor, aider, a raw system prompt). Identical method to SKILL.md; paste this file into your agent instructions or drop it at your repo root as AGENTS.md." یہ تقریباً 2,600 الفاظ پر مشتمل ہے اور اسی gates، steps اور modes کو برقرار رکھتا ہے۔ اگر آپ پہلے ہی repo-root instruction files رکھتے ہیں تو AGENTS.md اور HUMAN.md convention بتاتا ہے کہ یہ file کہاں رکھی جائے گی اور اسے کون پڑھے گا۔

دو حصے آسانی سے منتقل ہو جاتے ہیں۔ method text ایک ordered prompt ہے جس میں model-specific code نہیں، اس لیے ہر وہ model جو instructions پر عمل کر سکتا ہے، اس method پر بھی عمل کر سکتا ہے۔ repo کا بیان کردہ thesis یہ ہے کہ یہ منتقلی model tier کے الٹ تناسب سے ہوتی ہے۔ judge بھی منتقل ہو جاتا ہے، بشرطیکہ agent کے پاس shell اور repository موجود ہو، کیونکہ اس کا تمام کام git diff اور ان commands کو دوبارہ چلانے پر مشتمل ہے جنہیں قاری بھی چلا سکتا ہے۔

ایک حصہ آسانی سے منتقل نہیں ہوتا۔ fable-loop فرض کرتا ہے کہ harness parallel subagents چلا سکتا ہے اور انہیں مختلف models تک route کر سکتا ہے۔ subagents کے بغیر agent یہ stages ایک ہی model پر serially چلاتا ہے۔ اس سے وہ parallelism اور cost saving ختم ہو جاتی ہے جس نے اس design کا جواز فراہم کیا تھا۔ باقی fable-method رہ جاتا ہے، جس میں صرف اضافی vocabulary شامل ہوتی ہے۔

دو چھوٹی باتیں harness-specific ہیں اور آسانی سے نظرانداز ہو سکتی ہیں۔ /fable-method trigger ایک Claude Code slash command ہے، اس لیے دوسرے harness پر method کو اس کی وضاحت کر کے invoke کرنا ہوگا۔ اسی طرح SKILL.md frontmatter description agent کو body صرف اسی وقت load کرنے دیتی ہے جب وہ task سے match کرے۔ اس کا مطلب ہے کہ installed skill کے فعال ہونے تک اس کی لاگت تقریباً نہ ہونے کے برابر رہتی ہے۔ اس کے بجائے AGENTS.md کو system prompt میں paste کریں تو وہ 2,600 الفاظ آپ کی بھیجی جانے والی ہر request میں شامل رہیں گے، خواہ task ایک سطری typo fix ہو یا refactor۔ یہ لاگت کا حقیقی فرق ہے، اور تقریباً یہی بنیادی وجہ ہے کہ skill packaging موجود ہے۔

VPS پر A/B ٹیسٹ کیسے کریں: ایک ہی کام دو مرتبہ

دو یکساں working copies تیار کریں تاکہ کسی بھی run کو دوسری copy کی edits نظر نہ آئیں۔ YOUR_ORG/YOUR_REPO کو اس repository سے تبدیل کریں جس کے خلاف آپ test کرنا چاہتے ہیں؛ دونوں clones ایک ہی commit سے بننے چاہییں۔

sudo apt update && sudo apt install -y git jq
git clone https://github.com/YOUR_ORG/YOUR_REPO ~/ab/control
git clone https://github.com/YOUR_ORG/YOUR_REPO ~/ab/method

ایسا task منتخب کریں جس کا outcome رائے کے بغیر مشاہدہ کیا جا سکے: ایسا failing test جس کا pass ہونا ضروری ہو، یا ایسی script جسے 0 exit code کے ساتھ مکمل ہونا چاہیے۔ مبہم task سے موازنہ بھی مبہم ہو جاتا ہے، کیونکہ آپ results کے بجائے prose کی grading کرنے لگتے ہیں۔

Control arm کو --bare کے ساتھ چلائیں۔ یہ hooks، skills، plugins اور CLAUDE.md کی auto-discovery چھوڑ دیتا ہے۔ یہی flag اسے control بناتا ہے: پہلے install کیے گئے skills اس میں شامل نہیں ہو سکتے۔ Bare mode آپ کا subscription login استعمال نہیں کرتا، اس لیے پہلے Claude Console سے API key مقرر کریں۔

export ANTHROPIC_API_KEY=sk-ant-...
task="Make tests/test_parser.py pass without editing the test file."

cd ~/ab/control
claude --bare -p "$task" \
  --allowedTools "Read,Edit,Bash" \
  --output-format stream-json --verbose > ~/ab/control.jsonl

Method arm میں وہی command استعمال کریں اور ایک flag شامل کریں۔ یہ portable method کو system prompt کے اضافے کے طور پر load کرتا ہے:

cd ~/ab/method
claude --bare -p "$task" \
  --append-system-prompt-file ~/fable-method/AGENTS.md \
  --allowedTools "Read,Edit,Bash" \
  --output-format stream-json --verbose > ~/ab/method.jsonl

Binary، model، tools اور starting tree سب یکساں رہنے چاہییں۔ صرف ایک flag مختلف ہے۔ بامعنی موازنے کے لیے یہی ضروری ہے۔

یہ design method text کی پیمائش کرتا ہے۔ یہ skill packaging کی پیمائش نہیں کرتا، کیونکہ وہ الگ سوال ہے۔ Packaging کی پیمائش کے لیے --bare ہٹا دیں، اوپر دیے گئے طریقے کے مطابق skills install کریں، اور skill name کو prompt string میں شامل کریں، کیونکہ user-invoked skills print mode میں expand ہوتے ہیں: claude -p "/fable-method $task"۔ اگر visible behavior یکساں بھی نظر آئے، تو cost profile کے system-prompt arm سے مختلف ہونے کی توقع رکھیں۔

مراحل اور لاگت گننا

دونوں رنز نے JSON events کا stream لکھا۔ آخری سطر ایک result message ہے، جس میں آخری متن، لاگت اور session metadata شامل ہے۔ اسے ایک بار print کریں اور اس کے fields کو script میں استعمال کرنے سے پہلے پڑھیں، کیونکہ field names مختلف Claude Code releases میں تبدیل ہو سکتے ہیں۔

tail -1 ~/ab/control.jsonl | jq .

ہر run کی لاگت اسی سطر سے حاصل ہوتی ہے، اور موازنہ اسی number سے کریں:

for f in ~/ab/control.jsonl ~/ab/method.jsonl; do
  printf '%s ' "$f"
  jq -r 'select(.type=="result") | .total_cost_usd' "$f"
done

طے کیے گئے مراحل اسی file میں tool calls گن کر معلوم ہوتے ہیں:

jq -r 'select(.type=="assistant") | .message.content[]? | select(.type=="tool_use") | .name' \
  ~/ab/control.jsonl | sort | uniq -c | sort -rn

دونوں files کے لیے یہ عمل دہرائیں۔ فرق کی نوعیت totals سے زیادہ معلومات فراہم کرتی ہے۔ اگر کوئی method run زیادہ files پڑھتا اور کم edits کرتا ہے تو وہ method کی ہدایات کے مطابق کام کر رہا ہے، اور یہی وہ trade-off ہے جس کے لیے آپ لاگت ادا کر رہے ہیں۔ اگر کسی method run نے اتنے ہی edits کیے لیکن لاگت چالیس فیصد زیادہ رہی تو اس task میں اس اضافی لاگت سے کوئی فائدہ نہیں ہوا۔

ان numbers کے بارے میں دو احتیاطیں ضروری ہیں۔ پہلی، ~/.claude/projects/ کے تحت session transcripts سے output_tokens کو جمع کر کے اسے total نہ سمجھیں۔ یہ per-message usage blocks streaming کے دوران لیے گئے snapshots ہوتے ہیں، اور ان کے undercount کرنے کی متعدد reports موجود ہیں۔ result line وہ number ہے جس پر اعتماد کرنا چاہیے۔ دوسری، ہر arm کے لیے صرف ایک run ایک anecdote ہے۔ کسی فرق کو معتبر سمجھنے سے پہلے اسی task پر ہر arm کو تین یا چار بار run کریں، کیونکہ اسی task پر اسی agent کے دو runs بھی ایک دوسرے سے مختلف نتائج دے سکتے ہیں۔ spend کا طویل مدتی جائزہ لینے کے لیے Claude Code spend track کرنے والے tools اور Claude Code tokens کیسے count کرتا ہے یہ واضح کرتے ہیں کہ cache lines raw counts پر کیوں غالب آتی ہیں۔

یقینی بنائیں کہ unattended run کے دوران agent کسی ایسی چیز تک رسائی حاصل نہ کر سکے جس کی آپ کو حفاظت کرنی ہے۔ VPS پر Claude Code محفوظ طریقے سے چلانا user account اور permission flags کا احاطہ کرتا ہے۔

ریپو کی اپنی eval کو دیانت داری سے پڑھیں

README کی سرخی ہے: "Fifteen eval rounds, more than 260 agent runs, blind LLM judges that verify by diffing and executing." یہ تقریباً کسی بھی skill repo کی جانب سے فراہم کیے جانے والے شواہد سے زیادہ ہے، اور eval/RESULTS.md کو ہر round کے مطابق لکھا گیا ہے، جبکہ failures بھی برقرار رکھے گئے ہیں۔ تاہم جب آپ سرخی والی rows کے پیچھے موجود انفرادی cells دیکھتے ہیں تو یہ سرخی کے عدد سے ظاہر ہونے کے مقابلے میں کم جامع معلوم ہوتی ہے۔

چارٹRuns per cell behind the repo's headline eval rows, v1.4.0
اس چارٹ کے پیچھے کا ڈیٹا
[
  {
    "label": "Haiku, spec-vs-test conflict trap",
    "runs": 4,
    "notes": "bare 0 of 4, with method 4 of 4"
  },
  {
    "label": "Sonnet, same conflict trap",
    "runs": 2,
    "notes": "bare flags it then sides with the wrong test, with method ideal action both runs"
  },
  {
    "label": "Haiku, planted-fraud report, fable-judge",
    "runs": 2,
    "notes": "bare 4 and 3 of 5 frauds caught, with method 5 of 5 both runs"
  },
  {
    "label": "Haiku, marketing brand-rules trap",
    "runs": 2,
    "notes": "bare 1 of 2 runs, with method 2 of 2"
  }
]

ان 4 rows میں سب سے بڑا حصہ 4 runs پر مبنی ہے۔ باقی تین rows میں سے ہر ایک 2 runs پر مبنی ہے۔ repo خود بھی log کے آغاز میں درج مستقل limitations میں یہی بات کہتا ہے: "Small n throughout (1-4 runs per cell), LLM judges (blind where multiple outputs are compared, but built on the same frontier model that appears as a baseline), synthetic fixtures, research ground truth only as current as its run date." مزید براہ راست الفاظ میں: "This log exists so method edits are tested, not so anyone mistakes it for a benchmark."

اس بات کا اعتراف کریں۔ جو author اپنا n شائع کرتا ہے اور یہ مسئلہ بھی واضح کرتا ہے کہ اس کا judge اسی model پر مبنی ہے جو baseline کے طور پر استعمال ہوتا ہے، وہ اس category کے عمومی معیار سے زیادہ دیانت دار ہے۔ ان اعداد کو اس بات کے ثبوت کے طور پر پڑھیں کہ author نے واقعی tests چلائے اور failures محفوظ رکھے۔ آپ کے codebase کے بارے میں معلومات آپ کا اپنا A/B test ہی فراہم کرے گا۔

README یہ بھی واضح کرتا ہے کہ یہ method کہاں کوئی فائدہ نہیں دیتا، اور یہی اس کا سب سے مفید paragraph ہے۔ اس میں capable models پر عام چھوٹے tasks کے لیے کسی اضافی فائدے کا اندراج نہیں ہے۔ اس میں کہا گیا ہے کہ "the method cannot make a model's facts fresher; bare frontier wins knowledge-heavy research". یہ بھی واضح کیا گیا ہے کہ فائدہ "traps (authority conflicts, false completion claims, weak executors, unattended runs), not everywhere" میں ظاہر ہوتا ہے۔ اگر آپ کا agent work کسی مضبوط model پر آپ کی نگرانی میں چھوٹی edits تک محدود ہے تو کسی فرق کی توقع نہ کریں۔ اگر یہ کوئی کم لاگت والا model ہے جو unattended چل رہا ہے تو فرق اسی صورت میں ظاہر ہونا چاہیے، اور اسی وجہ سے Opus، Sonnet اور Haiku کے درمیان انتخاب بھی اسی فیصلے کا حصہ بن جاتا ہے۔

جہاں packaging محض cargo cult ہے

چار تنقیدیں قابلِ ذکر ہیں، اور ان میں سے کوئی بھی repo کو نظرانداز کرنے کی وجہ نہیں بنتی۔

پیش کردہ framing شواہد سے آگے نکل جاتی ہے۔ "How Claude Fable 5 worked" ایک model کے اندرونی طریقۂ کار کے بارے میں دعویٰ ہے، جس کی Anthropic سے باہر کوئی تصدیق نہیں کر سکتا، اور repo کا اپنا بنیادی جملہ بھی اس دعوے کو کمزور کرتا ہے: "The quality lives in the structure, the evidence, and the honesty, not in the model." اگر quality structure میں ہے تو provenance کی کہانی محض آرائش ہے۔ طریقۂ کار اپنی بنیاد پر قائم ہے اور اسے کسی origin myth کی ضرورت نہیں۔

چار skills مواد کی ضرورت سے زیادہ سطحی تقسیم ہیں۔ fable-loop، fable-method کے بڑے حصے کو orchestration کی اضافی تہہ کے ساتھ دوبارہ بیان کرتا ہے، اور ایسے harness میں جس میں subagents نہ ہوں، یہ دوبارہ fable-method تک محدود ہو جاتا ہے۔ دونوں files کو side by side پڑھیں، پھر دونوں install کریں۔

آٹھ domain adapters ایسی وسعت ہیں جس کا eval احاطہ نہیں کرتا۔ log میں آٹھ میں سے صرف دو کہیں ظاہر ہوتے ہیں: round 9 میں marketing اور round 12 میں devops۔ finance، legal، design اور data adapters کے ساتھ کوئی round شامل نہیں ہے۔ آپ کے field کے لیے adapter پھر بھی اچھا ہو سکتا ہے۔ تاہم یہ مصنف کا draft ہے، ایسی چیز نہیں جس نے کسی trap fixture میں کامیابی سے کام ثابت کیا ہو۔

اور v1.4.0 tag میں installer اس بارے میں repo سے متفق نہیں کہ وہ کیا ship کرتا ہے؛ یہ چار skills میں سے تین کو ~/.claude/skills میں copy کرتا ہے۔ 2026-10-03 کو main پر موجود ایک commit نے تقریباً تین ماہ بعد یہ مسئلہ درست کیا، اور ابھی تک کسی tagged release میں یہ fix شامل نہیں ہے۔ یہ مسئلہ معمولی ہے۔ لیکن یہ اسی نوعیت کا gap بھی ہے جو بتاتا ہے کہ packaging کا کام کسی کے review کرنے سے زیادہ تیزی سے آگے بڑھا، اس لیے یہ بات یاد رکھیں کہ آپ اسے ایک وقت میں کتنا adopt کرنے کا فیصلہ کرتے ہیں۔

باقی سب کچھ چھوڑ دیں، مگر یہ چار اصول ضرور رکھیں

برانڈنگ ہٹا دیں تو بھی یہ چار اصول ہر agent کے ساتھ قابلِ عمل رہتے ہیں۔

  • اجازت کا اقتباس۔ کسی ناقابلِ واپسی یا بیرونی اثر رکھنے والے action کے لیے user کے اپنے الفاظ درکار ہیں، جو واضح طور پر ایک AUTH: لائن میں درج ہوں۔ جو agent اقتباس تلاش نہ کر سکے، وہ action انجام نہ دے۔
  • دوہری جانچ۔ کسی defect کو درست کرنے کے بعد پورے project میں اسی غلط construct کو تلاش کریں اور count رپورٹ کریں، چاہے count صفر ہی کیوں نہ ہو۔
  • مشاہدے سے verification۔ خراب build کے اوپر موجود کامیاب targeted check، failed verification ہے، pass نہیں۔
  • outcome-first reporting۔ جو کچھ skip کیا گیا ہو یا جس کی verification نہ ہوئی ہو، اسے خاموشی سے حذف کرنے کے بجائے caveat کے طور پر واضح کریں۔

ان چار اصولوں کو اپنانے پر کوئی لاگت نہیں آتی، اور آپ compliance کے لیے grep استعمال کر سکتے ہیں۔ وہیں سے شروع کریں، اوپر دیے گئے harness سے پیمائش کریں، پھر فیصلہ کریں کہ آیا repo کا باقی حصہ آپ کے context budget میں جگہ کا مستحق ہے۔ اگر آپ agent کو working method کے بجائے مستقل project context دینا چاہتے ہیں تو ایک DESIGN.md فائل جو agents کے edit کرنے سے پہلے پڑھتے ہیں اس کا تکمیلی طریقہ ہے۔

FAQ

کیا Fable method Claude کے علاوہ دوسرے models کے ساتھ بھی کام کرتا ہے؟

Method کا متن کرتا ہے۔ یہ ایک ordered prompt ہے جس میں model-specific code نہیں ہے، اور repo Codex، Cursor، aider یا raw system prompt کے لیے AGENTS.md بطور portable copy فراہم کرتا ہے۔ دو چیزیں منتقل نہیں ہوتیں۔ /fable-method اور /fable-judge، Claude Code کے slash commands ہیں، اس لیے دوسرے ماحول میں method کو بیان کر کے invoke کرنا ہوگا۔ اور fable-loop ایسے harness کو فرض کرتا ہے جو مختلف models پر parallel subagents چلا سکے؛ اس کے بغیر یہ serially چلتا ہے اور اضافی steps کے ساتھ fable-method فراہم کرتا ہے۔

کیا یہ skills چلانے سے زیادہ tokens خرچ ہوتے ہیں؟

ہاں، اور مقدار کا انحصار اس بات پر ہے کہ آپ انہیں کیسے load کرتے ہیں۔ Skills کے طور پر install ہونے پر body صرف اسی وقت load ہوتی ہے جب description task سے match کرے، اس لیے غیر متعلقہ request پر خرچ تقریباً نہ ہونے کے برابر ہوتا ہے۔ System prompt میں paste کرنے پر AGENTS.md کے تقریباً 2,600 words ہر request کے ساتھ شامل رہتے ہیں۔ Run خود بھی زیادہ خرچ کرتا ہے، کیونکہ method editing سے پہلے orientation، فیصلہ کرنے سے پہلے evidence، اور آخر میں حقیقی verification کا تقاضا کرتا ہے۔ اسے measure کریں: دونوں arms میں --output-format json کے ساتھ ایک ہی task چلائیں اور total_cost_usd field کا موازنہ کریں۔

fable-method کا کون سا version install کرنا چاہیے، اور اسے pin کیوں کرنا چاہیے؟

Install کرنے سے پہلے git checkout v1.4.0 چلائیں۔ یہ tag 2026-07-15 کا ہے اور October 2026 تک اب بھی newest tag ہے۔ اس سے پہلے تین tags آئے تھے (v1.0.0، v1.1.0 اور v1.2.0، جن میں v1.2.0 واحد سابقہ GitHub release تھا)، ایک v1.3.0 جو کبھی release نہیں ہوا اسے اس میں شامل کر دیا گیا، اور v1.4.0 نے routing rules ہی تبدیل کر دیے۔ main بھی مسلسل تبدیل ہوتا رہا ہے؛ October میں installer میں ایسی تبدیلی ہوئی جسے ابھی کوئی tag شامل نہیں کرتا۔ پیمائش کے دوران main کو track کرنے کا مطلب یہ ہے کہ آپ کا control run اور test run مختلف instructions پڑھ سکتے ہیں، جس سے comparison بے فائدہ ہو جاتا ہے۔ اپنے results کے ساتھ tag بھی record کریں۔

کیا repo میں موجود eval ایسا benchmark ہے جس پر میں اعتماد کر سکتا ہوں؟

اسے method کے change log کے طور پر دیکھیں، جیسا کہ اس کے author نے اسے بیان کیا ہے: "This log exists so method edits are tested, not so anyone mistakes it for a benchmark." File کے شروع میں limitations واضح کی گئی ہیں: ہر cell کے لیے 1 سے 4 runs، synthetic fixtures، اور ایسے LLM judges جو اسی frontier model پر بنائے گئے ہیں جو baseline کے طور پر بھی استعمال ہوتا ہے۔ Rounds حقیقی ہیں اور failed experiments بھی شامل رکھے گئے ہیں، جو زیادہ تر repos کے published مواد سے بہتر ہے۔ پھر بھی یہ اس بات کی measurement نہیں ہے کہ آپ کے codebase پر کیا ہوگا، اس لیے two-arm comparison خود چلائیں۔

کیا یہ مضمون مفید تھا؟