गाइडटेस्ट के नतीजे

सिनेरियो गाइड के टेस्ट नतीजे

2026-09-07 को हमने Lizard CLI 0.3.92 के साथ एक अलग टेस्ट प्रोजेक्ट में इन गाइड की जाँच की। ये नतीजे Lizard CLI 4 (17 सितंबर 2026) और सितंबर 2026 के अंत में बिल्ड के मौजूदा बिल्डर पर जाने से पहले के हैं, और तब से हमने इन्हें दोबारा नहीं चलाया है। ऐप की जाँच, बिल्ड की स्थिति से अलग है। टेस्ट में गाइड की ही कमांड इस्तेमाल की गईं, बस प्रोजेक्ट का नाम अलग था और GitHub उदाहरण के लिए डॉक्यूमेंटेशन की टेस्ट ब्रांच ली गई।

गाइडनतीजाजाँच
रिमोट MCPलोकल और क्लाउड दोनों में पासहेल्थ 200; टोकन न होने और गलत टोकन पर 401; ऑथेंटिकेटेड GET पर 405; रिजेक्ट किए गए Origin पर 403; initialize, tools/list और tools/call; पब्लिक HTTPS पर नतीजा 5
कोडिंग एजेंट: अपलोडपासlizard up, हेल्थ 200, डेटाबेस से आया रिस्पॉन्स 200, अनजान रूट पर 404; सर्विस रीस्टार्ट के बाद भी Postgres की अपडेट की गई रो बनी रही
कोडिंग एजेंट: GitHubपास--no-deploy के साथ रिपॉज़िटरी अटैच की गई; redeploy से पहले ब्रांच, रूट डायरेक्टरी और एनवायरनमेंट कॉन्फ़िगर किए गए; पब्लिक ऐप ने Postgres की वही मौजूदा रो पढ़ी
Redis वर्करपासपोर्ट 0; जॉब एनक्यू और नतीजा; रीस्टार्ट के बाद भी नतीजा बना रहा; रीस्टार्ट के बाद नया जॉब; स्टार्टअप पर एक अधूरी प्रोसेसिंग एंट्री रिकवर हुई
Telegram बॉटसिर्फ़ लोकल टेस्टसात मॉक टेस्ट अपडेट, फ़ेल हुई सेंडिंग, टोकन जाँच और webhook मना करने को कवर करते हैं। असली टोकन, चैट और क्लाउड में echo टेस्ट अभी बाकी है

वर्ज़न

MCP कंटेनर में Node.js 22.23.2 और MCP TypeScript SDK 1.30.0 चल रहे थे। कोडिंग-एजेंट उदाहरण pg 8.16.3 इस्तेमाल करता है और PostgreSQL 18.4 चला रहे Managed Postgres से जुड़ा था। वर्कर कंटेनर में Python 3.13.15 और redis-py 6.4.0 चल रहे थे। डिपेंडेंसी लॉकफ़ाइल या सटीक requirements उदाहरणों के साथ ही रखी हैं और अब भी इन्हीं वर्ज़न को पिन करती हैं; नए रिलीज़, जैसे MCP TypeScript SDK 1.32.1, टेस्ट नहीं किए गए हैं।

स्कोप

MCP जाँच उदाहरण के stateless HTTP ट्रांसपोर्ट और फ़िक्स्ड bearer टोकन को कवर करती है। इससे OAuth कम्पैटिबिलिटी, ब्राउज़र सपोर्ट, लंबी स्ट्रीमिंग या लोड क्षमता साबित नहीं होती। टोकन एक घंटे बाद एक्सपायर हो जाता है।

GitHub जाँच में डॉक्यूमेंटेशन ब्रांच और _examples/agent-app डायरेक्टरी इस्तेमाल की गई। कोडिंग-एजेंट टेस्ट पब्लिक DATABASE_URL से जुड़ा था; गाइड अब DATABASE_PRIVATE_URL इस्तेमाल करती है, जिसका अभी तक क्लाउड में कोई रन नहीं हुआ है। GitHub जाँच में साफ़ तौर पर किया गया रीडिप्लॉय टेस्ट हुआ; प्राइवेट रिपॉज़िटरी की हर परमिशन सेटिंग या हर webhook इवेंट टेस्ट नहीं हुआ।

Redis रिकवरी जाँच में एक कंज़्यूमर को रीस्टार्ट करने से पहले एक अधूरी प्रोसेसिंग एंट्री डाली गई। इसमें Redis का फ़ेल होना, कई वर्कर या exactly-once बाहरी इफ़ेक्ट टेस्ट नहीं हुए। डेटाबेस जाँच सिर्फ़ यह दिखाती है कि ऐप रीस्टार्ट के बाद भी डेटा बना रहता है (persistence); यह बैकअप या डिज़ास्टर रिकवरी की जाँच नहीं है।

टेस्ट सर्विसेज़ के रनटाइम लॉग टेल शुरू में खाली थे। बाद में वर्कर की लाइव लॉग स्ट्रीम में नया प्रोसेस किया गया जॉब दिखा। काम पूरा होने का पैमाना HTTP, MCP क्लाइंट और जॉब के नतीजे की जाँच को मानें; सिर्फ़ खाली लॉग टेल से न सफलता साबित होती है, न विफलता।

Telegram उदाहरण को क्लाउड में वेरिफ़ाइड नहीं माना गया है। उसका प्रीफ़्लाइट बॉट का webhook बदले बिना getMe और getWebhookInfo पढ़ता है। उसका पोलिंग लूप चालू करने से पहले एक अलग टेस्ट बॉट इस्तेमाल करें।

16 रेसिपी वाले अलग फ़्रेमवर्क बैच के लिए फ़्रेमवर्क टेस्ट के नतीजे देखें। CLI आर्काइव और फ़ेल बिल्ड के एग्ज़िट कोड की सीमाओं के लिए ज्ञात समस्याएँ देखें।

अपडेट: