एक स्क्रैपर उस तरह की चीज़ है जिसे आप एक बार शुरू करते हैं और हफ़्तों चलता चाहते हैं — एक क़ीमत मॉनिटर, एक शोध क्रॉल, एक डेटासेट जो रातभर भरता है। वह आपके लैपटॉप का नहीं, और बहुत से लोगों के लिए एक ऐसे होस्ट का भी नहीं जो आपको एक शेल देने से पहले एक पासपोर्ट और एक कार्ड चाहता है। एक VPS जिसके लिए आप एक ईमेल से साइन अप करते और क्रिप्टो में चुकाते हैं, काम में फ़िट बैठता है: हरदम चालू, निजी, और आपका।
यहाँ है इसे किस पर चलाएँ, इसे कैसे सेट करें, और IP के बारे में एक ईमानदार बात जिसे ज़्यादातर गाइड छोड़ती हैं।
बिना-KYC यहाँ असल में क्यों मायने रखता है
ज़्यादातर होस्ट आपके अकाउंट को एक ID और एक कार्ड से बाँधते हैं, और इसे लॉग करते हैं। एक डेटा-संग्रह प्रोजेक्ट के लिए वह एक निजता लीक है जो आपको नहीं चाहिए — आपका इंफ़्रास्ट्रक्चर आपके नाम और आपकी स्क्रैपिंग गतिविधि से जुड़ जाता है। एक ईमेल और क्रिप्टो से चुकाना प्रोजेक्ट को आपकी पहचान से अलग रखता है। यही इस दर्शक के लिए असली आकर्षण है, क़ीमत से ज़्यादा।
यह बस कम घर्षण भी है: एक एक-बार के क्रॉल के लिए एक बॉक्स खड़ा करें, इसे चलने दें, इसे तोड़ें — हर बार कोई अकाउंट-सत्यापन नाच नहीं।
कौन सा आकार — और आप कैसे भुगतान करते हैं
साइज़िंग पूरी तरह इस पर निर्भर है कि आप कैसे स्क्रैप करते हैं:
- सादा HTTP (Scrapy,
requests+ BeautifulSoup)। हल्का। 1–2 GB RAM बहुत सारे समवर्ती अनुरोध संभालता है क्योंकि आप कुछ रेंडर नहीं कर रहे। - हेडलेस ब्राउज़र (Playwright, Puppeteer, Selenium)। भूखा। हर Chromium इंस्टेंस 300–700 MB खाता है, तो 4 GB एक समझदार तल है, अगर आप कई समानांतर चलाते हैं तो ज़्यादा। यही सामान्य वजह है कि एक स्क्रैपिंग बॉक्स को असली RAM चाहिए।
भुगतान पर: एक ईमेल से साइन अप करें और Base या Ethereum पर USDC या USDT में चुकाएँ — कोई कार्ड नहीं, कोई दस्तावेज़ नहीं। कार्ड भी काम करता है, पर ऑन-रैंप की ~$27 न्यूनतम है, तो एक सस्ते प्लान के लिए एक छोटा बैलेंस एक बार भरना और उससे निकलना आसान है।
सर्वर के लिए NAT काफ़ी है — एक स्क्रैपर सिर्फ़ आउटबाउंड कॉल करता है। आप एक डेडिकेटेड IP सिर्फ़ तब चुनेंगे अगर आप कुछ इनबाउंड भी होस्ट करें (एक API जो आपके एकत्रित डेटा को सर्व करे)।
इसे चलाना
SSH करें और अपनी टूलचेन सेट करें। एक हेडलेस-ब्राउज़र उदाहरण, चूँकि वह कठिन मामला है:
sudo apt update && sudo apt install -y python3-venv
mkdir ~/scraper && cd ~/scraper
python3 -m venv venv && source venv/bin/activate
pip install playwright && playwright install --with-deps chromium
# या एक हल्का स्टैक: pip install scrapy beautifulsoup4 httpx
# scrape.py — हेडलेस फ़ेच
from playwright.sync_api import sync_playwright
with sync_playwright() as p:
b = p.chromium.launch()
page = b.new_page()
page.goto("https://example.com")
print(page.title())
b.close()
एक क्रॉल के लिए जो घंटों चलता है, इसे एक SSH सत्र में न छोड़ें — इसे एक systemd सेवा में लपेटें (या एक झटपट रन के लिए tmux) ताकि यह डिस्कनेक्ट और रीबूट झेले, वही पैटर्न जो किसी भी प्रोसेस को ज़िंदा रखता है। अगर एक AI एजेंट स्क्रैप चला रहा है, यह MCP पर बॉक्स भी ख़ुद किराए पर ले सकता है।
IP के बारे में ईमानदार हिस्सा
यहीं ज़्यादातर "स्क्रैपिंग के लिए सबसे अच्छा VPS" पोस्ट ओवरसेल करती हैं। एक VPS आपको एक आउटबाउंड IP वाला एक सर्वर देता है। यह स्क्रैपर चलाने के लिए उत्तम है — एक साफ़, समर्पित मशीन जो हमेशा चालू है। यह एक प्रॉक्सी सेवा नहीं है, और एक IP आपको एक ऐसे लक्ष्य के इर्द-गिर्द नहीं ले जाएगा जो पते से ब्लॉक या दर-सीमित करता है।
अगर आप पैमाने पर स्क्रैप कर रहे हैं और ब्लॉक से टकरा रहे हैं, फ़िक्स आपके अनुरोधों के सामने एक अलग प्रॉक्सी/रोटेशन प्रदाता है — VPS आपका कोड चलाता है, प्रॉक्सी परत IP संभालती है। दो अलग काम। जो कोई आपको बताता है कि एक अकेला बॉक्स बड़े पैमाने की IP ब्लॉकिंग हल करता है वह आपको कुछ बेच रहा है।
और ज़िम्मेदारी से स्क्रैप करें: robots.txt का सम्मान करें, अपने अनुरोध की दर थ्रॉटल करें, और जो आप एकत्रित कर रहे उसकी शर्तों के भीतर रहें। एक विनम्र स्क्रैपर एक लालची से कहीं कम ब्लॉक होता है।
चेतावनियाँ
- सिर्फ़-CPU, एक क्षेत्र (जर्मनी)। स्क्रैपिंग लॉजिक और हेडलेस ब्राउज़र के लिए ठीक; अगर आपको ख़ासकर एक GPU या एक ख़ास भू-स्थान चाहिए, यह पहले जानें।
- ब्राउज़र के साथ RAM देखें। एक लीक करता Playwright लूप बॉक्स खा जाएगा — पेज और संदर्भ बंद करें, समवर्तीता कैप करें।
- यह एक सर्वर है, एक जादुई गुमनामकर्ता नहीं। बिना-KYC अकाउंट को निजी रखता है; आपके अनुरोध लक्ष्यों को कैसे दिखते हैं यह आप पर है (और आपकी प्रॉक्सी परत पर)।
उसके भीतर, एक बिना-KYC VPS एक स्क्रैपर के लिए एक साफ़, निजी घर है जो बस चलता रहता है। एक प्लान चुनें, क्रिप्टो में चुकाएँ, और अपने कलेक्टर को मिनटों में ऑनलाइन करें।
गुमनाम VPS होस्टिंग: इसका वास्तव में क्या मतलब है (और इसकी सीमाएँ) →
टिप्पणियाँ
अभी तक कोई टिप्पणी नहीं। पहले बनें।