یک اسکرپر از آن دست چیزهایی است که یک بار شروعش میکنید و میخواهید هفتهها اجرا شود — یک پایشگر قیمت، یک خزش تحقیقاتی، یک مجموعهداده که شبانه پر میشود. این روی لپتاپ شما جایی ندارد، و برای خیلیها روی میزبانی هم که پیش از دادن یک شل، پاسپورت و کارت میخواهد جایی ندارد. یک VPS که با یک ایمیل ثبتنامش میکنید و با رمزارز پرداختش میکنید مناسب این کار است: همیشه روشن، خصوصی، و مال خودتان.
اینجا میبینید رویش چه چیزی اجرا کنید، چطور راهاندازیاش کنید، و یک چیز صادقانه دربارهی IPها که بیشتر راهنماها از رویش رد میشوند.
چرا بدون KYC اینجا واقعاً اهمیت دارد
بیشتر میزبانها حساب شما را به یک شناسه و یک کارت گره میزنند و ثبتش میکنند. برای یک پروژهی جمعآوری داده این یک نشت حریم خصوصی است که به آن نیاز ندارید — زیرساخت شما در نهایت به نام شما و فعالیت اسکرپینگتان پیوند میخورد. پرداخت با یک ایمیل و رمزارز پروژه را از هویتتان جدا نگه میدارد. این جذابیت واقعی برای این مخاطب است، بیشتر از قیمت.
همچنین صرفاً اصطکاک کمتری است: یک باکس برای یک خزش تکبار بالا بیاورید، بگذارید اجرا شود، پایینش بیاورید — بدون رقص تأیید حساب هر بار.
چه اندازهای — و چطور پرداخت میکنید
انتخاب اندازه کاملاً به این بستگی دارد که چطور اسکرپ میکنید:
- HTTP ساده (Scrapy،
requests+ BeautifulSoup). سبک. ۱ تا ۲ گیگابایت RAM از پس تعداد زیادی درخواست همزمان برمیآید چون چیزی رندر نمیکنید. - مرورگر headless (Playwright، Puppeteer، Selenium). گرسنه. هر نمونهی Chromium ۳۰۰ تا ۷۰۰ مگابایت میخورد، پس ۴ گیگابایت کف معقولی است، بیشتر اگر چند تا را بهموازات اجرا کنید. این دلیل معمول این است که یک باکس اسکرپینگ به RAM واقعی نیاز دارد.
دربارهی پرداخت: با یک ایمیل ثبتنام کنید و با USDC یا USDT روی Base یا Ethereum پرداخت کنید — بدون کارت، بدون مدارک. کارت هم جواب میدهد، اما درگاه ورود حداقلی حدود ۲۷ دلار دارد، پس برای یک پلن ارزان روانتر است که یک بار مقداری موجودی شارژ کنید و از آن برداشت کنید.
NAT برای سرور کافی است — یک اسکرپر فقط فراخوانهای خروجی میفرستد. یک IP اختصاصی را فقط زمانی انتخاب میکنید که چیزی ورودی هم میزبانی کنید (یک API که دادهی جمعآوریشدهتان را سرو میکند).
به راه انداختنش
با SSH وارد شوید و زنجیرهابزارتان را راهاندازی کنید. یک مثال مرورگر headless، چون همان مورد سختتر است:
sudo apt update && sudo apt install -y python3-venv
mkdir ~/scraper && cd ~/scraper
python3 -m venv venv && source venv/bin/activate
pip install playwright && playwright install --with-deps chromium
# یا یک پشتهی سبک: pip install scrapy beautifulsoup4 httpx
# scrape.py — واکشی headless
from playwright.sync_api import sync_playwright
with sync_playwright() as p:
b = p.chromium.launch()
page = b.new_page()
page.goto("https://example.com")
print(page.title())
b.close()
برای خزشی که ساعتها اجرا میشود، آن را در یک نشست SSH رها نکنید — درون یک سرویس systemd بپیچیدش (یا tmux برای یک اجرای سریع) تا از قطع اتصال و ریاستارت جان سالم به در ببرد، همان الگویی که هر فرآیندی را زنده نگه میدارد. اگر یک عامل هوش مصنوعی اسکرپ را میراند، حتی میتواند خودش باکس را از طریق MCP اجاره کند.
بخش صادقانه دربارهی IPها
اینجا همان جایی است که بیشتر پستهای «بهترین VPS برای اسکرپینگ» زیادی میفروشند. یک VPS به شما یک سرور با یک IP خروجی میدهد. این برای اجرای اسکرپر عالی است — یک ماشین تمیز و اختصاصی که همیشه روشن است. این یک سرویس پروکسی نیست، و یک IP شما را از دور هدفی که با آدرس مسدود یا محدودیت نرخ میگذارد رد نمیکند.
اگر در مقیاس بالا اسکرپ میکنید و به مسدودسازی میخورید، راهحل یک ارائهدهندهی جداگانهی پروکسی/چرخش پیش از درخواستهایتان است — VPS کد شما را اجرا میکند، لایهی پروکسی IPها را مدیریت میکند. دو کار متفاوت. هر کس به شما میگوید یک باکس واحد مسدودسازی IP در مقیاس بزرگ را حل میکند، دارد چیزی به شما میفروشد.
و مسئولانه اسکرپ کنید: به robots.txt احترام بگذارید، نرخ درخواستتان را محدود کنید، و در چارچوب شرایط آنچه جمع میکنید بمانید. یک اسکرپر مؤدب بسیار کمتر از یک اسکرپر حریص مسدود میشود.
هشدارها
- فقط CPU، یک منطقه (آلمان). برای منطق اسکرپینگ و مرورگرهای headless خوب است؛ اگر بهطور مشخص به یک GPU یا یک جغرافیای خاص نیاز دارید، این را از پیش بدانید.
- مراقب RAM با مرورگرها باشید. یک حلقهی نشتدار Playwright باکس را میخورد — صفحات و کانتکستها را ببندید، همزمانی را محدود کنید.
- یک سرور است، نه یک ناشناسساز جادویی. بدون KYC حساب را خصوصی نگه میدارد؛ اینکه درخواستهای شما برای اهداف چطور به نظر میرسند به گردن شماست (و لایهی پروکسیتان).
در همین چارچوب، یک VPS بدون KYC خانهای تمیز و خصوصی برای اسکرپری است که فقط به کار کردن ادامه میدهد. یک پلن انتخاب کنید، با رمزارز پرداخت کنید، و جمعکنندهتان را ظرف چند دقیقه آنلاین کنید.
نظرات
هنوز نظری نیست. اولین نفر باشید.