PDA

توجه ! این یک نسخه آرشیو شده میباشد و در این حالت شما عکسی را مشاهده نمیکنید برای مشاهده کامل متن و عکسها بر روی لینک مقابل کلیک کنید : تعریف و اصطلاحات spider و crawling



ColoMax
October 18th, 2015, 14:22
28481

خصوصیات خزنده(crawler)

مقیاس پذیر
توزیع شده
کارا
توانایی تشخیص صفحات مهم
وب عمیق

تفاوت spider و crawler

عنکبوت (spider) وظیفه بارگزاری صفحات را بر عهده دارد
اما خرنده (crawler) مانند فرمانده ای برای spider عمل می کند!
crawler تصمیم می گیرد که چه صفحاتی بایستی لود شود و نهایتا spider وظیفه بارگزاری صفحه را بر عهده دارد.