منظور از Crawler در وب چیست؟

منظور از Crawler در وب چیست؟

یک Crawler از نظر لغوی به معنی عنکبوت و خزیدن است و عموما در وب به آن خرنده وب یا Web Crawler گفته مى شود که در واقع یک ربات اینترنتی است که به صورت سازماندهی شده به مرور و گردش در صفحات گسترده وب می‌پردازد و عموما توسط موتورهاى جستجو نظیر گوگل براى ایندکس کردن محتواى سایت‌هاى اینترنتى مورد استفاده قرار مى‌گیرد.
 

کلمات کلیدی :

افزودن دیدگاه جدید