خزنده وب (خزشگر وب)
خزنده وب (خزشگر وب) یک برنامه کامپیوتری است که به صورت خودکار صفحات وب را مرور و اطلاعات آنها را جمعآوری میکند. این اطلاعات معمولاً برای نمایهسازی در موتورهای جستجو استفاده میشود. خزندههای وب همچنین میتوانند برای اهداف دیگری مانند جمعآوری دادههای آماری، شناسایی محتوای مخرب یا نظارت بر عملکرد وبسایتها استفاده شوند.