» :: پروژه خزنده های وب
خزنده وب که افزونتر ضمیر اول شخص جمع آن را با عنوان
Web
crawler باده شناسیم به سمت برنامه کامپیوتری اطلاق می شود که World
Wide Web (وب
جهان گستر) را به صورت مرتب و آل مراتبی بازدید کرده و دادهها آن را مورد
پردازش قرار باده دهد. از خزنده های وب با عناوین دیگری مانند :عنکبوتهای وب، فهرست
سازان خودکار، رباتهای نرمافزاری خودکارو... نیز یاد می شود.
ربات ها، تارتن ها و الا خزنده ها، در واقع
یک پاره نرم افزار هستند که جهت خزیدن از یک برگ به صفحه دیگر برنامه ریزی شده
اند و سینهمال رفتن آن ها بر اصل لینک هایی است که در این صفحات قرار دارد. همان طور که
خزنده راه خود را در میان صفحات وب باب سراسر اینترنت قید اسم می کند، در همین حال
مضامین (مثل نوشته و یا لینک) را نیز از وب سایت ها جمع آوری می کند .