تالار گفتمان مانشت
خزندگان وب چه هستند و چگونه کار میکنند؟ - نسخه‌ی قابل چاپ

خزندگان وب چه هستند و چگونه کار میکنند؟ - shivap - 31 شهریور ۱۳۹۴ ۰۶:۵۶ ب.ظ

سلام.
میخواستم ببینم این خزندگان وب چه هستند؟
برای کاری مثل جمع آوری پروفایل کاربران یا لینک های یا هر چیزی شبیه این در یک شبکه اجتماعی استفاده دارند ؟
و اینکه چطوری باید یک خزنده وب طراحی کرد؟
آیا خزنده های وب آماده هم موجود هستند ؟

خزندگان وب چه هستند و چگونه کار میکنند؟ - one hacker alone - 01 مهر ۱۳۹۴ ۰۲:۳۵ ق.ظ

CRAWL روشی برای پویش دایرکتوری و فایل ها و لینک های وب سایت ها هست
مهمترین استفاده ی اون در طراحی موتور های جستجو برای دسته بندی و رتبه بندی وب سایت ها است
در مورد نوشتن بله شما هم میتونید بنویسید و از وبسایتی یا منبعی کار خودش رو شروع کنه و در میاد کدهای یک وب سایت به دنبال کلمات کلیدی یا دایرکتوری ها یا لینک ها بگرده و ثبت کنه
در مورد اینکه اماده باشه بله هست اما برای چه هدفی؟ مثلا اسکنر های امنیتی با هدف یافتن و نمایش دایرکتوری های یک وب سایت یک خزنده دارن
این مهمه که هدف شما چیه و ایا نیاز به یک Crawler دارید یا نه؟
این دو لینک رو ببینید

مهمان عزیز شما قادر به مشاهده پیوندهای انجمن مانشت نمی‌باشید. جهت مشاهده پیوندها ثبت نام کنید.


مهمان عزیز شما قادر به مشاهده پیوندهای انجمن مانشت نمی‌باشید. جهت مشاهده پیوندها ثبت نام کنید.