دانلود نرم افزار Collect URL اسکن و جمع آوری URL ها

مانند ربات و موتور جستجو ، اینترنت را اسکن کنید. شروع کار از URL های وارد شده توسط کاربر ، این برنامه کلیه پیوندهای موجود در URL را لیست می کند. سپس به صورت بازگشتی تمام پیوندهای موجود در لیست را اسکن می کند. کاربر می تواند جمع آوری URL را فقط برای جمع آوری دامنه منفرد محدود کند. همچنین لیست چشم پوشی از پسوند پرونده نیز قابل ویرایش است و مقادیر مهلت اتصال و پاسخ  هم قابل ویرایش است. همچنین کاربر می تواند مقدار عامل کاربر را برای اتصالات HTTP و HTTPS تغییر دهد.

سایت سازنده

دانلود نرم افزار Collect URL اسکن و جمع آوری URL ها

اینم یه سایته که بصورت آنلاین این کارو انجام میده