پیدا کردن حجم یک سایت

[ramin1000]

دوست عزیز،

بنده برداشتم این بود که ابزار هایی که شما تا به حال دیدید تنها homepage رو مورد بررسی می دهند. وگرنه اگر شما بخواهید حجم کل وب سایت رو به دست بیارید دو راه به ذهنم می رسه:

1. کل وب سایت رو با یک نرم افزار دانلود کنید که البته تنها فایل هایی رو دریافت خواهد کرد که لینکی بهشون وجود داشته باشه.
2. با یک Website Crawler توی وب سایت بخزید که اگر طرح وب سایت شخص هوشمند و باتجربه ای باشه این راه به شکست منجر میشه.

آقا رامین روش اول که به نظرم منطقی نیست که 2 گیگ مثلا دانلود کنم که سودی نداره برام

تو روش دوم که روش خزیدنه آیا به اندازه همون 2 گیگ مثلا ترافیک مصرف می شه یا نه با مصرف ترافیک خیلی کم و زمان کم نتیجه رو نشون میده