sanırım GSiteCrawler bu iş için güzel bi program....