Bir süredir üzerinde çalıştığım açık kaynak bir SEO crawler'ı paylaşmak istedim. Screaming Frog'un ücretsiz sürümünün 500 URL limiti ve lisans fiyatı bir noktada can sıkıcı olmaya başlıyor; ben de kendi ihtiyaçlarımdan yola çıkarak benzer arayüzde, ücretsiz ve tamamen açık kaynak bir alternatif oluşturdum.
FreeCrawl SEO Tool MIT lisanslı, Windows / macOS / Linux'ta çalışıyor.
Kısaca neler yapabiliyor:
- Tek makinede 1 milyon+ URL tarayabiliyor, ortalama 80150 URL/sn hız
- Screaming Frog tarzı yoğun, koyu temalı bir arayüz; 1M satıra kadar virtualized tablolar
- 14 analiz sekmesinde ~70 SEO kontrolü (title/meta, hreflang, canonical, redirect zincirleri, broken link vs.)
- Sitemap, robots.txt, OpenGraph, Twitter Card, JSON-LD, AMP analizi
- Near-duplicate (SimHash + LSH) ve tam hreflang doğrulama
- SSL/TLS sertifika denetimi, security header kontrolü
- Custom CSS Selector + Regex extraction (10 kural)
- Pause / Resume, manuel URL injection, HTTP Basic / Bearer auth, proxy desteği
- 16 farklı rapor, 22 kategorili CSV bulk export, standalone HTML audit raporu
- Sitemap generator (image / hreflang / sharded / gz)
- Proje karşılaştırma (diff), Cytoscape graph görselleştirme, anchor-text word cloud
- Bonus: GUI'nin yanında headless CLI modu da var, otomasyon için ideal
İndirme: Hazır kurulum dosyaları için Releases sayfası var, source'tan kurmak isteyen Windows kullanıcıları için repo köküne .bat launcher bıraktım çift tıkla çalışıyor.
GitHub: Github Reposu
Site: freecrawl.net
Hâlâ aktif geliştiriyorum, JavaScript rendering, log analyzer ve PageSpeed API entegrasyonu yol haritasında. Deneyenlerin geri bildirimleri, bug raporları veya feature önerileri benim için çok değerli. issue açabilir veya buradan da yorum bırakabilirsiniz.
