Collect URL je nástroj, který dokáže zobrazit kompletní výčet statických URL adres pro zvolenou doménu (např. www.stahuj.cz). Umožňuje nastavit ignorování konkrétních souborových formátů (např. jpeg, png, gif, pdf, doc, xls, xlsx). Definovat lze i maximální dobu připojení a odpovědi (v milisekundách).
Pro zjišťování URL adres je možné zvolit jednoho z agentů Mozilla/5.0 (Googlebot/2.1, bingbot/2.0, Yahoo! Slurp). Výčet URL adres lze vyexportovat do textového souboru.
Pro hodnocení programu se prosím nejprve přihlaste
Pro hodnocení programu se prosím nejprve přihlaste