Start-URL en crawlbereik
Start op de projectwebsite en volg interne links binnen capaciteit en diepte.
- Projectbereik
- Interne URL-discovery
- Voltooide crawl-inventaris
SEO Crawler voor technische website-analyse
Crawl je website in de cloud en ontdek pagina's via interne links, in plaats van URL's één voor één te controleren. Stel capaciteit, diepte, JavaScript-rendering, concurrency en request-delay in en onderzoek de Pages-, Links- en Images-records achter elk technisch patroon.
TL;DR
Te lang; niet gelezen
Samenvatting tonen Samenvatting verbergen
TL;DR
Te lang; niet gelezen
Wat doet Screpy SEO Crawler?
Screpy SEO Crawler start op de projectwebsite, volgt toegankelijke interne links binnen het gekozen bereik en maakt inventarissen van Pages, Links en Images. Stel ontdekking en requesttempo in, onderzoek technische patronen, exporteer gefilterde data en maak vergelijkbare crawl-snapshots na een wijziging.
Bereik en toegang
- Volg interne links binnen de ingestelde URL-capaciteit en crawl-diepte.
- Leg crawlstatus en toegangscontext vast zodat een blokkade geen on-page-probleem lijkt.
Crawlbesturing
- Stel URL-capaciteit, linkdiepte en optionele JavaScript-rendering in.
- Regel concurrency en request-delay wanneer langzamer crawlen nodig is.
Technische inventarissen
- Pages bevat responses, redirects, canonicals, metadata, headings en indexeerbaarheid.
- Links en Images koppelen bestemmingen en assets aan status, attributen en bronpagina's.
Verificatie en exports
- Bewaar elke voltooide crawl als gedateerde snapshot.
- Gebruik filters en CSV- of Excel-exports als implementatiequeue.
Bepaal wat de SEO Crawler kan ontdekken.
Een bruikbare crawl begint met expliciet bereik en toegang. Pas ontdekking, rendering, tempo, rapporten en herhaalde analyses aan je website aan.
Maximale URL-capaciteit
Kies een capaciteit die past bij site en plan en controleer of die limiet is bereikt.
- Planbewuste capaciteit
- Context van de dekkingslimiet
- Dekking tegen de gekozen limiet
Bepaal hoeveel interne linkniveaus worden gevolgd vanaf de startpagina.
- Diepte per pagina
- Onderzoek van diepe pagina's
- Architectuurcontrole
JavaScript-rendering
Render client-side content wanneer belangrijke links niet in de eerste HTML staan.
- Optionele rendering
- Client-side linkdiscovery
- Analyse van gerenderde content
Concurrency en request-delay
Pas crawlsnelheid aan de server aan in plaats van elk systeem hetzelfde patroon te sturen.
- Gelijktijdige requests
- Instelbare delay
- Rate-limit-bewust crawlen
Onderscheid een SEO-bevinding van een blokkade door robots, firewall, botbescherming, status en HTML te controleren.
- ScrepyBot-toegang
- robots.txt-controle
- Context van geblokkeerde responses
Filterbare crawlrapporten
Ga van een sitetotaal naar de exacte Pages-, Links- en Images-records achter een patroon.
- Pages-, Links- en Images-inventaris
- Probleem- en recordfilters
- CSV- en Excel-exports
Gedateerde snapshots
Bewaar voltooide crawls, herhaal met vergelijkbare instellingen en controleer wijzigingen na deploy.
- Historische crawls
- Voor- en na-vergelijking
- Terugkerende technische review
Inspecteer elke ontdekte URL als crawlrecord.
Maak van een voltooide crawl een filterbare URL-inventaris met status, bestemming, diepte, response time, metadata, headings, canonical, indexeerbaarheid en structured data.
Meer informatie over pages-rapport- Filter de volledige inventaris
- Vergelijk URL's tussen templates
- Exporteer records voor implementatie
Koppel elk doel aan de bronpagina.
Bekijk interne en externe bestemmingen met status, anchor text, attributen, gebruik en bronpagina's.
Meer informatie over links-rapport- Vind broken en redirected destinations
- Traceer elke bestemming naar bronpagina's
- Scheid interne architectuur van externe links
Controleer image-delivery samen met page-gebruik.
Bekijk status, alt-tekst, afmetingen, responsive attributen, loading en elke pagina die een asset gebruikt.
Meer informatie over images-rapport- Vind onbeschikbare images
- Controleer alt, dimensions, srcset en sizes
- Traceer assets naar bronpagina's
Maak een baseline, wijzig de site en crawl opnieuw.
Vergelijk gedateerde snapshots met hetzelfde bereik na een release, migratie, navigatiewijziging of technische fix.
Meer informatie over crawl-snapshots- Kies historische crawls
- Vergelijk gelijkwaardig bereik
- Scheid sitewijziging van andere instellingen
Maak van een crawl evidence die je kunt verifiëren.
Houd bereik zichtbaar, inspecteer records, herstel de implementatie en bevestig het resultaat met de volgende crawl.
- 01
Definieer de crawl
Bevestig start-URL, capaciteit, diepte, JavaScript, concurrency, delay, robots en crawler-toegang.
- 02
Laat interne links de structuur tonen
Registreer elke ontdekte URL, response, diepte, bestemming en relatie binnen het bereik.
- 03
Filter de records achter een patroon
Gebruik Pages, Links en Images om representatieve URL's, redirects, metadata en gebruik te onderzoeken.
- 04
Publiceer en maak een vergelijkbare snapshot
Crawl opnieuw na de wijziging met hetzelfde bereik en controleer of het bedoelde patroon veranderde.
Gebruik de crawler voor structurele websitewijzigingen.
Maak een baseline vóór risicovol werk en een vergelijkbare snapshot nadat de wijziging live staat.
Migraties en URL-wijzigingen
Leg belangrijke URL's, redirects, canonicals en interne paden vast vóór de lancering.
JavaScript-websites
Gebruik rendering wanneer navigatie of belangrijke content in de browser ontstaat.
Interne links en architectuur
Onderzoek diepte, bronpagina's, anchors en herhaalde navigatiepaden.
Release- en templatem monitoring
Crawl opnieuw na routing-, CMS-, template- en componentwijzigingen.
Vergelijk Screpy met Screaming Frog wanneer crawlmodel, controls en rapporten tellen.
Kies ruwe crawldata of een geprioriteerde audit
Gebruik SEO Crawler voor ontdekking en Website Audit voor gegroepeerde bevindingen en prioriteiten.
Configureer een cloud crawl en inspecteer Pages, Links en Images.
Zet een crawl om in bevindingen, prioriteiten en een verificatieflow.
Pas crawl-evidence toe op jouw websitemodel.
SaaS-sites en ecommercecatalogi hebben verschillende risico's in gedeelde templates en veranderende URL-sets.
Bekijk landingspagina's, documentatie, templates en release-regressies als één acquisitie-oppervlak.
Controleer categorieën, producten, shoppingpaden en cataloguswijzigingen.
Screpy-documentatie
Leer je website crawlen
Lees de Screpy-gidsen over crawlbereik, toegang, Pages, Links en Images.
Vragen over SEO Crawler.
Begrijp discovery, bereik, JavaScript, toegang, reports en snapshots.
Wat is een SEO Crawler?
Een SEO Crawler start bij een URL, volgt toegankelijke interne links binnen een bereik en registreert technische gegevens van pagina's en resources.
Wat is het verschil met Website Audit?
De crawler maakt het technische inventory; Website Audit groepeert dat inventory in bevindingen, prioriteiten en een fix-verificatieflow.
Hoe ontdekt Screpy pagina's?
Screpy volgt interne links binnen ingestelde capaciteit en diepte. Niet-gelinkte, geblokkeerde of onbruikbare pagina's kunnen ontbreken.
Kan Screpy JavaScript-sites crawlen?
Ja, met optionele rendering. Robots, authenticatie, firewalls, bot-challenges en het ingestelde bereik blijven van toepassing.
Kan ik gebroken links vinden?
Ja. Het Links-rapport toont mislukte of redirected bestemmingen en de bronpagina's die ernaar verwijzen.
Kan ik crawls in de tijd vergelijken?
Ja. Bewaar voltooide crawls als snapshots en vergelijk ze met gelijkwaardige instellingen.
Heb ik een crawler nodig als ik Search Console gebruik?
Ze beantwoorden verschillende vragen. Search Console toont zoekprestaties; de crawler volgt proactief interne links en bouwt technische evidence.
Breng je website in kaart vóór de volgende technische SEO-wijziging.
Maak een baseline, inspecteer URL's en bronpaden en controleer na deploy wat werkelijk veranderde.