Vaste bron-IP's voor whitelisting
Onze archiveringsrobot benadert uw website vanaf bekende, vaste egress-IP-adressen. Daardoor kunnen uw site-beheerders het verkeer van de robot eenvoudig en gericht toelaten op de firewall of WAF — zonder hun beveiliging breed open te zetten.
Bekende, vaste egress-IP's
Veel sites worden beschermd door een firewall of een Web Application Firewall (WAF) die ongebruikelijk crawlverkeer afremt of blokkeert. Dat kan een volledige, betrouwbare opname in de weg zitten. Omdat onze crawler vanaf een vaste set egress-IP-adressen werkt — zowel IPv4 als IPv6 — kunt u precies díé adressen toelaten. De IP-reeksen veranderen niet ongemerkt, zodat een eenmaal ingestelde uitzondering blijft werken.
Eenvoudig toelaten op firewall of WAF
Uw beheerder plaatst onze IP-adressen op de allowlist van de firewall of WAF. Daarmee herkent uw beveiliging het archiveringsverkeer als vertrouwd en laat het ongehinderd door, terwijl alle overige bezoekers gewoon aan de normale regels onderworpen blijven. Dit voorkomt dat rate limiting, bot-detectie of een challenge-pagina pagina's onbedoeld buiten de opname houden.
Waarom dit het verschil maakt
Een gericht toegelaten, vaste bron is veel veiliger dan het versoepelen van algemene beveiligingsregels. U houdt uw afscherming tegen onbekende bots in stand en geeft alleen de bekende archiveringsrobot toegang. Het resultaat is een volledigere opname: pagina's achter strenge beveiliging worden wél meegenomen, wat de aantoonbare volledigheid van uw webarchief ten goede komt.
In combinatie met
Werkt een onderdeel ondanks de whitelisting technisch toch niet mee, dan leggen wij dat expliciet vast; zie aantoonbaar compleet: niet-archiveerbare onderdelen vastleggen. Voor sites met veel interactie is ook het archiveren van JavaScript en dynamische websites relevant. Wij stellen de toe te laten IP-adressen voor u beschikbaar; neem hiervoor contact op of bekijk onze veelgestelde vragen.