inrealtime-audit
Onze crawler leest een paar openbare pagina’s, in een rustig tempo, en houdt zich aan robots.txt.
Zo houd je hem buiten de deur:
User-agent: inrealtime-audit Disallow: /
Of schrijf naar xavier@inrealtime.dev.
Onze crawler leest een paar openbare pagina’s, in een rustig tempo, en houdt zich aan robots.txt.
Zo houd je hem buiten de deur:
User-agent: inrealtime-audit Disallow: /
Of schrijf naar xavier@inrealtime.dev.