# robots.txt — datadriftdigital.nl # Alles open. Deze site draagt geen afgeschermde secties: wat niet gecrawld mag # worden, staat er niet op. # # De sitemap-URL wijst naar sitemap-index.xml, niet sitemap.xml — dat is wat # @astrojs/sitemap genereert (zie astro.config.mjs, integrations: [sitemap()]). # # /llms.txt staat hier bewust niet bij: robots.txt kent er geen directive voor. # Dat bestand wordt gegenereerd door src/pages/llms.txt.ts. # # FEITCORRECTIE 26-8: hier stond dat /llms.txt "gelinkt is in de sitemap". # Dat is niet zo — de sitemap draagt alleen HTML-pagina's, nul treffers op # "llms" (gemeten in 04_Kennis/research/llm-vindbaarheid-audit.md §1.4). Wat er # wél is: het llms.txt van de blog verwijst naar deze site, en dit llms.txt # verwijst terug naar dat van de blog. Die keten loopt één kant op. User-agent: * Allow: / Sitemap: https://datadriftdigital.nl/sitemap-index.xml