# Albert Heijn Robots.txt
# Laatste update: 03-12-2025

# SITEMAPS - Uitgebreide sitemap structuur voor optimale indexering
Sitemap: https://www.ah.nl/sitemaps/entities/allerhande/recipes.xml
Sitemap: https://www.ah.nl/sitemaps/entities/allerhande/videos.xml
Sitemap: https://www.ah.nl/sitemaps/entities/stores/stores.xml
Sitemap: https://www.ah.nl/sitemaps/entities/products/categories.xml
Sitemap: https://www.ah.nl/sitemaps/entities/products/detail.xml
Sitemap: https://www.ah.nl/sitemaps/entities/products/brands.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-allerhande.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-core.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-content.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-klantenservice.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-zakelijk.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-over-ah.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-acties.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-abonnementen.xml
Sitemap: https://www.ah.nl/sitemaps/content/sitemap-media-services.xml
Sitemap: https://www.ah.nl/bonus/assets/sitemap_nl.xml

## Blokkeer technische/admin gebieden
User-agent: *
Disallow: /fdp
Disallow: /koahg
Disallow: /data/
Disallow: /fallback/
Disallow: /rev05/
Disallow: /ui/
Disallow: /website/
Disallow: /module/cookbook-summary
Disallow: /shl

## Allow belangrijke data endpoints
Allow: /data/winkelinformatie/winkels*

# GEBRUIKERSGEBIEDEN - Privé en persoonlijke content
Disallow: /bewaarde-recepten/
Disallow: /mijn/
Disallow: /productvoorstel/
Disallow: /bezorgen
Disallow: /bestellen/bestelling-controleren
Disallow: /bestellen/overzicht
Disallow: /ophalen/moment
Disallow: /producten/eerder-gekocht

# ALLERHANDE OPTIMALISATIE - Minder restrictief voor SEO
Disallow: /allerhande/recepten/raterecept
Disallow: /allerhande/recepten/verstuur
Disallow: /kookschrift/recepten/verstuur
Disallow: /kookschrift2
Disallow: /allerhande2/
Disallow: /allerhande/nl/data/
Disallow: /allerhande*/__/*
Disallow: /recepten/

## Allow assets
Allow: /allerhande2/assets/

## Allow belangrijke gefilterde content
Allow: /allerhande/recepten/*?kooktechniek=*
Allow: /allerhande/recepten/*?menugang=*
Allow: /allerhande/recepten/*?soort-gerecht=*
Allow  /allerhande/recepten-zoeken?veel-gebruikt=nu-in-het-magazine

## Blokkeer alleen multi-parameter queries (duplicate content)
Disallow: /allerhande/*?*&*
Disallow: /allerhande/*soort-gerecht=*
Disallow: /allerhande/*seizoen=*
Disallow: /allerhande/*momenten=*
Disallow: /allerhande/*menugang=*
Disallow: /allerhande/*kooktechniek=*
Disallow: /allerhande/*veel-gebruikt=*
Disallow: /allerhande/*recepten-met=*
Disallow: /allerhande/*speciale-wensen=*
Disallow: /allerhande/*keuken=*
Disallow: /allerhande/*allerhande-magazine=*

# PRODUCT PAGINA'S - Geoptimaliseerd voor categorieën
## Allow belangrijke product categorieën
Allow: /producten/merk?letter=*
Allow: /producten*?Uitgelicht=voor-de-feestdagen
Allow: /producten*?Bonus=true
Allow: /producten*?Dieet=biologisch

## Allow schone paginering
Allow: /producten/*?page=*$
Allow: /producten/*?page=*&withOffset=true

## Blokkeer multi-parameter queries en problematische URLs
Disallow: /producten?*
Disallow: /producten/*?*
Disallow: /producten/*undefined
Disallow: /producten*?Uitgelicht=voor-de-feestdagen&*
Disallow: /producten*?Bonus=true&*
Disallow: /producten*?Dieet=biologisch&*

#BONUS - geoptimaliseerd voor segmentgroepen
Disallow: /bonus/groep/*?*

# ZOEK & WINKELS - Toegankelijkheid behouden
Disallow: /zoeken*?*
Allow: /zoeken/assets/
Allow: /zoeken/api/
Disallow: /winkel/*?*
Disallow: /winkels*?*
Allow: /winkels*?page=*
Allow: /winkels*?letter=*
Disallow: /winkels*letter=*&*

# OVERIGE RESTRICTIES
Disallow: /fotoservice/client_redirect.jsp
Disallow: /product/foodlabel/
Disallow: /klantenservice/zoeken?query=*
Disallow: /bonus/groep/*?week=*dclid=*

# Allow REST API
Allow: /service/rest

# ADBOTS - Volledige toegang voor ad performance
User-agent: adsbot-google
User-agent: Mediapartners-Google
User-agent: AdIdxBot
Disallow: