# robots.txt — NeoTV Pro # https://www.neotv.store # # Stratégie de crawl : # - Tout est autorisé par défaut (Allow: /) # - On bloque uniquement les paramètres de tracking pour éviter les # duplicatas (?utm_*, ?fbclid, ?gclid…) # - On NE bloque PAS ?page=N (pagination VOD) — pages indexables et # référencées dans /sitemap-vod-paginated.xml # - On NE bloque PAS les ancres (#tarifs, #telechargement, …) car # les fragments ne sont jamais envoyés au serveur — déclarés via # /plan-du-site et JSON-LD SiteNavigationElement # - /api/ existe pour endpoints éventuels (webhooks, public API). # Aucun sitemap n'est servi sous /api/ → safe à disallow. User-agent: * Allow: / # Routes critiques explicitement autorisées (redondant mais protège # contre une régression future si quelqu'un ajoute un Disallow large). Allow: /sitemap.xml Allow: /sitemap-pages.xml Allow: /sitemap-vod.xml Allow: /sitemap-vod-paginated.xml Allow: /sitemap-guides.xml Allow: /sitemap-images.xml Allow: /sitemap-chaines-*.xml Allow: /guides/feed.xml Allow: /plan-du-site Allow: /vod Allow: /chaines Allow: /tarifs Allow: /telechargement # Pagination VOD (?page=N) — indexable, doit rester crawlable Allow: /vod?page= Allow: /vod/*?page= # Endpoints non destinés au crawl (réservé pour webhooks futurs) Disallow: /api/ # Paramètres de tracking — on cible bien `?utm_=` ou `&utm_=` pour ne # pas matcher un chemin contenant le mot "utm" ailleurs dans l'URL. # Pattern Google : `*` = wildcard, `$` = fin d'URL. Disallow: /*?*utm_source= Disallow: /*?*utm_medium= Disallow: /*?*utm_campaign= Disallow: /*?*utm_term= Disallow: /*?*utm_content= Disallow: /*?*fbclid= Disallow: /*?*gclid= Disallow: /*?*gad_source= Disallow: /*?*mc_eid= Disallow: /*?*mc_cid= # Crawl-delay courtoisie pour bots agressifs (Google ignore cette # directive — utiliser GSC pour Googlebot) User-agent: AhrefsBot Crawl-delay: 10 Allow: / User-agent: SemrushBot Crawl-delay: 10 Allow: / # Googlebot-Image : autoriser explicitement le crawl image (rich # results). Chaque User-agent ne lisant que son propre groupe, on # répète les règles essentielles ici pour éviter toute ambiguïté. User-agent: Googlebot-Image Allow: / Disallow: /api/ # Bloquer les assistants IA non opt-in (préserve le contenu original) User-agent: GPTBot Disallow: / User-agent: ClaudeBot Disallow: / User-agent: CCBot Disallow: / User-agent: anthropic-ai Disallow: / User-agent: Google-Extended Disallow: / User-agent: PerplexityBot Disallow: / # === Sitemaps === # Sitemap index (référence tous les sous-sitemaps) Sitemap: https://www.neotv.store/sitemap.xml # Sous-sitemaps déclarés explicitement pour les crawlers # qui ne suivent pas toujours le sitemap index Sitemap: https://www.neotv.store/sitemap-pages.xml Sitemap: https://www.neotv.store/sitemap-vod.xml Sitemap: https://www.neotv.store/sitemap-vod-paginated.xml Sitemap: https://www.neotv.store/sitemap-guides.xml Sitemap: https://www.neotv.store/sitemap-images.xml # Flux Atom des guides (mises à jour temps réel pour lecteurs et bots) Sitemap: https://www.neotv.store/guides/feed.xml # Sitemaps par pays (chaînes IPTV) — un sitemap par code ISO 3166-1 alpha-2. # Liste complète (60 pays) — alignée sur ce que /sitemap.xml référence. # Redondance volontaire : certains crawlers (Bing, Yandex, Seznam, Baidu) # ne suivent pas systématiquement les sitemap index, donc on les déclare # tous explicitement ici pour garantir la découverte. Sitemap: https://www.neotv.store/sitemap-chaines-AE.xml Sitemap: https://www.neotv.store/sitemap-chaines-AF.xml Sitemap: https://www.neotv.store/sitemap-chaines-AL.xml Sitemap: https://www.neotv.store/sitemap-chaines-AR.xml Sitemap: https://www.neotv.store/sitemap-chaines-AT.xml Sitemap: https://www.neotv.store/sitemap-chaines-BA.xml Sitemap: https://www.neotv.store/sitemap-chaines-BD.xml Sitemap: https://www.neotv.store/sitemap-chaines-BE.xml Sitemap: https://www.neotv.store/sitemap-chaines-BG.xml Sitemap: https://www.neotv.store/sitemap-chaines-BO.xml Sitemap: https://www.neotv.store/sitemap-chaines-BR.xml Sitemap: https://www.neotv.store/sitemap-chaines-CA.xml Sitemap: https://www.neotv.store/sitemap-chaines-CH.xml Sitemap: https://www.neotv.store/sitemap-chaines-CN.xml Sitemap: https://www.neotv.store/sitemap-chaines-CO.xml Sitemap: https://www.neotv.store/sitemap-chaines-CY.xml Sitemap: https://www.neotv.store/sitemap-chaines-CZ.xml Sitemap: https://www.neotv.store/sitemap-chaines-DE.xml Sitemap: https://www.neotv.store/sitemap-chaines-DK.xml Sitemap: https://www.neotv.store/sitemap-chaines-DZ.xml Sitemap: https://www.neotv.store/sitemap-chaines-EG.xml Sitemap: https://www.neotv.store/sitemap-chaines-ES.xml Sitemap: https://www.neotv.store/sitemap-chaines-FI.xml Sitemap: https://www.neotv.store/sitemap-chaines-FR.xml Sitemap: https://www.neotv.store/sitemap-chaines-GB.xml Sitemap: https://www.neotv.store/sitemap-chaines-GR.xml Sitemap: https://www.neotv.store/sitemap-chaines-HR.xml Sitemap: https://www.neotv.store/sitemap-chaines-HU.xml Sitemap: https://www.neotv.store/sitemap-chaines-ID.xml Sitemap: https://www.neotv.store/sitemap-chaines-IE.xml Sitemap: https://www.neotv.store/sitemap-chaines-IL.xml Sitemap: https://www.neotv.store/sitemap-chaines-IN.xml Sitemap: https://www.neotv.store/sitemap-chaines-IR.xml Sitemap: https://www.neotv.store/sitemap-chaines-IT.xml Sitemap: https://www.neotv.store/sitemap-chaines-JP.xml Sitemap: https://www.neotv.store/sitemap-chaines-LB.xml Sitemap: https://www.neotv.store/sitemap-chaines-MA.xml Sitemap: https://www.neotv.store/sitemap-chaines-MK.xml Sitemap: https://www.neotv.store/sitemap-chaines-MX.xml Sitemap: https://www.neotv.store/sitemap-chaines-MY.xml Sitemap: https://www.neotv.store/sitemap-chaines-NG.xml Sitemap: https://www.neotv.store/sitemap-chaines-NL.xml Sitemap: https://www.neotv.store/sitemap-chaines-NO.xml Sitemap: https://www.neotv.store/sitemap-chaines-PH.xml Sitemap: https://www.neotv.store/sitemap-chaines-PK.xml Sitemap: https://www.neotv.store/sitemap-chaines-PL.xml Sitemap: https://www.neotv.store/sitemap-chaines-PT.xml Sitemap: https://www.neotv.store/sitemap-chaines-QA.xml Sitemap: https://www.neotv.store/sitemap-chaines-RO.xml Sitemap: https://www.neotv.store/sitemap-chaines-RS.xml Sitemap: https://www.neotv.store/sitemap-chaines-RU.xml Sitemap: https://www.neotv.store/sitemap-chaines-SA.xml Sitemap: https://www.neotv.store/sitemap-chaines-SE.xml Sitemap: https://www.neotv.store/sitemap-chaines-SI.xml Sitemap: https://www.neotv.store/sitemap-chaines-TH.xml Sitemap: https://www.neotv.store/sitemap-chaines-TN.xml Sitemap: https://www.neotv.store/sitemap-chaines-TR.xml Sitemap: https://www.neotv.store/sitemap-chaines-UA.xml Sitemap: https://www.neotv.store/sitemap-chaines-US.xml Sitemap: https://www.neotv.store/sitemap-chaines-ZA.xml