# ===== Markets in Vitro - robots.txt =====
# For: marketsinvitro.com
# Updated: 2026-10-07

User-agent: *
Allow: /

# Geschützte Verzeichnisse
Disallow: /members/
Disallow: /private/

# Technische / interne Verzeichnisse
Disallow: /data/
Disallow: /scripts/
Disallow: /_pgbackup/
Disallow: /_pginfo/

# Partials: Googlebot muss navbar/footer/head-base holen duerfen, sonst rendert
# er jede Seite OHNE Navigation (keine internen Links). Gesperrt bleiben nur die
# Member-Fassungen mit vollen Daten. (2026-10-07)
Disallow: /partials/*_basic.html
Disallow: /partials/navbar-members

# Commentary: die HTML-Artikel stehen in der Sitemap und tragen index,follow --
# das alte "Disallow: /commentary/" sperrte alle 222. Gesperrt bleiben nur die
# Rohdateien. (2026-10-07)
Disallow: /commentary/commentary_txt/
Disallow: /commentary/audio/
Disallow: /commentary/_dupe_backup/
Disallow: /commentary/*.json$
Disallow: /commentary/*.md$

# Technische Dateien
Disallow: /*.log$
Disallow: /*.bak$

# Sitemap
Sitemap: https://marketsinvitro.com/sitemap.xml