# ===================================================
# Ljungströms AB - Robots.txt
# Webbplats: https://ljungstroms.com
# Uppdaterad: 2026-08-18
# ===================================================
# Söktrafik och seriösa AI-assistenter är välkomna.
# Aggressiva eller integritetskränkande scrapers blockeras.

# Alla botar - Grundregler (statisk sajt: inga admin- eller sökytor att spärra)
User-agent: *
Allow: /

# ===================================================
# AI-CRAWLERS - EXPLICIT TILLÅTNA
# Vi VILL att AI-modeller ska kunna läsa vår sajt.
# RFC 9309: en bot som matchar en namngiven grupp läser BARA den
# gruppen — därför samlas alla tillåtna bottar i EN grupp med samma
# regler som *-gruppen.
# ===================================================

# OpenAI (ChatGPT)
User-agent: GPTBot
User-agent: ChatGPT-User
User-agent: OAI-SearchBot
# Anthropic (Claude)
User-agent: ClaudeBot
User-agent: Claude-User
User-agent: Claude-SearchBot
User-agent: Claude-Web
# Google AI (Gemini)
User-agent: Google-Extended
User-agent: GoogleOther
# Perplexity
User-agent: PerplexityBot
# Apple Intelligence
User-agent: Applebot
User-agent: Applebot-Extended
# Common Crawl (träningsdata)
User-agent: CCBot
# Cohere AI
User-agent: cohere-ai
# Diffbot (strukturerad data)
User-agent: Diffbot
# Microsoft Copilot / Bing
User-agent: Bingbot
# — delade regler för HELA gruppen ovan —
Allow: /

# ===================================================
# BLOCKERADE: aggressiva träningsbottar och scrapers
# ===================================================
User-agent: FacebookBot
User-agent: meta-externalagent
User-agent: Meta-ExternalAgent
User-agent: Meta-ExternalFetcher
User-agent: Bytespider
User-agent: Amazonbot
User-agent: ImagesiftBot
User-agent: DataForSeoBot
Disallow: /

# ===================================================
# SEO-BOTAR - BLOCKERADE
# ===================================================
User-agent: SemrushBot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: BLEXBot
Disallow: /

User-agent: PetalBot
Disallow: /

# ===================================================
# SITEMAPS
# ===================================================

Sitemap: https://ljungstroms.com/sitemap-index.xml

# ===================================================
# INFORMATION
# ===================================================
# Företag: Ljungströms AB
# AI-kontext: https://ljungstroms.com/llms.txt
# AI-kontext (utökad): https://ljungstroms.com/llms-full.txt
# Kontakt: ljungstroms@ljungstroms.com
# ===================================================