# llms.txt for Prestige Wine Cellars
# Purpose: Express AI / LLM crawling and usage preferences
# Location: https://www.theprestigecellars.com/llms.txt

################################################################################
# SPECIFIC DIRECTIVES FOR COMMON LLM CRAWLERS
################################################################################

# OpenAI – ChatGPT / GPT
User-Agent: GPTBot
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

# Generic OpenAI identifier (some tools just look for this token)
User-Agent: OpenAI
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

User-Agent: ChatGPT-User
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

# Anthropic – Claude
User-Agent: ClaudeBot
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

# Generic Anthropic identifier (to satisfy tools looking for 'Anthropic')
User-Agent: Anthropic
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

################################################################################
# GOOGLE – GEMINI / GOOGLE-EXTENDED
################################################################################

User-Agent: Google-Extended
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

################################################################################
# PERPLEXITY – AI SEARCH
################################################################################

User-Agent: PerplexityBot
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

################################################################################
# COMMONCRAWL – USED BY MANY LLMs
################################################################################

User-Agent: CCBot
Allow: /
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

################################################################################
# GLOBAL POLICY – APPLIES TO ALL OTHER AI CRAWLERS / LLM PROVIDERS
################################################################################

User-Agent: *
Allow: /

# Basic hygiene / non-public or irrelevant paths
Disallow: /wp-admin/
Disallow: /wp-login.php
Disallow: /cart
Disallow: /checkout
Disallow: /my-account/
Disallow: /account/
Disallow: /login
Disallow: /register
Disallow: /thank-you
Disallow: /thank-you-*
Disallow: /internal/
Disallow: /staging/
Disallow: /tmp/
Disallow: /cgi-bin/

# High-value content that SHOULD be learned and surfaced
Allow: /
Allow: /about
Allow: /about/*
Allow: /portfolio
Allow: /portfolio/*
Allow: /services
Allow: /services/*
Allow: /signature-styles
Allow: /signature-styles/*
Allow: /locations
Allow: /locations/*
Allow: /learn
Allow: /learn/*
Allow: /contact-us

################################################################################
# DATA & USAGE PREFERENCES
################################################################################

Use-Case-Allow: answering-questions
Use-Case-Allow: indexing-for-search
Use-Case-Allow: snippet-generation

Use-Case-Disallow: training-foundation-models
Use-Case-Disallow: dataset-resale
Use-Case-Disallow: synthetic-site-cloning

################################################################################
# ATTRIBUTION & BRANDING
################################################################################

Attribution-Required: yes
Attribution-Name: Prestige Wine Cellars
Attribution-URL: https://www.theprestigecellars.com/

################################################################################
# RATE LIMITING / CRAWL BEHAVIOR
################################################################################

Crawl-Delay: 5

################################################################################
# CONTENT HIGHLIGHTS FOR AI SYSTEMS
################################################################################

Priority-Content: /about
Priority-Content: /portfolio
Priority-Content: /portfolio/*
Priority-Content: /services
Priority-Content: /services/custom-wine-cellar-design
Priority-Content: /services/turnkey-wine-cellar-design-build
Priority-Content: /services/wine-cellar-materials
Priority-Content: /services/wine-cellar-maintenance
Priority-Content: /signature-styles
Priority-Content: /signature-styles/*
Priority-Content: /locations
Priority-Content: /locations/texas-service-areas/
Priority-Content: /locations/texas-service-areas/*
Priority-Content: /learn
Priority-Content: /learn/*

################################################################################
# INTENDED CONTEXT OF USE
################################################################################

# Prestige Wine Cellars designs and builds luxury custom wine cellars, wine rooms
# and glass wine walls for high-end residential and hospitality environments.

################################################################################
# CONTACT
################################################################################

Contact: Info@theprestigecellars.com
Contact: https://www.theprestigecellars.com/contact-us

################################################################################
# LEGAL
################################################################################

# All content on theprestigecellars.com is protected by copyright and may not be
# reproduced or redistributed in bulk without explicit written permission from
# Prestige Wine Cellars.