# ======================================================================
# robots.txt — maxton.com.ua | версія 02.09.2026
# ЩО ЗМІНЕНО проти версії 09.07.2026:
# 1) ПРИБРАНО "Disallow: /*?" — воно закривало для Googlebot БУДЬ-ЯКУ
#    адресу з параметрами. Якщо фід віддавав хоч одне посилання виду
#    index.php?route=product/product&product_id=… , Merchant Center
#    бачив "цільова сторінка не працює". Замість нього — точковий
#    список сміттєвих параметрів (нижче).
# 2) ЗААНКОРЕНО службові розділи. Було "Disallow: /*cart", "/*search",
#    "/*login" — збіг у БУДЬ-ЯКОМУ місці URL, тобто товар із "cart" чи
#    "search" у ЧПУ випадково закривався. Стало /cart, /ru/cart тощо.
# 3) ДОДАНО власну групу AdsBot-Google / AdsBot-Google-Mobile. Ці боти
#    Google ІГНОРУЮТЬ групу "*", тому раніше ходили взагалі без правил
#    (включно з /admin). Тепер мають свою групу.
# 4) Ресурси для рендерингу, блок OCFilter та ШІ-ботів — без змін.
# ======================================================================

User-agent: *

# --- Службові маршрути OpenCart ---
Disallow: /*route=account/
Disallow: /*route=affiliate/
Disallow: /*route=checkout/
Disallow: /*route=product/search
Disallow: /index.php?route=account
Disallow: /index.php?route=account/login
Disallow: /index.php?route=product/search
Disallow: /admin
Disallow: /system

# --- Службові розділи (ЧПУ), укр + ru ---
Disallow: /cart
Disallow: /checkout
Disallow: /login
Disallow: /logout
Disallow: /my-account
Disallow: /wishlist
Disallow: /vouchers
Disallow: /compare-products
Disallow: /search
Disallow: /make_order
Disallow: /ru/cart
Disallow: /ru/checkout
Disallow: /ru/login
Disallow: /ru/logout
Disallow: /ru/my-account
Disallow: /ru/wishlist
Disallow: /ru/vouchers
Disallow: /ru/compare-products
Disallow: /ru/search
Disallow: /ru/make_order
Disallow: /*/prom_landing

# --- OCFilter: сторінки фільтрів ---
Disallow: /filter/
Disallow: /*/filter/
Disallow: /*?*ocf=
Disallow: /*&ocf=

# --- Сміттєві параметри (замість блокування всіх "?") ---
Disallow: /*?sort=
Disallow: /*&sort=
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?limit=
Disallow: /*&limit=
Disallow: /*?filter=
Disallow: /*&filter=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

# --- Ресурси для коректного рендерингу (ВАЖЛИВО, не чіпати) ---
Allow: /catalog
Allow: /image
Allow: /*.js
Allow: /*.css
Allow: /*.gif
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.svg
Allow: /*.webp
Allow: /*.ico
Allow: /*.woff
Allow: /*.woff2
Allow: /*.ttf

# --- Фіди-сайтмапи (адреси з параметрами) ---
Allow: /index.php?route=extension/feed/google_sitemap
Allow: /index.php?route=extension/feed/ocfilter_sitemap

# Googlebot / Googlebot-Image окремих груп НЕ МАЮТЬ навмисно —
# вони виконують правила "*".

# ==== AdsBot Google: ігнорує групу "*", тому потрібна власна ====
User-agent: AdsBot-Google
User-agent: AdsBot-Google-Mobile
Disallow: /admin
Disallow: /system
Allow: /

# ==== bingbot: ті самі правила + пригальмування ====
User-agent: bingbot
Crawl-delay: 10
Disallow: /admin
Disallow: /system
Disallow: /filter/
Disallow: /*/filter/
Disallow: /*?*ocf=
Disallow: /*?sort=
Disallow: /*?order=
Disallow: /*?limit=
Disallow: /*?filter=
Disallow: /cart
Disallow: /checkout
Disallow: /login
Disallow: /wishlist
Disallow: /compare-products
Disallow: /search
Disallow: /ru/cart
Disallow: /ru/checkout
Disallow: /ru/login
Disallow: /ru/wishlist
Disallow: /ru/compare-products
Disallow: /ru/search
Allow: /index.php?route=extension/feed/google_sitemap
Allow: /catalog
Allow: /image
Allow: /*.js
Allow: /*.css
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.svg
Allow: /*.webp
Allow: /*.woff
Allow: /*.woff2

# ==== Боти ШІ: сайт відкритий, важкі сторінки закриті ====
User-agent: GPTBot
Disallow: /admin
Disallow: /system
Disallow: /*route=
Disallow: /*ocf=
Disallow: /*/filter/
Allow: /

User-agent: ChatGPT-User
Disallow: /admin
Disallow: /system
Disallow: /*route=
Disallow: /*ocf=
Disallow: /*/filter/
Allow: /

User-agent: PerplexityBot
Disallow: /admin
Disallow: /system
Disallow: /*route=
Disallow: /*ocf=
Disallow: /*/filter/
Allow: /

User-agent: ClaudeBot
Disallow: /admin
Disallow: /system
Disallow: /*route=
Disallow: /*ocf=
Disallow: /*/filter/
Allow: /

# ==== Повне блокування паразитів і збору для навчання ШІ ====
User-agent: Google-Extended
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: BabbarBot
Disallow: /

User-agent: Barkrowler
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

User-agent: PetalBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: Amazonbot
Disallow: /

# ==== Карти сайту ====
Sitemap: https://maxton.com.ua/index.php?route=extension/feed/google_sitemap
Sitemap: https://maxton.com.ua/index.php?route=extension/feed/ocfilter_sitemap