User-agent: * Disallow: /*buy_now Disallow: /*add_product Disallow: /shopping_cart.php Disallow: /advanced_search_result.php Disallow: /koszyk/ Disallow: /var/ Disallow: /kat_cache.php Disallow: /konto/ Disallow: /files/ Disallow: /adminkurt/ Disallow: /dane/ Disallow: /kontakt/ Disallow: /zamowienie/ Disallow: /adder/ Disallow: /ext/ Disallow: /Excel/ Disallow: /admailer/ Disallow: /_*/ Disallow: /media/ Disallow: /sms/ # --- 2026-08-17: blokada crawlowania śmieciowych URL-i (zero wartości SEO) --- # UWAGA: filtry pojazdu (id_typu/id_marki/id_modelu) NIE są blokowane — # zwracają wartościową treść pod konkretny samochód, mają się indeksować. # cPath= (kategorie) też zostaje indeksowalne. # Sortowanie listingu = ten sam zestaw produktów w innej kolejności (duplikat) Disallow: /*sort= # Wyniki wyszukiwania wewnętrznego (nieskończona przestrzeń URL) Disallow: /*keywords= Disallow: /*search= # Recenzje jako osobny URL Disallow: /*review= # Akcje koszyka (nie do crawlowania) Disallow: /*pokaz_koszyk= Disallow: /*odswiez_koszyk= Disallow: /*koszt_dostawy= # Parametry reklamowe Google Ads = duplikaty treści (canonical) Disallow: /*gclid= Disallow: /*gad_source= Disallow: /*gad_campaignid= Disallow: /*gbraid= User-agent: Amazonbot Disallow: / # --- 2026-09-06: blokada botow TRENINGOWYCH AI (~90% ruchu, koszt serwera bez zysku) --- # CELOWO nie blokujemy botow WYSZUKIWANIA/POBIERANIA AI, bo one moga przyslac klienta: # OAI-SearchBot, ChatGPT-User (OpenAI), Claude-SearchBot, Claude-User (Anthropic), # PerplexityBot — dziedzicza reguly z "User-agent: *" (dozwolone na tresc). # Googlebot/Bingbot tez zostaja (klasyczne SEO). Scraper 57.141.20.0/24 = tylko CSF (falszywy UA). User-agent: ClaudeBot Disallow: / User-agent: GPTBot Disallow: / User-agent: CCBot Disallow: / User-agent: Bytespider Disallow: / User-agent: Meta-ExternalAgent Disallow: / Sitemap: https://e-autoparts.pl/googlesitemaps/sitemapindex.xml Sitemap: https://e-autoparts.pl/sitemap-producenci.php