# --- crawleři SEO nástrojů --- # Ahrefs, Semrush a Majestic nejsou vyhledávače: staví databáze zpětných odkazů # na prodej a na indexaci nemají vliv. V produkčním logu dělali 52 % veškerého # provozu, zatímco Googlebot 15 %. Vyhledávače (Google, Seznam, Bing, ...) # blokované nejsou. User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: MJ12bot Disallow: / User-agent: DotBot Disallow: / User-agent: BLEXBot Disallow: / User-agent: DataForSeoBot Disallow: / User-agent: * Allow: / # --- servisní endpointy, do indexu nepatří --- Disallow: /import/ Disallow: /cron/ Disallow: /cron-video Disallow: /scrapper/ Disallow: /system-admin/ Disallow: /test/ Disallow: /qr Disallow: /copy-prepared Disallow: /prepared Disallow: /images-advert-pro Disallow: /images-post-pro Disallow: /images-album-pro # --- uživatelské sekce (přihlášení, dashboard, zprávy) --- Disallow: /sign/ Disallow: /*/sign/ Disallow: /user/ Disallow: /*/user/ Disallow: /messages/ Disallow: /*/messages/ Disallow: /ajax/ Disallow: /*/ajax/ Disallow: /*/spravovat-inzerat/ Disallow: /copyadvert/ Disallow: /*/copyadvert/ Disallow: /help/ Disallow: /*/help/ # --- cizí tracking parametry --- # _fid přidávají externí zdroje návštěvnosti; v Search Console jich bylo 15 tis. # Canonical je odkazuje správně, ale zbytečně žerou crawl budget. Disallow: /*?*_fid= Disallow: /*?*fbclid= Disallow: /*?*gclid= Disallow: /*?*utm_ # --- parametry, které jen množí varianty téhož výpisu --- Disallow: /*?*search= Disallow: /*?*sort= Disallow: /*?*do= Disallow: /*?*addReview= Disallow: /*?*like= Disallow: /*?*dislike= Sitemap: https://www.privatzone.com/sitemap.xml