User-agent: * Sitemap: https://www.vinalia.mc/sitemap.xml ############## # custom # ############## # --------------------------------------------------------------- # Vinalia — 4 settembre 2026 # Le schede prodotto, le pagine produttore e le categorie restano APERTE. # Qui si chiude solo lo spazio dei filtri: ogni combinazione è un indirizzo # diverso, e ogni indirizzo costa al server una pagina calcolata da zero. # La sitemap elenca gli indirizzi puliti e le pagine con parametri # dichiarano già il canonico: nulla resta irraggiungibile. # # Le regole sono ripetute per nome perché Odoo apre un « User-agent: * » # suo qui sopra: Google unisce i gruppi omonimi, altri no. # --------------------------------------------------------------- User-agent: * Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= # 29/10/2026: i link del cambio lingua (/website/lang/it_IT?r=...) non sono pagine, sono redirezioni; # Google li esplorava («Explorée, actuellement non indexée»). Le pagine /it e /en restano aperte. Disallow: /website/lang/ # «cepage_id» era il vecchio parametro della pagina /cepages, spenta l'08/09. # ⚠️ NON scrivere «/*?*page=»: nel robots.txt il testo si cerca ovunque, e # dentro «cepage=» c'e' «page=». Quella riga bloccava le pagine dei vitigni # senza che nessuno se ne accorgesse (scoperto l'08/09 con Search Console). Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Googlebot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Googlebot-Image Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: bingbot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Applebot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: DuckDuckBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: YandexBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: PetalBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Baiduspider Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Sogou web spider Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: SemrushBot Disallow: / # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: AhrefsBot Disallow: / # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: DotBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: MJ12bot Disallow: / # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: ClaudeBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: GPTBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: PerplexityBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: OAI-SearchBot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Amazonbot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session User-agent: Twitterbot Crawl-delay: 10 Disallow: /*?*order= Disallow: /*?*ppg= Disallow: /*?page= Disallow: /*&page= Disallow: /*?*min_price= Disallow: /*?*max_price= Disallow: /*?*category= Disallow: /*?*attrib= Disallow: /*?*search= Disallow: /*?*appellation= Disallow: /*?*filter_ Disallow: /*?*post_type= Disallow: /*?*producer_id= Disallow: /website/lang/ Disallow: /*?*cepage_id= # --- 21 settembre 2026 --- # Chiamate AJAX: non producono nessuna pagina indicizzabile, ma fra il 27/08 e # il 18/09 si sono mangiate 2.110 richieste su 10.600, il 20% del budget di # esplorazione. «recently_viewed_update» faceva perfino SCRIVERE sul database a # ogni passaggio del robot. Il contenuto vero (prezzo, descrizione, scheda) e' # gia' nell'HTML che il server manda: bloccarle non toglie nulla a Google. # NON bloccare /website/translations/: serve a Google per disegnare la pagina. Disallow: /website_mass_mailing/ Disallow: /shop/products/recently_viewed_update Disallow: /website_sale/get_combination_info Disallow: /nextpage/ Disallow: /fetch_ai_recommanded_product/ Disallow: /shop/cart Disallow: /shop/checkout Disallow: /shop/payment Disallow: /shop/confirmation Disallow: /shop/address Disallow: /my Disallow: /web/login Disallow: /web/session # Meta: in sei minuti ha fatto la maggior parte delle richieste al sito, # e in otto giorni ci ha portato una sola sessione. User-agent: meta-externalagent Disallow: / # ByteDance: stesso discorso, nessun ritorno. User-agent: Bytespider Disallow: / # ATTENZIONE — « facebookexternalhit » NON è bloccato, di proposito: è quello # che genera l'anteprima quando un link del sito viene mandato su WhatsApp o # su Facebook. Bloccarlo vorrebbe dire mandare ai clienti italiani link nudi, # senza foto né prezzo. Non toccarlo. # # Gli assistenti (ClaudeBot, GPTBot, PerplexityBot, OAI-SearchBot) restano # ammessi di proposito: sono un canale in cui farsi trovare. User-agent: DataForSeoBot Disallow: / # --- 21 settembre 2026 --- # Crawler SEO fuori, su decisione di Pier. In 24 ore facevano 4.883 richieste # (Ahrefs 2.189, DataForSeo 1.268, MJ12 754, Semrush 668) su un sito dove # Googlebot ne fa 1.001: occupavano l'unico worker senza portare un cliente. # Se un giorno ci servono i loro strumenti per guardare i nostri backlink, # basta togliere il gruppo che lo riguarda.