Sito in fase di sviluppo: bloccare tutti gli spider

filomeni

Moderatore
Membro dello Staff
MOD
14 Mag 2006
1.054
6
38
53
Roseto degli Abruzzi (TE)
www.sitiweb.cloud
Mi sto ponendo una domanda, ho in corso la progettazione di un sito che attualmente è online. Il sito è navigabile e sono presenti i contenuti ma è molto complesso quindi ci sono variazioni e repentini cambiamenti di link...
La cosa migliore da fare è bloccare tutti gli spider?
Quello che mi viene da pensare è che sicuramente troveranno molti "falli" come 404 o altri errori dovuti alle variazioni del corso della progettazione...
Oppure c'è un sistema per "dichiarare" ai motori di ricerca che il sito è in lavorazione?
Grazie.
 

maxbossi

Amministratore
Membro dello Staff
ADMIN
MOD
25 Feb 2003
2.025
43
48
www.ikiweb.it
Una soluzione (secondo me la più corretta) consiste nello sviluppare il sito off-line oppure on-line ma "dietro le quinte" (cioè non renderlo da subito visibile a spider ed utenti casuali).

Se questa strada non ti convince o non è possibile ed hai paura delle possibili conseguenze della visita di uno spider puoi impostare un blocco temporaneo (che rimuoverai quando il sito sarà finito) utilizzando il file robots.txt

Ciao
 

filomeni

Moderatore
Membro dello Staff
MOD
14 Mag 2006
1.054
6
38
53
Roseto degli Abruzzi (TE)
www.sitiweb.cloud
per il file robot.txt, in questo caso bisogna solo scrivere nel file "Disallow: /" o altro?
Una soluzione (secondo me la più corretta) consiste nello sviluppare il sito off-line oppure on-line ma "dietro le quinte" (cioè non renderlo da subito visibile a spider ed utenti casuali).

Se questa strada non ti convince o non è possibile ed hai paura delle possibili conseguenze della visita di uno spider puoi impostare un blocco temporaneo (che rimuoverai quando il sito sarà finito) utilizzando il file robots.txt

Ciao
 
Discussioni simili
Autore Titolo Forum Risposte Data
Danilo82 Problema con sito web in fase di creazione HTML e CSS 3
glm2006ITALY Guida Il proprio sito WordPress è professionale? WordPress 0
shelbystudio cliente moroso: posso disattivare email e sito in attesa del pagamento? Leggi, Normative e Fisco 3
R Messaggio apertura sito WordPress 4
E Benvenuti sul Nuovo Sito: Explore Como Lake! Presenta il tuo Sito 0
R Aiuto ripristino sito web Presentati al Forum 0
A Vendo sito web news economia, finanza, immobiliare online da pochi mesi Compravendita siti e domini 0
D [COMPRO/CERCO] GUEST POST o scambio link per sito di Spiritualità ed Esoterismo. Vendere e Acquistare pubblicita' online 0
M Vendo il mio sito web teknosurfng.com, che trasmette nel campo della tecnologia Compravendita siti e domini 0
G Perché il mio sito su Google news fa vedere le immagini degli articoli la mia foto profilo? WordPress 1
D protezione cartelle: blocco visualizzazione/scaricamento contenuto, ma abilitazione utilizzo dati da parte di file .php presenti sul sito Web Server 1
M Analisi sito per pulire codice inutile HTML e CSS 1
C iscrizioni malevole su sito off-line WordPress 6
M [cerco webmaster] sito web da modificare Offerte e Richieste di Lavoro e/o Collaborazione 0
F Animazione testo sito web diminuire grandezza di un testo allo scroll Javascript 0
N Vendo sito web di casino online con 1000 giochi Compravendita siti e domini 0
R Recupero di permalink di un sito che è stato eliminato per errore WordPress 5
A Web master per semplice sito web Offerte e Richieste di Lavoro e/o Collaborazione 2
G VENDO sito completo Compravendita siti e domini 0
N Creazione sito web senza Partita IVA (Era: mettersi in regola) Leggi, Normative e Fisco 1
V dati scomparsi dal sito HTML e CSS 3
E Sito violato, file modificati, cartelle create WordPress 1
A [Cerco][Retribuito] Correzioni errori sito web Offerte e Richieste di Lavoro e/o Collaborazione 3
G Il mio sito dopo aver abilitato l'ssl non visualizza le immagini con indirizzi senza ssl HTML e CSS 0
M Memorizzazione temi per le diverse pagine del sito Javascript 1
MarcoGrazia Sistema di news interno al sito PHP 3
M Non ho rinnovato il mio sito su Aruba... Domini 1
G Vi presento il mio sito: Globalmeteo Presenta il tuo Sito 0
F Cerco fotografo per sito abiti da sposa Discussioni Varie 2
Shyson Google search non trova il mio sito SEO e Posizionamento 1
S Sito Wordpress creato in localhost PHP 1
N Consigli SEO per il mio sito di web design SEO e Posizionamento 0
M Normativa sito di rubriche: blog o magazine o altro? Leggi, Normative e Fisco 0
L PHP motore di ricerca nel sito PHP 1
MarcoGrazia Rifacimento sito de Genealogia italiana Presenta il tuo Sito 4
Z Hacker sito ARUBA Sicurezza e Virus 0
Shyson Non mi fa accedere al sito WordPress 12
Stex1967 Salvare una immagine che si trova su porta TCP 8080 di altro sito PHP 7
R Dubbi trasferimento sito WordPress 1
D Creazione sito e-commerce WP CMS (Content Management System) 0
R Dubbi copia sito CMS (Content Management System) 2
A Consiglio per creazione sito web CMS (Content Management System) 1
S CREAZIONE DI SITO PER CORSI DI FORMAZIONE WordPress 3
M eliminare padding logo sito HTML e CSS 2
M Come individuare il link sito entrante Google Analytics 1
I PROBLEMA: Sostituzione sito XAMPP E-Commerce 0
D Progetto sito Discussioni Varie 1
M [Cerco] aiutanti per creare sito Offerte e Richieste di Lavoro e/o Collaborazione 8
R inserire video nel sito HTML e CSS 15
C Come caricare foto da google foto ad un sito? Discussioni Varie 1

Discussioni simili