Rispondi 
LINK PER ANALIZZARE IL FILE ROBOTS.TXT
Modalitą discussione Modalitą lineare
08-12-2006, 19:59
Messaggio: #1 (permalink)
L'avatar di bluroy bluroy
Apprendista
**
Registrato: Dec 2006
Messaggi: 93
Reputazione:

LINK PER ANALIZZARE IL FILE ROBOTS.TXT


molti non lo utilizzano,ma se si vuol tenere fuori da occhi indiscreti cartelle alle quali non si vuole far avere accesso ai motori di ricerca lo consiglio.
questo e' il link all'interno ce' una guida se non siete pratici nel crearlo

http://tool.motoricerca.info/analizzatore-robots.phtml


sicurezza download Removal_Tool




trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
27-12-2006, 11:50
Messaggio: #2 (permalink)
L'avatar di OMEGA OMEGA
Apprendista
**
Registrato: Dec 2006
Messaggi: 32
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


Nella guida ? scritto: "? sempre consigliato creare un file robots.txt, anche quando il suo contenuto si limita a dare via libera a tutti gli spider. La sua semplice esistenza nella directory principale del sito eviter? infatti un errore 404 (file non trovato), con conseguenze che variano da server a server, a seconda della loro configurazione."

Quale sarebbero queste conseguenze , qualcuno lo sa ? E un' altra curiosit? : come sapere che cosa si trova scritto nel file robots.txt contenuto in quei siti che non permettono la visione diretta del file sopramenzionato ( e perch? ci? avviene ) ?

Nessuno č perduto quanto colui che si crede al sicuro

Visita sito dell'autore trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
28-12-2006, 04:09
Messaggio: #3 (permalink)
L'avatar di bluroy bluroy
Apprendista
**
Registrato: Dec 2006
Messaggi: 93
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


comunque serve a poco e niente perche' gli spider lo ignorano come quando nel meta tag metti index no follow ,alla fine se vogliono vedono ugualmente tutto cio' che hai nel sito


sicurezza download Removal_Tool




trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
28-12-2006, 20:30
Messaggio: #4 (permalink)
L'avatar di gokufg gokufg
Amministratore
*******
Registrato: Oct 2006
Messaggi: 2,364
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


omega ha scritto:
E un' altra curiosit? : come sapere che cosa si trova scritto nel file robots.txt contenuto in quei siti che non permettono la visione diretta del file sopramenzionato

Scrivi http://www.nomesito.it/robots.txt (dovrebbe funzionare con tutti i siti che lo utilizzano!

bluroy ha scritto:
comunque serve a poco e niente perche' gli spider lo ignorano come quando nel meta tag metti index no follow ,alla fine se vogliono vedono ugualmente tutto cio' che hai nel sito

Su questo non sono molto daccordo: se vogliono li prendono per? credo non li indicizzano...


Finito il seo contest zanzara mannara: complimentati con i vincitori del SEO contest wink Ecco la SERP: zanzara mannara
Presentati al Forum PW se ancora non l'hai fatto 07

Visita sito dell'autore trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
30-12-2006, 16:47
Messaggio: #5 (permalink)
phpone
Apprendista
**
Registrato: Nov 2006
Messaggi: 73
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


gokufg ha scritto:

bluroy ha scritto:
comunque serve a poco e niente perche' gli spider lo ignorano come quando nel meta tag metti index no follow ,alla fine se vogliono vedono ugualmente tutto cio' che hai nel sito

Su questo non sono molto daccordo: se vogliono li prendono per? credo non li indicizzano...

teoricamente non dovrebbero nemmeno guardare file e cartelle escluse con il robots.txt
lo spider e' una macchina che ha una "lista di indirizzi" da visionare..... col robots te gli dici di "eliminare" dalla lista questi url... e lui non li visiona


Zanzara Mannara

trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
30-12-2006, 17:08
Messaggio: #6 (permalink)
L'avatar di gokufg gokufg
Amministratore
*******
Registrato: Oct 2006
Messaggi: 2,364
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


phpone ha scritto:
teoricamente non dovrebbero nemmeno guardare file e cartelle escluse con il robots.txt
lo spider e' una macchina che ha una "lista di indirizzi" da visionare..... col robots te gli dici di "eliminare" dalla lista questi url... e lui non li visiona


La penso esattamente come te:14:
Ma si sa che zio Google ogni tanto fa quello che gli pare53


Finito il seo contest zanzara mannara: complimentati con i vincitori del SEO contest wink Ecco la SERP: zanzara mannara
Presentati al Forum PW se ancora non l'hai fatto 07

Visita sito dell'autore trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
30-12-2006, 22:45
Messaggio: #7 (permalink)
Helmakil
Forumista Giovane
***
Registrato: Dec 2006
Messaggi: 134
Reputazione:

RE: LINK PER ANALIZZARE IL FILE ROBOTS.TXT


hm... direi di no. Se la pagina ? visibile all'utente, allora anche il motore deve e pu? vederla, altrimenti non ? corretto, e ognuno fa quello che gli pare. Quindi sono convinto che... Beh, lo leggano ma lo ignorino 18

trova tutti i messaggi dell'autore Quota questo messaggio nella risposta
Rispondi 

Discussioni simili
Discussione: Autore Risposte: Letto: Ultimo messaggio
  LINK PER CONVALIDA W3C bluroy 1 1,140 10-12-2006 12:20
Ultimo messaggio: phpone

LINK PER ANALIZZARE IL FILE ROBOTS.TXT
Guarda versione stampabile
Invia la discussione a un amico
Sottoscrivi la discussione
Aggiungi discussione alle favorite

Regole di Scrittura
Tu non puoi inserire nuovi messaggi.
Tu non puoi rispondere ai messaggi.
Tu non puoi inviare messaggi.
Tu non puoi modificare i tuoi messaggi.
Il codice HTML č Disattivato.
Il codice MyCode č Attivato.
Gli Smilies sono Attivato.
Il codice [IMG] Attivato.
Vai al Forum:

Data e Ora attuale: 13-10-2008, 13:44

Contattaci - Punto Web