errore con il file robots.txt ??

myloveandme · 16-12-2009, 22:04

Ciao Ragazzi,
stavo facendo un controllo del mio sito (myloveandme.net) con SEO FOR FIREFOX per il controllo dei parametri delle keyword e meta tag
e mi da come messaggio di errore:

errore 403 forbidden by robots.txt

cosa significa che il mio file robots.txt non va bene ?
che non viene visto correttamente dallo spider ?

se qualcuno ha qualche informazione vi prego di darmi notizie !!!

Grazie
ciao

Ludus · 17-12-2009, 13:40

Perché non posti il file robots?

**Ale76** · 17-12-2009, 14:49

Leggendo solo l'errore significa che la pagina che stai tentando di analizzare è protetta tramite il file robots.txt, ovvero non viene indicizzata.

myloveandme · 17-12-2009, 20:15

Citazione:

Originariamente inviato da Ludus

Perché non posti il file robots?

ecco il file robots.txt che ho su:

User-agent: *
Disallow: /bin/
Disallow: /admn/
Disallow: /cart.aspx
Disallow: /actioncart.aspx
Disallow: /newreg.aspx
Disallow: /order.aspx
Disallow: /account.aspx
Disallow: /showinfo.aspx
Disallow: /404.aspx
Disallow: /reqpass.aspx

non mi sembra errato

myloveandme · 17-12-2009, 20:17

Citazione:

Originariamente inviato da Ludus

Perché non posti il file robots?

Ciao Ale76,
ho appena postato il file robots.txt

e l' analisi l'ho fatto con SEO FOR FIREFOX sulla home page e nelle diverse landing page

per questo non capisco che problema trova nell'analisi , dandomi appunto
errore 403 forbidden by robots.txt

Grazie per una vs. risposta!!!
ciao

Ludus · 17-12-2009, 21:24

Citazione:

Originariamente inviato da myloveandme

non mi sembra errato

Neanche a me in effetti...

**Ale76** · 17-12-2009, 23:34

Questo già mi sembra un errore

Disallow: /admn/

Adesso non ho SEO for Firefox installato, domani provo a controllare...

**Ale76** · 18-12-2009, 09:12

Puoi spiegare meglio le operazioni che effettui con il tool? Io ho provato e non dà errori...
Puoi eventualmente postare qualche screenshot...

myloveandme · 19-12-2009, 12:01

Citazione:

Originariamente inviato da Ale76

Puoi spiegare meglio le operazioni che effettui con il tool? Io ho provato e non dà errori...
Puoi eventualmente postare qualche screenshot...

Ciao Ale76
il componente che uso di firefox è SEOmoz

che grazie alla funzione keywords >> Page Analysis >> Meta Tags

permette di vedere tutta l'analisi (con eventuali errori no Google Friendly) delle pagine del sito

Se lo faccio per i miei concorrenti mi da tutti i dati, mentre se lo faccio per il mio myloveandme.net mi da l'errore
Error: 403 Forbidden by robots.txt

La cosa mi preoccupa perchè non vorrei che abbia commesso qualche errore nel robots.txt !!!

myloveandme · 19-12-2009, 18:39

non so cosa dire ragazzi

magari posso anche provare a togliere la segnalazione alla site map, ma la sintassi mi sembra corretta del mio robots.txt !!

Non capisco perchè se al componente aggiuntivo di firefox SEOmoz
gli faccio fare l'analisi delle keyword ( [URL]http://www.seomoz.org/term-extractor[/URL] ) me le estrae correttamente

ma se gli faccio fare la ricerca dei meta tag
( [URL]http://www.submitexpress.com/cgi-bin/analyzer/meta.pl[/URL] )
mi da l' errore 403 forbidden robots
NB: mentre se analizzo quello dei miei concorrenti mi tira fuori i loro dati

Cosa posso fare scondo voi ???

**Ale76** · 21-12-2009, 14:56

Proviamo a ripartire da zero: elimina il file robots e riprova. A quel punto dovrebbe darti un errore 404 e non più 403.
Elimina anche il meta "robots"...

Se, anche eliminando il file continua a darti un 403 allora è un problema del server e ci concentriamo su quello.

myloveandme · 21-12-2009, 21:24

Citazione:

Originariamente inviato da Ale76

Proviamo a ripartire da zero: elimina il file robots e riprova. A quel punto dovrebbe darti un errore 404 e non più 403.
Elimina anche il meta "robots"...

Se, anche eliminando il file continua a darti un 403 allora è un problema del server e ci concentriamo su quello.

ho provato Ale76,
ho tolto il robots e rifatto l'analisi
ora mi da

error: 302 found

riesci a capire da cosa può dipendere ??

**Ale76** · 23-12-2009, 11:13

http://en.wikipedia.org/wiki/HTTP_302

A questo punto mi viene da pensare che sia un'impostazione del server, tipo attraverso un .htaccess. Riesci a verificare?

myloveandme · 23-12-2009, 20:08

Citazione:

Originariamente inviato da Ale76

[url]http://en.wikipedia.org/wiki/HTTP_302[/url]

A questo punto mi viene da pensare che sia un'impostazione del server, tipo attraverso un .htaccess. Riesci a verificare?

scusa Ale la profonda ignoranza ma non saprei proprio come fare

cosa dovrei fare per provare ?

**Ale76** · 24-12-2009, 10:00

1- Hai un server con Apache o IIS?
2- Se è con Apache hai un file .htaccess?
3- Se sì, lo puoi postare o inviare in privato?

myloveandme · 24-12-2009, 10:18

Citazione:

Originariamente inviato da Ale76

1- Hai un server con Apache o IIS?
2- Se è con Apache hai un file .htaccess?
3- Se sì, lo puoi postare o inviare in privato?

Il mio server:

Name Servers:
[URL="http://www.who.is/nameserver/dns.seeweb.it/"]dns.seeweb.it[/URL]

**Ale76** · 24-12-2009, 11:54

Ho capito, sei in hosting e non sei direttamente tu il gestore del server.
Hai un'area riservata attraverso la quale puoi chiedere le impostazioni del server?
Oppure, ancora più semplicemente non hai provato ad aprire un ticket presso di loro con il tuo problema, dicendo che il server non permette la lettura del tuo file robots e ti blocca alcuni software di analisi?

massy · 24-12-2009, 16:25

Potresti postare l'url del file?

massy · 24-12-2009, 16:42

Trovato

getheader ([url]http://www.myloveandme.net/robots.txt);[/url]
->
Array ( [url] => http://www.myloveandme.net/robots.txt [content_type] => text/plain [http_code] => 200 [header_size] => 250)

A me sembra tutto apposto.

16-12-2009, 22:04	#1 (permalink)
myloveandme Junior Member Data Registrazione: Oct 2009 Messaggi: 40 Thanks: 11 Thanked 0 Times in 0 Posts	errore con il file robots.txt ?? Ciao Ragazzi, stavo facendo un controllo del mio sito (myloveandme.net) con SEO FOR FIREFOX per il controllo dei parametri delle keyword e meta tag e mi da come messaggio di errore: errore 403 forbidden by robots.txt cosa significa che il mio file robots.txt non va bene ? che non viene visto correttamente dallo spider ? se qualcuno ha qualche informazione vi prego di darmi notizie !!! Grazie ciao Tweet

17-12-2009, 14:49	#3 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	Leggendo solo l'errore significa che la pagina che stai tentando di analizzare è protetta tramite il file robots.txt, ovvero non viene indicizzata. __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

17-12-2009, 23:34	#7 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	Questo già mi sembra un errore Disallow: /admn/ Adesso non ho SEO for Firefox installato, domani provo a controllare... __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

18-12-2009, 09:12	#8 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	Puoi spiegare meglio le operazioni che effettui con il tool? Io ho provato e non dà errori... Puoi eventualmente postare qualche screenshot... __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

21-12-2009, 14:56	#11 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	Proviamo a ripartire da zero: elimina il file robots e riprova. A quel punto dovrebbe darti un errore 404 e non più 403. Elimina anche il meta "robots"... Se, anche eliminando il file continua a darti un 403 allora è un problema del server e ci concentriamo su quello. __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

17-12-2009, 13:40	#2 (permalink)
Ludus Junior Member Data Registrazione: Mar 2009 Messaggi: 26 Thanks: 0 Thanked 7 Times in 5 Posts	Perché non posti il file robots?

19-12-2009, 18:39	#10 (permalink)
myloveandme Junior Member Data Registrazione: Oct 2009 Messaggi: 40 Thanks: 11 Thanked 0 Times in 0 Posts	non so cosa dire ragazzi magari posso anche provare a togliere la segnalazione alla site map, ma la sintassi mi sembra corretta del mio robots.txt !! Non capisco perchè se al componente aggiuntivo di firefox SEOmoz gli faccio fare l'analisi delle keyword ( [URL]http://www.seomoz.org/term-extractor[/URL] ) me le estrae correttamente ma se gli faccio fare la ricerca dei meta tag ( [URL]http://www.submitexpress.com/cgi-bin/analyzer/meta.pl[/URL] ) mi da l' errore 403 forbidden robots NB: mentre se analizzo quello dei miei concorrenti mi tira fuori i loro dati Cosa posso fare scondo voi ???

23-12-2009, 11:13	#13 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	http://en.wikipedia.org/wiki/HTTP_302 A questo punto mi viene da pensare che sia un'impostazione del server, tipo attraverso un .htaccess. Riesci a verificare? __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

24-12-2009, 10:00	#15 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	1- Hai un server con Apache o IIS? 2- Se è con Apache hai un file .htaccess? 3- Se sì, lo puoi postare o inviare in privato? __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

24-12-2009, 11:54	#17 (permalink)
Ale76 Alessandro Negri Web Marketing Expert Data Registrazione: Oct 2008 Località: Salsomaggiore Terme Messaggi: 1653 Thanks: 69 Thanked 167 Times in 136 Posts	Ho capito, sei in hosting e non sei direttamente tu il gestore del server. Hai un'area riservata attraverso la quale puoi chiedere le impostazioni del server? Oppure, ancora più semplicemente non hai provato ad aprire un ticket presso di loro con il tuo problema, dicendo che il server non permette la lettura del tuo file robots e ti blocca alcuni software di analisi? __________________ KosmoSol.it -Realizzazione Siti Web e Web Marketing KosmoSol - Servizi e Soluzioni Web su Web Marketing University

24-12-2009, 16:25	#18 (permalink)
massy Massy Junior Member Data Registrazione: Jun 2009 Messaggi: 34 Thanks: 0 Thanked 4 Times in 3 Posts	Potresti postare l'url del file?

24-12-2009, 16:42	#19 (permalink)
massy Massy Junior Member Data Registrazione: Jun 2009 Messaggi: 34 Thanks: 0 Thanked 4 Times in 3 Posts	Trovato getheader ([url]http://www.myloveandme.net/robots.txt);[/url] -> Array ( [url] => http://www.myloveandme.net/robots.txt [content_type] => text/plain [http_code] => 200 [header_size] => 250) A me sembra tutto apposto.

Strumenti Discussione
Visualizza Versione Stampabile Invia questa Pagina via Email
Modalità Visualizzazione
Modalità Lineare Passa a Modalità Ibrida Passa a Modalità Elencata

Ecco i “15” motivi per cui il Tuo Marketing su Facebook NON dà risultati …Clicca e scarica il PDF di 30 Pag già scaricato da gran parte dei Fan:

Ecco i “15” motivi per cui il Tuo Marketing su Facebook NON dà risultati …
Clicca e scarica il PDF di 30 Pag già scaricato da gran parte dei Fan: