Eliminare sito da motori di ricerca farlocchi

Controllando le mie statistiche su Google Analytics, ho scoperto che il mio sito è indicizzato da motori di ricerca non proprio sicuri, senza il mio consenso;

come posso eliminare l'indicizzazione del mio sito da quei motori di ricerca?

ecco un esempio

Che problema ti da? Credo sia soltanto un bene essere indicizzato in molti motori :D

È che sinceramente non mi fido di loro, ma se è tutto apposto sto tranquillo.

[serverhost]

ciao per risolvere il tuo problema puoi semplicemente inserire questo nel file htaccess che trovi nella cartella principale di altervista, ho di qualsiasi altro host basta che sia un host linux

<IfModule mod_rewrite.c>
SetEnvIfNoCase ^User-Agent$ .*(craftbot|download|extract|stripper|sucker|ninja |clshttp|webspider|leacher|collector|grabber|webpi ctures) HTTP_SAFE_BADBOT
SetEnvIfNoCase ^User-Agent$ .*(libwww-perl|aesop_com_spiderman) HTTP_SAFE_BADBOT
Deny from env=HTTP_SAFE_BADBOT
</ifModule>

questo impedisce dei spider di 3 categoria di incidalizare il tuo sito rendentolo anche piu veloce, incidalizazione rallenta il sito se ci sono troppi spider che lo analizano, con questo consentirai solo a google, bing, virgilio, di incidalizare il tuo sito. Ps questi sono i nomi degli spider bloccati se ne vuoi bloccare altri devi solo aggiungere altri nomi in questa riga, separando con (|) questo simbolo i vari provider

craftbot|download|extract|stripper|sucker|ninja|cl shttp|webspider|leacher|collector|grabber|webpictu res

-

scusa viene scritto in un modo diverso nel [QUOTE/QUOTE] e questo il codice corretto

<IfModule mod_rewrite.c>
SetEnvIfNoCase ^User-Agent$ .*(craftbot|download|extract|stripper|sucker|ninja |clshttp|webspider|leacher|collector|grabber|webpi ctures) HTTP_SAFE_BADBOT
SetEnvIfNoCase ^User-Agent$ .*(libwww-perl|aesop_com_spiderman) HTTP_SAFE_BADBOT
Deny from env=HTTP_SAFE_BADBOT
</ifModule>

cioe non e che io ho sbagliato a scrivere e semplicemente che il forum di altervista se scrivo il codice dentro il quot mi cancella dei caratteri quindi lo scrivo senza per farlo vedere in modo piu chiaro

nulla pultrooppo pure cosi il forum di altervista lo cambia non so come fare per farti vedere il codice correto scusa ma forse ce un problema su altervista forum quello non e il codice che ho scritto io, altervista me lo modifica dammi un email in pvt telo mando in pvt li di sicuro lo potrai leggere, non usare quello postato qui perche non funzionerà per colpa del forum di altervista

Te lo modifica perche usi il tag QUOTE. Devi usare il tagb CODE

[darkwolf]

Basta usare il robots.txt o, come stato già consigliato da serverhost (che evidentemente continua a sbattersene del regolamento del forum - e pure della community), l'htaccess

-
Ne ho qualche esempio qui: http://www.darkwolf.it/robots.txt

Grazie ad entrambi, volevo chiedere un ultima cosa inerente all'argomento;

Conoscete percaso il nome del bot che usa babylon?

[darkwolf]

Credo (ma non posso assicurartelo) che babylon search (pagina anomala che si installa a mo di spyware) non abbia un suo database, ma si appoggi ad altri (ad esempio, allo stesso google) e quindi sia solo una maschera di motore di ricerca personalizzato, tutto qui.
In tal caso non avrebbe nessun bot da bloccare...

Ok, grazie mille per la risposta, farò sicuramente una ricerca approfondita sulla questione.