.htaccess Καλά και "κακά" spiders

Τεχνικές και μόνο Συζητήσεις για WEB hosting servers, Mail servers, DNS servers. Όχι αναζήτηση υπηρεσιών εδώ!

Συντονιστές: WebDev Moderators, Super-Moderators

Απάντηση
Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27622
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από cordis » 26 Αύγ 2005 15:45

ποια spiders απλά μας τρώνε bandwith και μπορούμε να τα κόψουμε χωρίς δεύτερη σκέψη;

Εδώ μια ενημερωμένη λίστα με όλα τα γνωστά spiders.
http://www.psychedelix.com/agents.html
Τελευταία επεξεργασία από το μέλος cordis την 21 Ιούλ 2008 03:37, έχει επεξεργασθεί 2 φορές συνολικά.
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27622
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από cordis » 26 Αύγ 2005 15:51

και
List of Bad Bots, 2004
http://www.kloth.net/internet/badbots-2004.php
;)
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
ThyClub
Honorary Member
Δημοσιεύσεις: 5312
Εγγραφή: 17 Νοέμ 2003 00:21
Τοποθεσία: Hell's Kitchen
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από ThyClub » 26 Αύγ 2005 16:42

Πρόσθεσα μερικά στην μαύρη λίστα του zeuscms :D :D

Την επόμενη φορά που θα με επισκευτούν θα φάνε πόρτα.. μόνο που.. ΕΙΝΑΙ ΠΟΛΛΑ ΤΑ BOT ΑΡΗ!!!

:evil: :evil: :evil: :evil:

Άβαταρ μέλους
_fantom__
Δημοσιεύσεις: 138
Εγγραφή: 03 Μαρ 2004 23:30
Τοποθεσία: Γη

.htaccess Καλά και "κακά" spiders

Δημοσίευση από _fantom__ » 17 Σεπ 2005 23:38

αν δεν λαμβάνουν υπόψη το robots.txt ...πως μπορείς να τα σταματήσεις; :-?
I’ m the self-inflicted, mind-detonator :think:

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27622
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από cordis » 18 Σεπ 2005 17:59

με .htaccess

Κώδικας: Επιλογή όλων

SetEnvIfNoCase User-Agent "^BotRightHere" bad_bot
SetEnvIfNoCase User-Agent "^[Ww]eb[Bb]andit" bad_bot
SetEnvIfNoCase User-Agent "^Alexibot" bad_bot
SetEnvIfNoCase User-Agent "^Aqua_Products" bad_bot
SetEnvIfNoCase User-Agent "^asterias" bad_bot
SetEnvIfNoCase User-Agent "^b2w/0.1" bad_bot
SetEnvIfNoCase User-Agent "^BackDoorBot" bad_bot
SetEnvIfNoCase User-Agent "^BackDoorBot/1.0" bad_bot
SetEnvIfNoCase User-Agent "^Black.Hole" bad_bot
SetEnvIfNoCase User-Agent "^BlackWidow" bad_bot
SetEnvIfNoCase User-Agent "^BlowFish" bad_bot
SetEnvIfNoCase User-Agent "^BlowFish/1.0" bad_bot
SetEnvIfNoCase User-Agent "^Bookmark search tool" bad_bot
SetEnvIfNoCase User-Agent "^BotALot" bad_bot
SetEnvIfNoCase User-Agent "^BotRightHere" bad_bot
SetEnvIfNoCase User-Agent "^BuiltBotTough" bad_bot
SetEnvIfNoCase User-Agent "^Bullseye" bad_bot
SetEnvIfNoCase User-Agent "^Bullseye/1.0" bad_bot
SetEnvIfNoCase User-Agent "^BunnySlippers" bad_bot
SetEnvIfNoCase User-Agent "^Cegbfeieh" bad_bot
SetEnvIfNoCase User-Agent "^CheeseBot" bad_bot
SetEnvIfNoCase User-Agent "^CherryPicker" bad_bot
SetEnvIfNoCase User-Agent "^CherryPickerElite/1.0" bad_bot
SetEnvIfNoCase User-Agent "^CherryPickerSE/1.0" bad_bot
SetEnvIfNoCase User-Agent "^ChinaClaw" bad_bot
SetEnvIfNoCase User-Agent "^Copernic" bad_bot
SetEnvIfNoCase User-Agent "^CopyRightCheck" bad_bot
SetEnvIfNoCase User-Agent "^Cosmos" bad_bot
SetEnvIfNoCase User-Agent "^Crescent" bad_bot
SetEnvIfNoCase User-Agent "^Crescent Internet ToolPak HTTP OLE Control v.1.0" bad_bot
SetEnvIfNoCase User-Agent "^Custo" bad_bot
SetEnvIfNoCase User-Agent "^DISCo" bad_bot
SetEnvIfNoCase User-Agent "^DittoSpyder" bad_bot
SetEnvIfNoCase User-Agent "^Download" bad_bot
SetEnvIfNoCase User-Agent "^eCatch" bad_bot
SetEnvIfNoCase User-Agent "^EirGrabber" bad_bot
SetEnvIfNoCase User-Agent "^EmailCollector" bad_bot
SetEnvIfNoCase User-Agent "^EmailSiphon" bad_bot
SetEnvIfNoCase User-Agent "^EmailWolf" bad_bot
SetEnvIfNoCase User-Agent "^EroCrawler" bad_bot
SetEnvIfNoCase User-Agent "^Express" bad_bot
SetEnvIfNoCase User-Agent "^ExtractorPro" bad_bot
SetEnvIfNoCase User-Agent "^EyeNetIE" bad_bot
SetEnvIfNoCase User-Agent "^FairAd Client" bad_bot
SetEnvIfNoCase User-Agent "^Flaming AttackBot" bad_bot
SetEnvIfNoCase User-Agent "^FlashGet" bad_bot
SetEnvIfNoCase User-Agent "^Foobot" bad_bot
SetEnvIfNoCase User-Agent "^FrontPage" bad_bot
SetEnvIfNoCase User-Agent "^Gaisbot" bad_bot
SetEnvIfNoCase User-Agent "^GetRight" bad_bot
SetEnvIfNoCase User-Agent "^GetRight/4.2" bad_bot
SetEnvIfNoCase User-Agent "^GetWeb!" bad_bot
SetEnvIfNoCase User-Agent "^Go!Zilla" bad_bot
SetEnvIfNoCase User-Agent "^Go-Ahead-Got-It" bad_bot
SetEnvIfNoCase User-Agent "^GrabNet" bad_bot
SetEnvIfNoCase User-Agent "^Grafula" bad_bot
SetEnvIfNoCase User-Agent "^Harvest" bad_bot
SetEnvIfNoCase User-Agent "^Harvest/1.5" bad_bot
SetEnvIfNoCase User-Agent "^hloader" bad_bot
SetEnvIfNoCase User-Agent "^HMView" bad_bot
SetEnvIfNoCase User-Agent "^httplib" bad_bot
SetEnvIfNoCase User-Agent "^HTTrack" bad_bot
SetEnvIfNoCase User-Agent "^HTTrack 3.0" bad_bot
SetEnvIfNoCase User-Agent "^humanlinks" bad_bot
SetEnvIfNoCase User-Agent "^ia_archiver" bad_bot
SetEnvIfNoCase User-Agent "^Image" bad_bot
SetEnvIfNoCase User-Agent "^Indy" bad_bot
SetEnvIfNoCase User-Agent "^InfoNaviRobot" bad_bot
SetEnvIfNoCase User-Agent "^InterGET" bad_bot
SetEnvIfNoCase User-Agent "^Internet" bad_bot
SetEnvIfNoCase User-Agent "^Iron33/1.0.2" bad_bot
SetEnvIfNoCase User-Agent "^JennyBot" bad_bot
SetEnvIfNoCase User-Agent "^JetCar" bad_bot
SetEnvIfNoCase User-Agent "^JOC" bad_bot
SetEnvIfNoCase User-Agent "^Kenjin.Spider" bad_bot
SetEnvIfNoCase User-Agent "^Keyword Density/0.9" bad_bot
SetEnvIfNoCase User-Agent "^Keyword.Density" bad_bot
SetEnvIfNoCase User-Agent "^larbin" bad_bot
SetEnvIfNoCase User-Agent "^LexiBot" bad_bot
SetEnvIfNoCase User-Agent "^libWeb/clsHTTP" bad_bot
SetEnvIfNoCase User-Agent "^LinkextractorPro" bad_bot
SetEnvIfNoCase User-Agent "^LinkScan/8.1a.Unix" bad_bot
SetEnvIfNoCase User-Agent "^LinkWalker" bad_bot
SetEnvIfNoCase User-Agent "^LNSpiderguy" bad_bot
SetEnvIfNoCase User-Agent "^lwp-trivial" bad_bot
SetEnvIfNoCase User-Agent "^lwp-trivial/1.34" bad_bot
SetEnvIfNoCase User-Agent "^LWP" bad_bot
SetEnvIfNoCase User-Agent "^lwp" bad_bot
SetEnvIfNoCase User-Agent "^Mass" bad_bot
SetEnvIfNoCase User-Agent "^Mata Hari" bad_bot
SetEnvIfNoCase User-Agent "^Microsoft URL Control" bad_bot
SetEnvIfNoCase User-Agent "^Microsoft URL Control - 5.01.4511" bad_bot
SetEnvIfNoCase User-Agent "^Microsoft URL Control - 6.00.8169" bad_bot
SetEnvIfNoCase User-Agent "^MIDown" bad_bot
SetEnvIfNoCase User-Agent "^MIIxpc" bad_bot
SetEnvIfNoCase User-Agent "^MIIxpc/4.2" bad_bot
SetEnvIfNoCase User-Agent "^Mister" bad_bot
SetEnvIfNoCase User-Agent "^Mister.PiX" bad_bot
SetEnvIfNoCase User-Agent "^moget" bad_bot
SetEnvIfNoCase User-Agent "^moget/2.1" bad_bot
SetEnvIfNoCase User-Agent "^Mozilla.*NEWT" bad_bot
SetEnvIfNoCase User-Agent "^Mozilla/2" bad_bot
SetEnvIfNoCase User-Agent "^Mozilla/3.Mozilla/2.01" bad_bot
SetEnvIfNoCase User-Agent "^Mozilla/4.0 (compatible; BullsEye; Windows 95)" bad_bot
SetEnvIfNoCase User-Agent "^MS FrontPage" bad_bot
SetEnvIfNoCase User-Agent "^MSIECrawler" bad_bot
SetEnvIfNoCase User-Agent "^MSProxy/2.0" bad_bot
SetEnvIfNoCase User-Agent "^Navroad" bad_bot
SetEnvIfNoCase User-Agent "^NearSite" bad_bot
SetEnvIfNoCase User-Agent "^Net" bad_bot
SetEnvIfNoCase User-Agent "^NetAnts" bad_bot
SetEnvIfNoCase User-Agent "^NetMechanic" bad_bot
SetEnvIfNoCase User-Agent "^NetSpider" bad_bot
SetEnvIfNoCase User-Agent "^NetZIP" bad_bot
SetEnvIfNoCase User-Agent "^NICErsPRO" bad_bot
SetEnvIfNoCase User-Agent "^NPBot" bad_bot
SetEnvIfNoCase User-Agent "^Octopus" bad_bot
SetEnvIfNoCase User-Agent "^Offline" bad_bot
SetEnvIfNoCase User-Agent "^Offline.Explorer" bad_bot
SetEnvIfNoCase User-Agent "^Openbot" bad_bot
SetEnvIfNoCase User-Agent "^Openfind" bad_bot
SetEnvIfNoCase User-Agent "^Openfind data gatherer" bad_bot
SetEnvIfNoCase User-Agent "^Oracle Ultra Search" bad_bot
SetEnvIfNoCase User-Agent "^PageGrabber" bad_bot
SetEnvIfNoCase User-Agent "^Papa" bad_bot
SetEnvIfNoCase User-Agent "^pavuk" bad_bot
SetEnvIfNoCase User-Agent "^pcBrowser" bad_bot
SetEnvIfNoCase User-Agent "^PerMan" bad_bot
SetEnvIfNoCase User-Agent "^ProPowerBot/2.14" bad_bot
SetEnvIfNoCase User-Agent "^ProWebWalker" bad_bot
SetEnvIfNoCase User-Agent "^psbot" bad_bot
SetEnvIfNoCase User-Agent "^Python-urllib" bad_bot
SetEnvIfNoCase User-Agent "^QueryN.Metasearch" bad_bot
SetEnvIfNoCase User-Agent "^Radiation Retriever 1.1" bad_bot
SetEnvIfNoCase User-Agent "^ReGet" bad_bot
SetEnvIfNoCase User-Agent "^RepoMonkey" bad_bot
SetEnvIfNoCase User-Agent "^RepoMonkey Bait & Tackle/v1.01" bad_bot
SetEnvIfNoCase User-Agent "^RMA" bad_bot
SetEnvIfNoCase User-Agent "^searchpreview" bad_bot
SetEnvIfNoCase User-Agent "^SiteSnagger" bad_bot
SetEnvIfNoCase User-Agent "^SlySearch" bad_bot
SetEnvIfNoCase User-Agent "^SmartDownload" bad_bot
SetEnvIfNoCase User-Agent "^SpankBot" bad_bot
SetEnvIfNoCase User-Agent "^spanner" bad_bot
SetEnvIfNoCase User-Agent "^SuperBot" bad_bot
SetEnvIfNoCase User-Agent "^SuperHTTP" bad_bot
SetEnvIfNoCase User-Agent "^Surfbot" bad_bot
SetEnvIfNoCase User-Agent "^suzuran" bad_bot
SetEnvIfNoCase User-Agent "^Szukacz/1.4" bad_bot
SetEnvIfNoCase User-Agent "^tAkeOut" bad_bot
SetEnvIfNoCase User-Agent "^Teleport" bad_bot
SetEnvIfNoCase User-Agent "^TeleportPro" bad_bot
SetEnvIfNoCase User-Agent "^Telesoft" bad_bot
SetEnvIfNoCase User-Agent "^The Intraformant" bad_bot
SetEnvIfNoCase User-Agent "^The.Intraformant" bad_bot
SetEnvIfNoCase User-Agent "^TheNomad" bad_bot
SetEnvIfNoCase User-Agent "^TightTwatBot" bad_bot
SetEnvIfNoCase User-Agent "^Titan" bad_bot
SetEnvIfNoCase User-Agent "^toCrawl/UrlDispatcher" bad_bot
SetEnvIfNoCase User-Agent "^True_Robot" bad_bot
SetEnvIfNoCase User-Agent "^True_Robot/1.0" bad_bot
SetEnvIfNoCase User-Agent "^turingos" bad_bot
SetEnvIfNoCase User-Agent "^TurnitinBot" bad_bot
SetEnvIfNoCase User-Agent "^TurnitinBot/1.5" bad_bot
SetEnvIfNoCase User-Agent "^URL Control" bad_bot
SetEnvIfNoCase User-Agent "^URL_Spider_Pro" bad_bot
SetEnvIfNoCase User-Agent "^VCI WebViewer" bad_bot
SetEnvIfNoCase User-Agent "^VCI WebViewer Win32" bad_bot
SetEnvIfNoCase User-Agent "^VoidEYE" bad_bot
SetEnvIfNoCase User-Agent "^Web" bad_bot
SetEnvIfNoCase User-Agent "^Web.Image.Collector" bad_bot
SetEnvIfNoCase User-Agent "^WebAuto" bad_bot
SetEnvIfNoCase User-Agent "^WebBandit" bad_bot
SetEnvIfNoCase User-Agent "^WebBandit/3.50" bad_bot
SetEnvIfNoCase User-Agent "^WebCapture 2.0" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier v.2.2" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier v3.2a" bad_bot
SetEnvIfNoCase User-Agent "^WebEMailExtrac.*" bad_bot
SetEnvIfNoCase User-Agent "^WebEnhancer" bad_bot
SetEnvIfNoCase User-Agent "^WebFetch" bad_botSetEnvIfNoCase User-Agent "^VCI WebViewer Win32" bad_bot
SetEnvIfNoCase User-Agent "^VoidEYE" bad_bot
SetEnvIfNoCase User-Agent "^Web" bad_bot
SetEnvIfNoCase User-Agent "^Web.Image.Collector" bad_bot
SetEnvIfNoCase User-Agent "^WebAuto" bad_bot
SetEnvIfNoCase User-Agent "^WebBandit" bad_bot
SetEnvIfNoCase User-Agent "^WebBandit/3.50" bad_bot
SetEnvIfNoCase User-Agent "^WebCapture 2.0" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier v.2.2" bad_bot
SetEnvIfNoCase User-Agent "^WebCopier v3.2a" bad_bot
SetEnvIfNoCase User-Agent "^WebEMailExtrac.*" bad_bot
SetEnvIfNoCase User-Agent "^WebEnhancer" bad_bot
SetEnvIfNoCase User-Agent "^WebFetch" bad_bot
SetEnvIfNoCase User-Agent "^WebGo" bad_bot
SetEnvIfNoCase User-Agent "^WebLeacher" bad_bot
SetEnvIfNoCase User-Agent "^WebmasterWorldForumBot" bad_bot
SetEnvIfNoCase User-Agent "^WebReaper" bad_bot
SetEnvIfNoCase User-Agent "^WebSauger" bad_bot
SetEnvIfNoCase User-Agent "^Website" bad_bot
SetEnvIfNoCase User-Agent "^Website.Quester" bad_bot
SetEnvIfNoCase User-Agent "^Webster Pro" bad_bot
SetEnvIfNoCase User-Agent "^WebStripper" bad_bot
SetEnvIfNoCase User-Agent "^WebWhacker" bad_bot
SetEnvIfNoCase User-Agent "^WebZip" bad_bot
SetEnvIfNoCase User-Agent "^WebZip/4.0" bad_bot
SetEnvIfNoCase User-Agent "^WebZIP/4.21" bad_bot
SetEnvIfNoCase User-Agent "^WebZIP/5.0" bad_bot
SetEnvIfNoCase User-Agent "^Widow" bad_bot
SetEnvIfNoCase User-Agent "^WWW-Collector-E" bad_bot
SetEnvIfNoCase User-Agent "^WWWOFFLE" bad_bot
SetEnvIfNoCase User-Agent "^Xaldon" bad_bot
SetEnvIfNoCase User-Agent "^Xenus" bad_bot
SetEnvIfNoCase User-Agent "^Xenu's" bad_bot
SetEnvIfNoCase User-Agent "^Xenu's Link Sleuth 1.1c" bad_bot
SetEnvIfNoCase User-Agent "^Zeus" bad_bot
SetEnvIfNoCase User-Agent "^Zeus 32297 Webster Pro V2.9 Win32" bad_bot
SetEnvIfNoCase User-Agent "^Zeus Link Scout" bad_bot
<Limit GET POST>
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Limit>
:wink:
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
KGP
Honorary Member
Δημοσιεύσεις: 5857
Εγγραφή: 18 Ιούλ 2002 01:50
Τοποθεσία: Mr Wonderful

.htaccess Καλά και "κακά" spiders

Δημοσίευση από KGP » 19 Σεπ 2005 00:33

to chirotero kata tin apopsi mou einai ta bots maske (gia na charitologisoume kai ligo) pou sinithos erchontai apo kina i india...sto sikonoun olo to site kai se merikes meres vlepeis ton clono sou na periferete ston internet.

se enan gnosto mou etiche malista o atheoofovos clonopiitis na chrisimopiisei akoma kai tin idia eteria gia na gemisei ta banner places.

mas pire 2 meres alla telika ola kala.... opote kala ta bots alla ochi kai agia panta
*Στην Ελλάδα δεν χρειάζεται να σκέφτεσαι...χάνεις πολύτιμο χρόνο!
*"The power of accurate observation is frequently called cynicism by those who don't have it." -George Bernard Shaw (1856-1950)
*The purpose of argument should not be victory, but progress.

aoratos
Δημοσιεύσεις: 63
Εγγραφή: 18 Μάιος 2005 00:24
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από aoratos » 06 Οκτ 2005 21:07

poli endiaferon
thanks
Http://www.nosaint.gr
O Εναλλακτικός Οδηγός

aguila21
Honorary Member
Δημοσιεύσεις: 3510
Εγγραφή: 30 Απρ 2003 21:44
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από aguila21 » 04 Μάιος 2006 01:22

Ας ανασκάψω κι ένα παλιό θέμα!!!

Πού τοποθετείτε η .htaccess και με ποιο τρόπο;Μέσα στην html;Αν ναι,ποια είναι τα tags;

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27622
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από cordis » 04 Μάιος 2006 02:18

το .htaccess είναι ένα αρχείο που το τοποθετείς μέσα στο directory σου, φτάνει να έχεις apache...
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

aguila21
Honorary Member
Δημοσιεύσεις: 3510
Εγγραφή: 30 Απρ 2003 21:44
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από aguila21 » 04 Μάιος 2006 10:38

Δεν κατάλαβα.Εγώ έχω μια σελίδα που φιλοξενείται σε server με apache 1.3.34.Πρέπει να το τοποθετήσω στο folder www μου ή γενικά στον server;

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27622
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από cordis » 04 Μάιος 2006 12:26

στον folder www δες κι εδω διάφορες πληροφορίες
http://www.javascriptkit.com/howto/htaccess.shtml
http://httpd.apache.org/docs/1.3/howto/htaccess.html
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

aguila21
Honorary Member
Δημοσιεύσεις: 3510
Εγγραφή: 30 Απρ 2003 21:44
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από aguila21 » 04 Μάιος 2006 14:03

Θα κάνω αντιγραφή τον κώδικα που έγραψες,στο notepad και θα το αποθηκεύσω με τη μορφή "name.htaccess" χωρίς φυσικά τα "".Σωστά;

Άβαταρ μέλους
ThyClub
Honorary Member
Δημοσιεύσεις: 5312
Εγγραφή: 17 Νοέμ 2003 00:21
Τοποθεσία: Hell's Kitchen
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από ThyClub » 04 Μάιος 2006 15:26

Θα το αποθηκεύσεις σαν ".htaccess" χωρίς εισαγωγικά και όχι "name.htaccess"

Άβαταρ μέλους
tasos_art
Δημοσιεύσεις: 152
Εγγραφή: 22 Νοέμ 2007 14:44
Τοποθεσία: Χαλκιδική
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από tasos_art » 20 Οκτ 2008 16:46

Καλησπέρα παιδιά
έχει λίγες μέρες που κάποια spiders έχουν φορτώσει όλο το site άσκοπα με διάφορα ψέφτηκα post και άλλα
αυτές τις μέρες έχει μερικές φορές που συνδέεται ως μελός στο site μου ένα "μέλος" με αυτό το όνομα &#194;&#201;&#207;&Eum (μπορεί να το βγάζει συνδεμένω αρκετές φορές)
Αυτό που ήθελα να ρωτήσω είναι αν αυτό είναι κάποιο spider και πως μπορώ να το αφαιρέσω

Υ.Γ. Έχω κάνει εγκατάσταση αυτό

Κώδικας: Επιλογή όλων

SetEnvIfNoCase User-Agent "^BotRightHere" bad_bot 
SetEnvIfNoCase User-Agent "^&#91;Ww&#93;eb&#91;Bb&#93;andit" bad_bot 
SetEnvIfNoCase User-Agent "^Alexibot" bad_bot 
SetEnvIfNoCase User-Agent "^Aqua_Products" bad_bot 
SetEnvIfNoCase User-Agent "^asterias" bad_bot 
SetEnvIfNoCase User-Agent "^b2w/0.1" bad_bot 
SetEnvIfNoCase User-Agent "^BackDoorBot" bad_bot 
SetEnvIfNoCase User-Agent "^BackDoorBot/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^Black.Hole" bad_bot 
SetEnvIfNoCase User-Agent "^BlackWidow" bad_bot 
SetEnvIfNoCase User-Agent "^BlowFish" bad_bot 
SetEnvIfNoCase User-Agent "^BlowFish/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^Bookmark search tool" bad_bot 
SetEnvIfNoCase User-Agent "^BotALot" bad_bot 
SetEnvIfNoCase User-Agent "^BotRightHere" bad_bot 
SetEnvIfNoCase User-Agent "^BuiltBotTough" bad_bot 
SetEnvIfNoCase User-Agent "^Bullseye" bad_bot 
SetEnvIfNoCase User-Agent "^Bullseye/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^BunnySlippers" bad_bot 
SetEnvIfNoCase User-Agent "^Cegbfeieh" bad_bot 
SetEnvIfNoCase User-Agent "^CheeseBot" bad_bot 
SetEnvIfNoCase User-Agent "^CherryPicker" bad_bot 
SetEnvIfNoCase User-Agent "^CherryPickerElite/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^CherryPickerSE/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^ChinaClaw" bad_bot 
SetEnvIfNoCase User-Agent "^Copernic" bad_bot 
SetEnvIfNoCase User-Agent "^CopyRightCheck" bad_bot 
SetEnvIfNoCase User-Agent "^Cosmos" bad_bot 
SetEnvIfNoCase User-Agent "^Crescent" bad_bot 
SetEnvIfNoCase User-Agent "^Crescent Internet ToolPak HTTP OLE Control v.1.0" bad_bot 
SetEnvIfNoCase User-Agent "^Custo" bad_bot 
SetEnvIfNoCase User-Agent "^DISCo" bad_bot 
SetEnvIfNoCase User-Agent "^DittoSpyder" bad_bot 
SetEnvIfNoCase User-Agent "^Download" bad_bot 
SetEnvIfNoCase User-Agent "^eCatch" bad_bot 
SetEnvIfNoCase User-Agent "^EirGrabber" bad_bot 
SetEnvIfNoCase User-Agent "^EmailCollector" bad_bot 
SetEnvIfNoCase User-Agent "^EmailSiphon" bad_bot 
SetEnvIfNoCase User-Agent "^EmailWolf" bad_bot 
SetEnvIfNoCase User-Agent "^EroCrawler" bad_bot 
SetEnvIfNoCase User-Agent "^Express" bad_bot 
SetEnvIfNoCase User-Agent "^ExtractorPro" bad_bot 
SetEnvIfNoCase User-Agent "^EyeNetIE" bad_bot 
SetEnvIfNoCase User-Agent "^FairAd Client" bad_bot 
SetEnvIfNoCase User-Agent "^Flaming AttackBot" bad_bot 
SetEnvIfNoCase User-Agent "^FlashGet" bad_bot 
SetEnvIfNoCase User-Agent "^Foobot" bad_bot 
SetEnvIfNoCase User-Agent "^FrontPage" bad_bot 
SetEnvIfNoCase User-Agent "^Gaisbot" bad_bot 
SetEnvIfNoCase User-Agent "^GetRight" bad_bot 
SetEnvIfNoCase User-Agent "^GetRight/4.2" bad_bot 
SetEnvIfNoCase User-Agent "^GetWeb!" bad_bot 
SetEnvIfNoCase User-Agent "^Go!Zilla" bad_bot 
SetEnvIfNoCase User-Agent "^Go-Ahead-Got-It" bad_bot 
SetEnvIfNoCase User-Agent "^GrabNet" bad_bot 
SetEnvIfNoCase User-Agent "^Grafula" bad_bot 
SetEnvIfNoCase User-Agent "^Harvest" bad_bot 
SetEnvIfNoCase User-Agent "^Harvest/1.5" bad_bot 
SetEnvIfNoCase User-Agent "^hloader" bad_bot 
SetEnvIfNoCase User-Agent "^HMView" bad_bot 
SetEnvIfNoCase User-Agent "^httplib" bad_bot 
SetEnvIfNoCase User-Agent "^HTTrack" bad_bot 
SetEnvIfNoCase User-Agent "^HTTrack 3.0" bad_bot 
SetEnvIfNoCase User-Agent "^humanlinks" bad_bot 
SetEnvIfNoCase User-Agent "^ia_archiver" bad_bot 
SetEnvIfNoCase User-Agent "^Image" bad_bot 
SetEnvIfNoCase User-Agent "^Indy" bad_bot 
SetEnvIfNoCase User-Agent "^InfoNaviRobot" bad_bot 
SetEnvIfNoCase User-Agent "^InterGET" bad_bot 
SetEnvIfNoCase User-Agent "^Internet" bad_bot 
SetEnvIfNoCase User-Agent "^Iron33/1.0.2" bad_bot 
SetEnvIfNoCase User-Agent "^JennyBot" bad_bot 
SetEnvIfNoCase User-Agent "^JetCar" bad_bot 
SetEnvIfNoCase User-Agent "^JOC" bad_bot 
SetEnvIfNoCase User-Agent "^Kenjin.Spider" bad_bot 
SetEnvIfNoCase User-Agent "^Keyword Density/0.9" bad_bot 
SetEnvIfNoCase User-Agent "^Keyword.Density" bad_bot 
SetEnvIfNoCase User-Agent "^larbin" bad_bot 
SetEnvIfNoCase User-Agent "^LexiBot" bad_bot 
SetEnvIfNoCase User-Agent "^libWeb/clsHTTP" bad_bot 
SetEnvIfNoCase User-Agent "^LinkextractorPro" bad_bot 
SetEnvIfNoCase User-Agent "^LinkScan/8.1a.Unix" bad_bot 
SetEnvIfNoCase User-Agent "^LinkWalker" bad_bot 
SetEnvIfNoCase User-Agent "^LNSpiderguy" bad_bot 
SetEnvIfNoCase User-Agent "^lwp-trivial" bad_bot 
SetEnvIfNoCase User-Agent "^lwp-trivial/1.34" bad_bot 
SetEnvIfNoCase User-Agent "^LWP" bad_bot 
SetEnvIfNoCase User-Agent "^lwp" bad_bot 
SetEnvIfNoCase User-Agent "^Mass" bad_bot 
SetEnvIfNoCase User-Agent "^Mata Hari" bad_bot 
SetEnvIfNoCase User-Agent "^Microsoft URL Control" bad_bot 
SetEnvIfNoCase User-Agent "^Microsoft URL Control - 5.01.4511" bad_bot 
SetEnvIfNoCase User-Agent "^Microsoft URL Control - 6.00.8169" bad_bot 
SetEnvIfNoCase User-Agent "^MIDown" bad_bot 
SetEnvIfNoCase User-Agent "^MIIxpc" bad_bot 
SetEnvIfNoCase User-Agent "^MIIxpc/4.2" bad_bot 
SetEnvIfNoCase User-Agent "^Mister" bad_bot 
SetEnvIfNoCase User-Agent "^Mister.PiX" bad_bot 
SetEnvIfNoCase User-Agent "^moget" bad_bot 
SetEnvIfNoCase User-Agent "^moget/2.1" bad_bot 
SetEnvIfNoCase User-Agent "^Mozilla.*NEWT" bad_bot 
SetEnvIfNoCase User-Agent "^Mozilla/2" bad_bot 
SetEnvIfNoCase User-Agent "^Mozilla/3.Mozilla/2.01" bad_bot 
SetEnvIfNoCase User-Agent "^Mozilla/4.0 &#40;compatible; BullsEye; Windows 95&#41;" bad_bot 
SetEnvIfNoCase User-Agent "^MS FrontPage" bad_bot 
SetEnvIfNoCase User-Agent "^MSIECrawler" bad_bot 
SetEnvIfNoCase User-Agent "^MSProxy/2.0" bad_bot 
SetEnvIfNoCase User-Agent "^Navroad" bad_bot 
SetEnvIfNoCase User-Agent "^NearSite" bad_bot 
SetEnvIfNoCase User-Agent "^Net" bad_bot 
SetEnvIfNoCase User-Agent "^NetAnts" bad_bot 
SetEnvIfNoCase User-Agent "^NetMechanic" bad_bot 
SetEnvIfNoCase User-Agent "^NetSpider" bad_bot 
SetEnvIfNoCase User-Agent "^NetZIP" bad_bot 
SetEnvIfNoCase User-Agent "^NICErsPRO" bad_bot 
SetEnvIfNoCase User-Agent "^NPBot" bad_bot 
SetEnvIfNoCase User-Agent "^Octopus" bad_bot 
SetEnvIfNoCase User-Agent "^Offline" bad_bot 
SetEnvIfNoCase User-Agent "^Offline.Explorer" bad_bot 
SetEnvIfNoCase User-Agent "^Openbot" bad_bot 
SetEnvIfNoCase User-Agent "^Openfind" bad_bot 
SetEnvIfNoCase User-Agent "^Openfind data gatherer" bad_bot 
SetEnvIfNoCase User-Agent "^Oracle Ultra Search" bad_bot 
SetEnvIfNoCase User-Agent "^PageGrabber" bad_bot 
SetEnvIfNoCase User-Agent "^Papa" bad_bot 
SetEnvIfNoCase User-Agent "^pavuk" bad_bot 
SetEnvIfNoCase User-Agent "^pcBrowser" bad_bot 
SetEnvIfNoCase User-Agent "^PerMan" bad_bot 
SetEnvIfNoCase User-Agent "^ProPowerBot/2.14" bad_bot 
SetEnvIfNoCase User-Agent "^ProWebWalker" bad_bot 
SetEnvIfNoCase User-Agent "^psbot" bad_bot 
SetEnvIfNoCase User-Agent "^Python-urllib" bad_bot 
SetEnvIfNoCase User-Agent "^QueryN.Metasearch" bad_bot 
SetEnvIfNoCase User-Agent "^Radiation Retriever 1.1" bad_bot 
SetEnvIfNoCase User-Agent "^ReGet" bad_bot 
SetEnvIfNoCase User-Agent "^RepoMonkey" bad_bot 
SetEnvIfNoCase User-Agent "^RepoMonkey Bait & Tackle/v1.01" bad_bot 
SetEnvIfNoCase User-Agent "^RMA" bad_bot 
SetEnvIfNoCase User-Agent "^searchpreview" bad_bot 
SetEnvIfNoCase User-Agent "^SiteSnagger" bad_bot 
SetEnvIfNoCase User-Agent "^SlySearch" bad_bot 
SetEnvIfNoCase User-Agent "^SmartDownload" bad_bot 
SetEnvIfNoCase User-Agent "^SpankBot" bad_bot 
SetEnvIfNoCase User-Agent "^spanner" bad_bot 
SetEnvIfNoCase User-Agent "^SuperBot" bad_bot 
SetEnvIfNoCase User-Agent "^SuperHTTP" bad_bot 
SetEnvIfNoCase User-Agent "^Surfbot" bad_bot 
SetEnvIfNoCase User-Agent "^suzuran" bad_bot 
SetEnvIfNoCase User-Agent "^Szukacz/1.4" bad_bot 
SetEnvIfNoCase User-Agent "^tAkeOut" bad_bot 
SetEnvIfNoCase User-Agent "^Teleport" bad_bot 
SetEnvIfNoCase User-Agent "^TeleportPro" bad_bot 
SetEnvIfNoCase User-Agent "^Telesoft" bad_bot 
SetEnvIfNoCase User-Agent "^The Intraformant" bad_bot 
SetEnvIfNoCase User-Agent "^The.Intraformant" bad_bot 
SetEnvIfNoCase User-Agent "^TheNomad" bad_bot 
SetEnvIfNoCase User-Agent "^TightTwatBot" bad_bot 
SetEnvIfNoCase User-Agent "^Titan" bad_bot 
SetEnvIfNoCase User-Agent "^toCrawl/UrlDispatcher" bad_bot 
SetEnvIfNoCase User-Agent "^True_Robot" bad_bot 
SetEnvIfNoCase User-Agent "^True_Robot/1.0" bad_bot 
SetEnvIfNoCase User-Agent "^turingos" bad_bot 
SetEnvIfNoCase User-Agent "^TurnitinBot" bad_bot 
SetEnvIfNoCase User-Agent "^TurnitinBot/1.5" bad_bot 
SetEnvIfNoCase User-Agent "^URL Control" bad_bot 
SetEnvIfNoCase User-Agent "^URL_Spider_Pro" bad_bot 
SetEnvIfNoCase User-Agent "^VCI WebViewer" bad_bot 
SetEnvIfNoCase User-Agent "^VCI WebViewer Win32" bad_bot 
SetEnvIfNoCase User-Agent "^VoidEYE" bad_bot 
SetEnvIfNoCase User-Agent "^Web" bad_bot 
SetEnvIfNoCase User-Agent "^Web.Image.Collector" bad_bot 
SetEnvIfNoCase User-Agent "^WebAuto" bad_bot 
SetEnvIfNoCase User-Agent "^WebBandit" bad_bot 
SetEnvIfNoCase User-Agent "^WebBandit/3.50" bad_bot 
SetEnvIfNoCase User-Agent "^WebCapture 2.0" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier v.2.2" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier v3.2a" bad_bot 
SetEnvIfNoCase User-Agent "^WebEMailExtrac.*" bad_bot 
SetEnvIfNoCase User-Agent "^WebEnhancer" bad_bot 
SetEnvIfNoCase User-Agent "^WebFetch" bad_botSetEnvIfNoCase User-Agent "^VCI WebViewer Win32" bad_bot 
SetEnvIfNoCase User-Agent "^VoidEYE" bad_bot 
SetEnvIfNoCase User-Agent "^Web" bad_bot 
SetEnvIfNoCase User-Agent "^Web.Image.Collector" bad_bot 
SetEnvIfNoCase User-Agent "^WebAuto" bad_bot 
SetEnvIfNoCase User-Agent "^WebBandit" bad_bot 
SetEnvIfNoCase User-Agent "^WebBandit/3.50" bad_bot 
SetEnvIfNoCase User-Agent "^WebCapture 2.0" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier v.2.2" bad_bot 
SetEnvIfNoCase User-Agent "^WebCopier v3.2a" bad_bot 
SetEnvIfNoCase User-Agent "^WebEMailExtrac.*" bad_bot 
SetEnvIfNoCase User-Agent "^WebEnhancer" bad_bot 
SetEnvIfNoCase User-Agent "^WebFetch" bad_bot 
SetEnvIfNoCase User-Agent "^WebGo" bad_bot 
SetEnvIfNoCase User-Agent "^WebLeacher" bad_bot 
SetEnvIfNoCase User-Agent "^WebmasterWorldForumBot" bad_bot 
SetEnvIfNoCase User-Agent "^WebReaper" bad_bot 
SetEnvIfNoCase User-Agent "^WebSauger" bad_bot 
SetEnvIfNoCase User-Agent "^Website" bad_bot 
SetEnvIfNoCase User-Agent "^Website.Quester" bad_bot 
SetEnvIfNoCase User-Agent "^Webster Pro" bad_bot 
SetEnvIfNoCase User-Agent "^WebStripper" bad_bot 
SetEnvIfNoCase User-Agent "^WebWhacker" bad_bot 
SetEnvIfNoCase User-Agent "^WebZip" bad_bot 
SetEnvIfNoCase User-Agent "^WebZip/4.0" bad_bot 
SetEnvIfNoCase User-Agent "^WebZIP/4.21" bad_bot 
SetEnvIfNoCase User-Agent "^WebZIP/5.0" bad_bot 
SetEnvIfNoCase User-Agent "^Widow" bad_bot 
SetEnvIfNoCase User-Agent "^WWW-Collector-E" bad_bot 
SetEnvIfNoCase User-Agent "^WWWOFFLE" bad_bot 
SetEnvIfNoCase User-Agent "^Xaldon" bad_bot 
SetEnvIfNoCase User-Agent "^Xenus" bad_bot 
SetEnvIfNoCase User-Agent "^Xenu's" bad_bot 
SetEnvIfNoCase User-Agent "^Xenu's Link Sleuth 1.1c" bad_bot 
SetEnvIfNoCase User-Agent "^Zeus" bad_bot 
SetEnvIfNoCase User-Agent "^Zeus 32297 Webster Pro V2.9 Win32" bad_bot 
SetEnvIfNoCase User-Agent "^Zeus Link Scout" bad_bot 
<Limit GET POST> 
Order Allow,Deny 
Allow from all 
Deny from env=bad_bot 
</Limit>


Τι άλλο μπορώ να κάνω για να μου φορτόνονται στον server;
Εικόνα

Άβαταρ μέλους
Croc
Δημοσιεύσεις: 105
Εγγραφή: 18 Μαρ 2006 22:40
Τοποθεσία: Volos
Επικοινωνία:

.htaccess Καλά και "κακά" spiders

Δημοσίευση από Croc » 12 Νοέμ 2008 18:36

στην φορμα εγραφφής να βαλεις ενα field που να ειναι υποχρεωτικό και να λεει

"Symplirose tesseris xaraktires payla dyo arithmoys (xoris kena)"
Θα βαλεις maximum 9 χαρατηρες να συμπληρωνουν και ετσι μόνο οι Ελληνοφωνοι χρηστες θα κανουν εγγραφη.

Εννοειτε πως θα δηλωσεις το field να δεχετε μόνο αυτην την μορφη
px c-characher,n number

Κώδικας: Επιλογή όλων

cccc-nn
Ειχα σοβαρο προβλημα και τελικα τους εδιωξα.

edit

υπάρχει ενημερωμένη λίστα???

Απάντηση

Επιστροφή στο “Apache, IIS, DNS Servers”

Μέλη σε σύνδεση

Μέλη σε αυτήν τη Δ. Συζήτηση: Δεν υπάρχουν εγγεγραμμένα μέλη και 0 επισκέπτες