Robots

Τεχνικές και μόνο Συζητήσεις για WEB hosting servers, Mail servers, DNS servers. Όχι αναζήτηση υπηρεσιών εδώ!

Συντονιστές: WebDev Moderators, Super-Moderators

Απάντηση
rath
Δημοσιεύσεις: 4
Εγγραφή: 19 Σεπ 2004 23:15

Robots

Δημοσίευση από rath » 11 Αύγ 2005 11:16

Ζητώ συγνώμη προκαταβολικά αν ποστάρω σε λάθος section αλλά πιστεύω πως εδώ πρέπει. Έχω φτιάξει μια ιστοσελίδα για ένα φιλαράκι και την έχω δηλώσει σε αρκετές μηχανές αναζήτησης. Κάθε λίγο και λιγάκι βλέπω στο cpanel στα error πως ψάχνουν οι μηχανές το αρχείο robots.txt. Τί είναι αυτό το αρχείο; Δεν αρκούν τα keywords της σελίδας;

Άβαταρ μέλους
Rapid-eraser
WebDev Moderator
Δημοσιεύσεις: 6851
Εγγραφή: 05 Απρ 2003 17:50
Τοποθεσία: Πειραιάς
Επικοινωνία:

Robots

Δημοσίευση από Rapid-eraser » 11 Αύγ 2005 12:10

to arxeio robots.txt eivai eva arxeio simfova me to protipo
The Robots Exclusion Standard
Se afto to arxeio bazeis odigies gia to spider pou 8a mpei.
Se pia arxeia mporei va mpei kai se pia oxi kai gevika
odigies osov afora to spidering mesa sto site sou.

online tutorial
Cu, Rapid-eraser, Tα αγαθά copies κτώνται.
Love is like oxygen, You get too much you get too high
Not enough and you're gonna die, Love gets you high

rath
Δημοσιεύσεις: 4
Εγγραφή: 19 Σεπ 2004 23:15

Robots

Δημοσίευση από rath » 13 Αύγ 2005 00:07

Ευχαριστώ πολύ! :D

Άβαταρ μέλους
exposed_bone
Δημοσιεύσεις: 68
Εγγραφή: 11 Ιουν 2005 10:43
Τοποθεσία: Πάτρα
Επικοινωνία:

Robots

Δημοσίευση από exposed_bone » 29 Αύγ 2005 14:28

Δεν ήθελα να ανοιξώ νέο θέμα.
Αυτο που ήθελα να ρωτήσω είναι για να απαγορεύσω τα bots σε κάποια subdomain βάζω στο root των subdomain το κατάληλλο αρχείο robots.txt ή κάνω κάτι διαφορετικό;

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27617
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

Robots

Δημοσίευση από cordis » 29 Αύγ 2005 16:20

ναι, στο κάθε subdomain ξεχωριστά..
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
exposed_bone
Δημοσιεύσεις: 68
Εγγραφή: 11 Ιουν 2005 10:43
Τοποθεσία: Πάτρα
Επικοινωνία:

Robots

Δημοσίευση από exposed_bone » 30 Αύγ 2005 08:29

λοιπον υποθέτουμε ότι sub1 ο φακέλος του ενος subdomain και sub2 ο φακέλος του άλλου subdomain ....
Λοίπον εγω θα δημιουργησω ενα txt αρχειο που θα γράφει:

Κώδικας: Επιλογή όλων

User-agent: *
Disallow: /
Και θα αντιγράψω ενα αντιγραφω στο sub1 και ενα στο sub2.

Σωστά;

Υ.γ.: Αν σε καποιο subdomain δεν υπάρχει τέτοιο αρχειο σημαίνει οτι έχουν πλήρη πρόσβαση;
Y.γ2: Καθε πότε έρχονται τα botακια;

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27617
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

Robots

Δημοσίευση από cordis » 30 Αύγ 2005 12:27

ναι έτσι.. αν δεν έχει μπαίνουν κατά βούληση... δηλ. όπωτε τους καπνίσει... δεν υπάρχει κάποιο στανταρ...
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
exposed_bone
Δημοσιεύσεις: 68
Εγγραφή: 11 Ιουν 2005 10:43
Τοποθεσία: Πάτρα
Επικοινωνία:

Robots

Δημοσίευση από exposed_bone » 30 Αύγ 2005 18:45

Αν του πω να μπαίνουν πολυ πιο συχνα σημαίνει οτι θα βγάζουν καλλιτερα και περισσότερα αποτελεσματα η μηχανες αναζήτησεις;
Το πρόβλημα είναι με το google που παρόλλο που έχω βάλει την δυνατότητα κάποιος να ψάχνει στο site μου μέσω google τα boτακια τους με εχουν γραμμένο όμως και δεν έχει νοήμα η δυνατότητα αυτή

Άβαταρ μέλους
cordis
Administrator, [F|H]ounder, [C|S]EO
Δημοσιεύσεις: 27617
Εγγραφή: 09 Οκτ 1999 03:00
Τοποθεσία: Greece
Επικοινωνία:

Robots

Δημοσίευση από cordis » 31 Αύγ 2005 12:22

δεν κάνεις αρχικά το CSS και τα javascripts εξωτερικά για να ελαφρώσει η σελίδα σου;
Δεν απαντάω σε προσωπικά μηνύματα με ερωτήσεις που καλύπτονται από τις ενότητες του forum. Για ο,τι άλλο είμαι εδώ για εσάς.
- follow me @twitter

Άβαταρ μέλους
soteres2002
S. & H. Moderator
Δημοσιεύσεις: 1524
Εγγραφή: 05 Μαρ 2004 22:17
Τοποθεσία: Ιωάννινα

Robots

Δημοσίευση από soteres2002 » 31 Αύγ 2005 15:28

Για μία καλή και "ολοκληρωμένη" συζήτηση περί ρόμποτς, μπορείτε να επισκεφτείτε στον μοναδικα αφιερωμένο για το εν λόγω θέμα δικτυακό τοπο www.robotstxt.org . Μάλιστα μπορείτε να βρείτε και συζητήσεις/άρθρα κτλ για αυτά, πέρα απο την τεχνική πλευρά (δημιουργία, ανάλυση)

angelwitch83
Δημοσιεύσεις: 194
Εγγραφή: 14 Μάιος 2009 19:43
Επικοινωνία:

Robots

Δημοσίευση από angelwitch83 » 16 Μαρ 2010 18:21

Υπαρχει περιπτωση να απαγορευσω μια συγκεκριμενη σελιδα απο το googlebot αλλα αυτο να μπει παρολα αυτα?

angelwitch83
Δημοσιεύσεις: 194
Εγγραφή: 14 Μάιος 2009 19:43
Επικοινωνία:

Robots

Δημοσίευση από angelwitch83 » 19 Μαρ 2010 13:44

Και κατι ακομα. Αν μια σελιδα εχει γινει ηδη indexed απο την google πως μπορω να πω στην google να την αφαιρεσει απο το index? Αυτο γινεται βασικα?? Σκεφτηκα να βαλω meta tag no index, no follow αλλα μηπως αυτο απλα σημαινει πως το αντιγραφο που εχει η google στο index της απλα δε θα ενημερωνεται περαιτερω? Οχι οτι θα γινει de-indexed.
Τελικα ειναι εφικτο κατι τετοιο?

Απάντηση

Επιστροφή στο “Apache, IIS, DNS Servers”

Μέλη σε σύνδεση

Μέλη σε αυτήν τη Δ. Συζήτηση: Δεν υπάρχουν εγγεγραμμένα μέλη και 0 επισκέπτες