Βαζουμε το robots.txt στο προτυπο μας

Επιστρέφω με έναν σημαντικό οδηγό για να έχει επιτυχία ένα blog.

Είμαστε στο σημείο όπου έχουμε κατασκευάσει το blog μας και είναι στην αρχική του μορφή (σε επόμενη ανάρτηση θα μιλήσουμε για το πως μπορούμε να αλλάξουμε το πρότυπο και να βάλουμε ένα ποιο κάλο) συνεχίζοντας λοιπόν θα σας εξηγήσω σε τι χρειάζεται ο κώδικας robots.txt  που ανέφερα παραπάνω.

Τι κανει το robots.txt

Στο blog μας εκτός από τα λινκ των αναρτήσεων μας υπάρχουν και τα λινκ των κατηγοριών (Labels)
του τύπου https://posftiaxnoblog.blogspot.gr/search/label/diamorfosh-blog
όπως υπάρχουν και τα λινκ του αρχείου μας του τύπου https://posftiaxnoblog/2015/12/. Αυτα τα λινκ δεν πρέπει να αφήνουμε την Google και τις άλλες μηχανές αναζήτησης να τα καταχωρούν γιατί δημιουργούν διπλότυπο περιεχόμενο, το οποίο μπορεί να οδηγήσει σε τιμωρία του site μας από τις μηχανές αναζήτησης.

Παρακάτω σας δίνω τον κωδικό που χρησιμοποιώ κι εγώ σε αυτό το blog ώστε να τον χρησιμοποιησετε κι εσείς εφόσον βεβαία έχετε δηλώσει και τους χάρτες ιστοτοπων στα webmasters tools.

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://posftiaxnoblog.blogspot.com/sitemap.xml
Sitemap: https://posftiaxnoblog.blogspot.com/sitemap-pages.xml

Πως βαζω το robots.txt στο blog μου;


Αυτό το μικρούλι κωδικό θα τον κάνετε αντιγραφή και αφοί αλλάξετε τα κόκκινα γράμματα με το δικό σας λινκ θα μεταβείτε στο πινάκα έλεγχου του blog σας στις ρυθμίσεις - προτιμήσεις αναζήτησης και στο σημείο που γράφει "προσαρμογή robots.txt" θα πατήσετε επεξεργασία και θα τον κάνετε επικόλληση μες στο κουτάκι.

Κάντε κλικ στο αποθήκευση αλλαγών και ακριβώς από κάτω που γράφει "Προσαρμοσμένες ετικέτες κεφαλίδα robots" κάντε κλικ στο επεξεργασία. Θα πρέπει να τικαρετε τα κουτάκια ακριβός όπως φαίνεται στη παρακάτω φώτο.

Κάνουμε κλικ στο αποθήκευση αλλαγών και τώρα μπορούμε να πούμε πως έχουμε βάλει με επιτυχία το robots.txt στο blogger.

πηγη