Οι σελίδες κάθε ιστότοπου ανιχνεύονται τακτικά από ρομπότ αναζήτησης, τα οποία επεξεργάζονται τις πληροφορίες στον ιστότοπο έτσι ώστε να είναι διαθέσιμα κατόπιν αιτήματος των χρηστών στις μηχανές αναζήτησης. Οι επισκέψεις επισκεπτών από μηχανές αναζήτησης έχουν θετική επίδραση στην επισκεψιμότητα του ιστότοπου και τονώνουν την ανάπτυξη του πόρου. Ωστόσο, εάν υπάρχουν σελίδες στον ιστότοπο, οι πληροφορίες για τις οποίες δεν προορίζονται για το κοινό του Διαδικτύου (για παράδειγμα, οι προσωπικές σελίδες των χρηστών ή η σελίδα εγγραφής), τότε δεν απαιτείται μετάβαση από τις μηχανές αναζήτησης σε τέτοιες σελίδες και είναι καλύτερα να απαγορεύσετε την ευρετηρίαση αυτών των πληροφοριών.
Απαραίτητη
- - έχετε τον δικό σας ιστότοπο
- - να γνωρίζετε τους συνδέσμους προς τις σελίδες, των οποίων η ευρετηρίαση πρέπει να απαγορεύεται.
- - να έχετε τουλάχιστον βασικές γνώσεις HTML
Οδηγίες
Βήμα 1
Για να αποτρέψετε την ευρετηρίαση ορισμένων σελίδων του ιστότοπου από το ρομπότ αναζήτησης, πρέπει να κάνετε αλλαγές στο αρχείο robots.txt, εάν είναι ήδη στον ιστότοπό σας ή να δημιουργήσετε αυτό το αρχείο.
Βήμα 2
Εάν το αρχείο robots.txt έχει ήδη μεταφορτωθεί στον ιστότοπο και είναι δυνατό να επεξεργαστείτε αυτό το αρχείο απευθείας από τον πίνακα ελέγχου πόρων, τότε ανοίξτε το robots.txt μέσω της υπηρεσίας ιστού για επεξεργασία.
Βήμα 3
Εάν δεν υπάρχει τρόπος να κάνετε αλλαγές στο επιθυμητό αρχείο απευθείας από τον πίνακα ελέγχου, ανοίξτε το robots.txt σε ένα πρόγραμμα περιήγησης κάνοντας κλικ στον σύνδεσμο προς αυτό το αρχείο. Αντιγράψτε όλα τα δεδομένα από τη σελίδα που ανοίγει και επικολλήστε τα στο φύλλο στο Σημειωματάριο.
Βήμα 4
Εάν δεν υπάρχει robots.txt στον ιστότοπο, ανοίξτε το πρόγραμμα "Notepad", στο νέο έγγραφο του οποίου θα πρέπει να εισαγάγετε τον απαραίτητο κωδικό.
Βήμα 5
Σε ένα κενό φύλλο εγγράφου κειμένου, γράψτε την πρώτη απαιτούμενη γραμμή:
Αντιπρόσωπος χρήστη: *
Βήμα 6
Στη συνέχεια, μεταβείτε στην επόμενη γραμμή πατώντας το πλήκτρο Enter και πληκτρολογήστε τον ακόλουθο κωδικό:
Disallow: / index / page3 Disallow: δηλώνει ότι δεν υπάρχει ευρετηρίαση και το / index / page3 είναι σύνδεσμος προς μια σελίδα που δεν χρειάζεται να ευρετηριαστεί. Αντί για το σύνδεσμο / ευρετήριο / σελίδα3, εισαγάγετε έναν σύνδεσμο προς τη σελίδα του ιστότοπού σας που θέλετε να αποκλείσετε για επεξεργασία από ρομπότ.
Βήμα 7
Λάβετε υπόψη ότι το ίδιο το όνομα τομέα λείπει στην αρχή του συνδέσμου. Η παρουσία του στην καταχώρηση υποδηλώνει την κάθετο. Κατά την ανίχνευση ενός ιστότοπου, ένα ρομπότ αναζήτησης εισάγει αυτόματα ένα όνομα τομέα σε τέτοιους συνδέσμους. Επομένως, γράψτε συνδέσμους προς τις απαραίτητες σελίδες με αυτόν τον τρόπο.
Βήμα 8
Μετά την απαγόρευση: μπορείτε να τοποθετήσετε όχι μόνο έναν σύνδεσμο σε μια συγκεκριμένη σελίδα, αλλά και έναν σύνδεσμο προς οποιαδήποτε ενότητα ή κατάλογο του ιστότοπου. Ομοίως, μπορείτε να απαγορεύσετε την ευρετηρίαση του επιθυμητού μέρους του ιστότοπου.
Βήμα 9
Εάν είναι απαραίτητο να απαγορεύσετε την επεξεργασία με ρομπότ διαφόρων τμημάτων του πόρου, γράψτε έναν σύνδεσμο σε κάθε ενότητα ή σελίδα σε μια νέα γραμμή, στην αρχή της οποίας μην ξεχάσετε να βάλετε την καταχώριση Disallow:
Βήμα 10
Για να ολοκληρώσετε την αλλαγή του robots.txt, κάντε κλικ στο κουμπί "Αποθήκευση" κατά την επεξεργασία του αρχείου στον πίνακα ελέγχου ή αποθηκεύστε ένα έγγραφο κειμένου με καταχωρήσεις με το όνομα robots.txt και ανεβάστε αυτό το αρχείο στον ιστότοπο.
