Ο crawler μας
EshopGuruBot
Ο EshopGuruBot διαβάζει δημόσιες σελίδες e-shops όταν κάποιος ζητήσει δωρεάν έλεγχο στο check.eshopguru.gr, ή μία φορά την εβδομάδα για καταστήματα των οποίων ο ιδιοκτήτης έχει ενεργοποιήσει την παρακολούθηση.
Πώς τον αναγνωρίζετε
Κάθε αίτημα στέλνει αυτό το User-Agent:
EshopGuruBot/1.0 (+https://check.eshopguru.gr/bot)
Τι κάνει και τι όχι
- • Διαβάζει την αρχική σελίδα και έως 24 ακόμα σελίδες του ίδιου site ανά έλεγχο.
- • Στέλνει ένα αίτημα τη φορά, με μικρή παύση ανάμεσα, ώστε να μην επιβαρύνει τον server.
- • Διαβάζει και σέβεται το robots.txt για κάθε σελίδα.
- • Δεν τρέχει JavaScript, δεν συμπληρώνει φόρμες, δεν κάνει login και δεν προσθέτει προϊόντα στο καλάθι.
- • Δεν αποθηκεύει τον κώδικα των σελίδων, μόνο μετρήσεις (π.χ. «λείπει η περιγραφή σε 3 σελίδες»).
- • Ένα domain ελέγχεται ξανά το πολύ μία φορά ανά 24 ώρες από το δημόσιο εργαλείο.
Πώς να τον μπλοκάρετε
Προσθέστε στο robots.txt του site σας:
User-agent: EshopGuruBot
Disallow: /
Από τον επόμενο έλεγχο και μετά, ο bot σταματά στο robots.txt και δεν διαβάζει καμία σελίδα. Μπορείτε επίσης να μπλοκάρετε μόνο συγκεκριμένους φακέλους με Disallow: /φάκελος/.
Αφαίρεση αναφοράς
Κάθε αναφορά έχει σύνδεσμο «Αίτημα αφαίρεσης». Η αναφορά κρύβεται αμέσως, και ο επαληθευμένος ιδιοκτήτης μπορεί να την επαναφέρει.