Τι είναι το KnockadayBot
Το KnockadayBot διαβάζει ένα e-shop μόνο όταν κάποιος γράψει τη διεύθυνσή του στο Knock a Day, για να φτιάξει ένα πρόχειρο ημερολόγιο με τα προϊόντα του.
Τι διαβάζει
Μόνο δημόσιες σελίδες: την αρχική σελίδα για όνομα, λογότυπο και χρώμα, τον δημόσιο κατάλογο προϊόντων (όπως το /products.json του Shopify ή το Store API του WooCommerce) και, αν το δώσει ο ιδιοκτήτης, το feed για Skroutz ή Google. Όπου δεν υπάρχει κατάλογος, διαβάζει έως 50 σελίδες: τα προϊόντα που δείχνει η αρχική σελίδα και, αν χρειαστεί, όσα έχει το sitemap. Δεν συνδέεται σε λογαριασμούς, δεν στέλνει φόρμες και δεν βάζει τίποτα στο καλάθι.
Πόσο αργά
Ένα αίτημα τη φορά ανά κατάστημα, με τουλάχιστον ένα δευτερόλεπτο ανάμεσα. Κάθε ανάγνωση σταματά στα 1.000 προϊόντα.
robots.txt
Πριν διαβάσει οτιδήποτε, ελέγχει το robots.txt και ακολουθεί τους κανόνες για KnockadayBot και για όλα τα bots (*).
Πώς θα το αναγνωρίσεις
Κάθε αίτημα έχει αυτό το User-Agent, μαζί με έναν σύνδεσμο σε αυτή τη σελίδα:
KnockadayBot/0.1Πώς να το σταματήσεις
Πρόσθεσε αυτές τις γραμμές στο robots.txt του καταστήματός σου:
User-agent: KnockadayBot
Disallow: /