Robot d’exploration

Notre robot : shopfinder

Si vous avez vu l’agent utilisateur shopfinder/0.1 (+https://sellmorecountries.com/crawler) dans vos journaux, c’était nous.

Ce qu’il fait

Il consulte les pages publiques de boutiques en ligne pour trouver celles à qui une version traduite pourrait être utile : langues de la boutique, pays, nombre de produits et adresse de contact publique. Il ne lit que des pages accessibles à tous. Il ne se connecte jamais à un compte, ne remplit jamais de formulaire et n’essaie jamais de contourner une protection.

Avec quelle discrétion

• Il respecte votre robots.txt.
• Au moins deux secondes entre deux requêtes vers une même boutique, et au plus 14 requêtes par boutique lors d’un passage.
• Il ralentit quand un serveur le lui demande, s’arrête après des erreurs répétées et ne réessaie jamais après un refus.

Quand quelqu’un demande un aperçu gratuit sur ce site, nous ouvrons aussi une fois la page d’accueil de cette boutique pour vérifier qu’elle utilise Shopify, sous le nom SellMoreCountries-preview/1.0.

Comment vous y opposer

Ajoutez ceci à votre robots.txt :

User-agent: shopfinder
Disallow: /

Ou écrivez à hello@sellmorecountries.com en indiquant votre adresse web, et nous l’ajoutons définitivement à notre liste d’exclusion.