Votre stratégie de gestion des bots Web doit tenir compte du contexte commercial

Cette introduction technique rédigée par le fournisseur a été modifiée par Network World pour éliminer la promotion des produits, mais les lecteurs doivent noter qu'elle favorisera probablement l'approche du soumissionnaire..

Entre 30% et 70% du trafic vers la plupart des sites Web provient de robots, ce qui signifie qu'il s'agit de trafic non humain. Et bien que beaucoup supposent que le trafic des robots devrait être bloqué, il s'agit d'une approche en noir et blanc d'un problème très gris. La réalité est que certains bots sont bons, certains bots sont mauvais, mais la plupart seront quelque part entre les deux. Vous avez besoin d'un outil de gestion de bot qui vous permet d'appliquer une gamme d'actions de gestion en fonction du modèle commercial de votre site Web..

Considérez l'industrie du transport aérien. Un site de réservation de compagnies aériennes typique pourrait voir 50% de son trafic provenir de visiteurs humains, les 50% restants provenant de robots. Bien que la première pensée soit souvent de bloquer le trafic des robots, une approche plus efficace consiste à comprendre pourquoi les robots sont ici et quel est l'impact sur l'entreprise.

L'industrie du transport aérien est très compétitive avec les compagnies aériennes en concurrence sur les horaires et les prix sur des milliers de routes chaque jour. Les horaires et les prix des vols sont très variables d'un jour à l'autre et fluctuent également rapidement en fonction de l'offre et de la demande - les prix augmentent à mesure que n'importe quel avion se remplit, et vice-versa. Les consommateurs tentent d'obtenir le meilleur prix, les concurrents tentent de gagner vos clients et les partenaires tentent d'aider les clients à obtenir les meilleurs prix et tous dépendent d'un accès continu aux dernières données.

Fournir cet accès aux données a un coût. La plupart des compagnies aériennes ne stockent pas leurs horaires de vol et leurs prix en interne. Ils utilisent un système de distribution mondial (GDS), comme Amadeus ou Sabre. Chaque fois que quelqu'un recherche des données de vol, cela implique un appel au GDS. Et chaque appel au GDS, qu'il provienne d'un humain ou d'un bot, entraîne un coût, qui peut être substantiel sur de gros volumes - de l'ordre de centaines de milliers de dollars chaque mois. Avec les consommateurs et les partenaires, le coût GDS est intégré au coût des ventes. Avec les concurrents, cependant, c'est juste une perte de coût sans aucun avantage potentiel.

Tout cela est un contexte commercial qui doit être pris en compte dans une conversation sur les bots, car il nous aide à déterminer les exigences techniques d'une solution de gestion de bots. Tout d'abord, nous savons que le blocage des robots ne fonctionnera pas. L'industrie du transport aérien est une industrie mondiale de 700 milliards de dollars. Les compagnies aériennes concurrentes et les services de veille concurrentielle qui leur vendent ont une incitation financière considérable à obtenir les données de vol et à capturer un pourcentage plus élevé de ces 700 milliards de dollars de revenus. Bloquer leur bot ne les fait pas disparaître. Le blocage leur fait simplement savoir que vous avez détecté leur bot. Et cela les déclenche juste pour faire évoluer leur bot pour échapper à vos détections.

Deuxièmement, la distinction entre les bons et les mauvais robots peut être extrêmement difficile, voire impossible. Bien que vous puissiez toujours mettre en liste blanche les robots d'un petit nombre de partenaires autorisés, l'industrie du voyage dispose de nombreux moteurs de recherche et sites de voyage plus petits. Ces sites plus petits tombent dans une zone grise de partenaires non autorisés qui, même s'ils n'ont pas de relations officielles avec les compagnies aériennes, restent un canal potentiel de vente aux clients. Cela signifie que le blocage de robots inconnus va probablement attraper ces partenaires non autorisés et avoir un impact inattendu sur les ventes..

Alors, comment résolvez-vous le problème commercial de manière significative tout en restant conscient du fait que de nombreux robots inconnus peuvent contribuer aux ventes? La gestion des bots doit aller au-delà du blocage et permettre aux organisations d'appliquer un plus large éventail d'actions de gestion ou de réponses de bots.

Par exemple, dans l'industrie du transport aérien, le trafic de robots lui-même n'est pas le principal problème. Le principal problème est le coût élevé des recherches GDS effectuées par les robots visitant le site de réservation. Vous pouvez atténuer ce problème sans essayer de bloquer les bots en masse en utilisant les données stockées dans le cache pour répondre aux demandes de bot concernant les horaires et les prix des vols. En servant des bots avec des données en cache, nous pouvons réduire considérablement le nombre d'appels vers le GDS sans alerter l'opérateur de bot que nous avons détecté son bot. Cela permet de minimiser les coûts commerciaux élevés associés aux bots, tout en ralentissant le taux d'évolution des bots et sans fermer la porte aux clients incrémentiels et aux revenus de vente par le biais de partenaires non autorisés (et inconnus).

La situation ci-dessus n'est nullement limitée à l'industrie du transport aérien. La frontière entre les bons et les mauvais robots est de plus en plus floue dans la plupart des secteurs, ce qui rend difficile pour toute organisation d'utiliser une approche en noir et blanc comme le blocage..

La vente en ligne de mode en fournit un autre exemple fascinant. La plupart des détaillants de mode vendent aujourd'hui directement aux consommateurs via leurs sites de commerce électronique, en plus des magasins physiques. Avec un modèle B2C, il est toujours tentant de penser que vous pourriez simplement bloquer les visiteurs non humains sur votre site de commerce électronique, en supposant qu'ils ne contribuent pas aux ventes.

Ce que cette hypothèse manque, c'est que le comportement des consommateurs change constamment et que la façon dont ces consommateurs interagissent avec votre marque et votre site Web en ligne est également en constante évolution. Aujourd'hui, les consommateurs n'achètent plus la majorité de leurs vêtements auprès d'une seule marque, mais plutôt dans plusieurs boutiques. De plus, beaucoup recherchent une introduction à de nouvelles et différentes marques. Cela signifie que les consommateurs se tournent activement vers des tiers pour de nouvelles idées et recommandations.

Considérez Fashiola. Fashiola fait partie d'une nouvelle génération de moteurs de recherche spécialisés se concentrant sur une niche du marché de la recherche - dans ce cas, les détaillants de mode en ligne. Bien que probablement pas encore sur le radar des grandes marques - en particulier en dehors de l'Europe - Fashiola aide à connecter des millions d'utilisateurs avec plus de 1800 marques différentes, ce qui représente un canal potentiel pour atteindre les consommateurs. Si vous étiez sur le marché pour une paire de chaussures en daim bleues, par exemple, vous pouvez simplement vous rendre chez Fashiola, taper «chaussures en daim bleues» et voir les offres pertinentes de plus de 1 800 marques.

Comme vous vous en doutez, Fashiola suit l'évolution des produits et des prix des marques qu'ils indexent à l'aide de robots automatisés. Fashiola, et d'autres sites similaires, prouvent qu'il n'est plus possible d'employer une approche simple en noir et blanc des bots. L'approche traditionnelle consistant à bloquer les bots par défaut, tout en ajoutant à la liste blanche quelques bons bots connus, suppose que vous connaissez tous les bots qui sont bons. Mais lorsque le nombre et la diversité des bons robots changent quotidiennement, les organisations ne peuvent pas tous les suivre. Une position par défaut de blocage des robots risque de manquer de changer rapidement le comportement des consommateurs et de ne pas participer à de nouveaux modèles commerciaux, fermant ainsi la porte aux ventes incrémentielles.

En ce qui concerne les robots, le contexte est important. Les consommateurs, partenaires, concurrents et autres interagissent avec vous et votre site Web de manière nouvelle et différente qu'auparavant. Pour cette raison, le blocage des bots en tant que stratégie par défaut est plus susceptible que jamais de nuire à l'entreprise - et de manière imprévisible.

Bon, mauvais ou quelque peu gris, la gestion des bots doit commencer par le contexte commercial des bots et tenir compte du rôle qu'ils jouent dans votre stratégie en ligne. En déployant des actions de gestion plus appropriées pour mieux gérer les bots, vous pouvez exploiter les façons positives dont ils peuvent aider votre entreprise, tout en minimisant les négatifs.

Rejoignez les communautés Network World sur Facebook et LinkedIn pour commenter des sujets qui vous tiennent à cœur.