Trouver des opportunités CRO à l'aide de SEO Crawlers

Les humains sont toujours nécessaires, mais, mon garçon, les robots d'exploration peuvent-ils aider

Plus je fais de CRO, plus je me rends compte de l'importance des différents types de recherche. Pendant de nombreuses années, j'étais lourd (et je le suis toujours dans une certaine mesure) dans les données quantitatives. Réaliser une collecte de données propre et fiable dans des configurations Google Analytics presque parfaites. Cela conduira aux meilleurs programmes CRO, n'est-ce pas ? Cela vous permet de démarrer dans un endroit formidable, mais ce n'est qu'un début.

Dans cet article, je vais partager un flux de travail de résultats de recherche interne que j'ai développé au fil des ans à partir de mes journées d'analyse et de référencement qui vous aidera à accélérer votre recherche dans les domaines sur lesquels votre programme CRO devrait se concentrer.

Rencontrez Screaming Frog.

Résultats de recherche (recherche de site interne) Analyse approfondie

Il serait facile pour moi de vous montrer des mappages d'intention (pour l'intention du chercheur et l'intention SERP) pour montrer quand la pertinence est manquante (pour les mots clés et les types de page). Cela viendra peut-être plus tard, mais je pense que cela a été fait pas mal.

Au lieu de cela, je veux parler de quelque chose d'encore plus proche de la conversion, les résultats de recherche de votre site interne.

La recherche sur le site est l'un des signaux les plus importants indiquant que vos utilisateurs veulent vraiment quelque chose.

Nous pouvons voir la différence ici à partir de ce site de fournitures de piscine entre les utilisateurs qui recherchent et ceux qui ne le font pas :

130 % de conversions en plus lorsque les utilisateurs effectuent une recherche n'est pas trop surprenant, mais cela montre la puissance de fournir la meilleure expérience de recherche possible.

Examinons maintenant les termes de recherche pour nous assurer que l'expérience est optimisée.

Ma première recommandation est de télécharger tous vos termes de recherche (les 12 derniers mois sont généralement les plus logiques, sauf si vous êtes très saisonnier).

Ensuite, exécutez-les à travers un outil de cluster pour comprendre comment les gens recherchent à un niveau supérieur (cela vous donnera une meilleure direction que de passer au peigne fin des milliers de KW).

(Avant de regrouper, assurez-vous de normaliser et de nettoyer vos mots clés pour les fautes d'orthographe et/ou la gestion différente des cas.)

Utilisez =trim(clean(lower(cell-number))) pour votre formule afin de les nettoyer dans Google Sheets.

Maintenant, copiez-les et collez-les dans Keyword Grouper Pro de MarketBold (c'est gratuit).

Pour former un groupe, vous estimerez combien de basé sur j'utilise 1 000 mots-clés pour commencer, donc je suppose que 10 par groupe me donneront le bon nombre de groupes ici. Vous ne savez jamais vraiment combien de groupes vous voulez, mais vous devriez en avoir assez pour être représentatif de vos utilisateurs qui recherchent en fonction du nombre que vous téléchargez (vous vous améliorerez avec l'utilisation).

par GIPHY

En voyant les mots clés regroupés, je les regrouperais en quelques catégories différentes en fonction de la façon dont les gens recherchent :

• Numéros de pièce (n'obtient pas beaucoup plus de fond de l'entonnoir que cela)
• Les noms de marques
• Types de catégories générales

Maintenant, je peux être plus ciblé avec les termes de recherche GA pour savoir quoi rechercher.

Dans ce scénario, étant donné que les utilisateurs recherchant des numéros de produits ont une intention d'achat élevée, je voudrais commencer par là (et pas seulement regarder les premiers résultats de recherche "x"). Avec quelques Regex simples pour isoler uniquement les numéros de produits (plus d'un numéro dans les termes de recherche), nous constatons que 80% des recherches contiennent un numéro de produit

Nous souhaitons maintenant exporter nos résultats de recherche depuis Google Analytics. Si vous avez beaucoup de termes de recherche, vous devrez peut-être utiliser l'API ou un outil comme le module complémentaire Google Analytics Google Sheets (c'est gratuit).

Inspecter les résultats de la recherche (que recherchons-nous ?)

Certes, c'est là que j'ai commencé pour m'assurer que je n'allais pas dans un terrier de lapin. Mais ayant fait cela trop de fois pour compter maintenant, je savais ce que je cherchais

Les «zones problématiques» ici varieront en fonction de la plate-forme et du fournisseur de recherche que vous utilisez. Pour ce scénario, je m'intéresse principalement à :

• le nombre de résultats affichés
  
  Montré ici :

• Articles qui s'affichent en rupture de stock
  
  Montré ici :

• Les 3 principales catégories dans lesquelles tombent les résultats de la recherche (cela pourrait être réalisé avec une RECHERCHEV plus tard, mais je préférerais le faire ici/tout à la fois)
  
  Montré ici :

Les questions suivantes m'aident à comprendre les données :

• Montrons-nous le bon nombre de résultats de recherche pour ces recherches de numéro de produit ?
  Avec presque tous les autres types de recherches, avoir un seul résultat serait loin d'être optimal, mais sur la base de ces recherches, il est logique de n'afficher qu'un seul résultat. Mais il est assez important que nous voyions ce résultat, cependant!

• Quels résultats de recherche ont le plus de retours de produits bloqués ?
  Aussi un peu plus pertinent pour les recherches qui renvoient beaucoup de résultats.

• Quelles catégories obtiennent le plus…
  
  
  • Recherches de produits ?
  • Vous avez le plus de résultats en rupture de stock ?
  • Le plus petit nombre de résultats est-il renvoyé (ce qui entraînera plus que probablement un plus grand nombre de sorties) ?

Utilisation de Screaming Frog pour imiter les résultats de recherche

Vient maintenant la partie amusante — utiliser Screaming Frog !

Je ne couvrirai aucun aspect de l'utilisation de Screaming Frog. C'est un outil très complexe et même si je l'utilise depuis près d'une décennie, je pourrais probablement encore en faire plus.

Le dernier élément "d'attention aux détails" consiste à regarder l'URL de votre site après avoir effectué une recherche pour voir le modèle :

Il est important de le savoir, car nous ajouterons le terme de recherche de Google Analytics aux URL du site pour correspondre à ce modèle. Nous allons imiter un utilisateur recherchant cela avec le crawler et extraire les domaines d'intérêt que nous avons déjà couverts (résultats de recherche, rupture de stock et catégories).

1. Saisissez tout ce qui précède votre terme de recherche dans l'URL :

2. Combinez cette chaîne d'URL avec le terme de recherche :

Remarque : si vous avez des espaces dans vos termes de recherche, vous devrez utiliser Regex avancé ou JS pour ajouter un %20 dans l'URL. J'utilise personnellement TextSoap pour ces manipulations.

3. Ouvrez Screaming Frog et passez en mode Liste :

4. Choisissez la manière dont vous souhaitez télécharger votre liste d'URL (ne les collez pas si vous en avez plus de 10 000, le chargement prendra une éternité) :

5. Avant d'exécuter votre robot d'exploration, vous devez trouver un moyen d'extraire les éléments nécessaires du site.

Je vais montrer les résultats de la recherche ici dans SF et le reste, vous pouvez choisir comment vous voulez extraire.

1. Vous voudrez extraire le nombre de résultats de recherche pour savoir combien de résultats reviennent lorsque ce mot-clé est recherché. Pour ce faire, nous utiliserons XPATH (mon langage de prédilection généralement en SF).

2. J'aime généralement essayer d'abord la manière la plus simple possible, puis n'inspecter l'élément qu'en cas de besoin. #WorkSmarter avec l'extension chrome XPather.

GIPHY

3. Cela me donne le XPATH dont j'ai besoin, ainsi qu'un aperçu de la "sortie" de ce que je verrai plus que probablement dans Screaming Frog.

4. Remarque : Je ne vais pas m'inquiéter d'extraire uniquement le nombre de résultats. C'est un nettoyage de 5 secondes dans Google Sheets.

5. Maintenant, je peux entrer ceci dans SF sous la section Configuration → Personnalisé → Extraction, vue ici :

6. Je vais changer la sortie en Extraire le texte pour le nettoyer davantage et laisser de côté le code HTML inutile.

7. Une fois que vous avez cliqué sur OK, vous pourrez explorer les URL spécifiées que vous avez précédemment (ou peut-être pas encore) téléchargées. (Encore une fois, la raison pour laquelle nous avons téléchargé des URL était d'éviter d'explorer l'intégralité du site et d'explorer uniquement les termes de recherche qui nous intéressent.)

8. Voici un exemple de sortie pour une poignée d'URL et le nombre de résultats de recherche renvoyés par ces termes de recherche :

9. Ensuite, vous voudriez probablement savoir à quelle fréquence ces recherches ont lieu. C'est ici que vous pouvez vous connecter à Google Analytics pour voir le nombre de pages vues pour les URL correspondantes.

10. Personnellement , je trouve utile ici de créer un "ratio" de pages de recherche élevées par rapport au faible nombre de résultats renvoyés.

Existe-t-il également une corrélation entre un faible nombre de résultats et un nombre élevé de sorties sur ces pages ? (Je vois que cela se produit lorsqu'il y a moins de 10 résultats, ce qui signifierait que les résultats de la recherche ne semblent pas "complets" car la plupart des sites n'ont pas plus de 5 larges par ligne.)

11. Autres points de données utiles que vous pourriez utiliser ici (en fonction de l'affichage de vos résultats de recherche et de la navigation à facettes) :

Quels résultats de recherche renvoient le plus de résultats en rupture de stock ? (Si vous ne pouvez rien faire, comme être averti lorsque ce produit est en stock, vous voudrez peut-être envisager de le supprimer des résultats de recherche.)

Mappage des termes de recherche vers les catégories (et les sous-catégories le cas échéant). Aide à comprendre la demande au fil du temps des utilisateurs et alimente de nombreuses informations différentes - des nouveaux tests à la personnalisation pour les mots clés ambigus dans le fonctionnement du tri des résultats.

Recherches par numéro de produit, comme nous l'avons montré précédemment. La plupart des gens n'effectueront pas plusieurs recherches si leur numéro de produit ne renvoie rien. Ce n'est peut-être pas une solution facile immédiatement, mais vous pouvez afficher une fenêtre contextuelle d'intention de sortie pour être averti du retour en stock de ce produit.

Je pourrais continuer ici, mais j'espère que ces exemples ont aidé à brosser un meilleur tableau de la façon dont vous pouvez gratter vos propres résultats de recherche pour mieux comprendre le type d'expérience qu'ils offrent aux utilisateurs.

Remarque : Vous avez peut-être remarqué que j'ai changé de site à partir d'ici. Lorsque j'ai commencé cet article de blog, le premier site utilisait un moteur de recherche différent, puis il a changé, et je voulais montrer un meilleur exemple basé sur XPATH par rapport à la plongée dans d'autres méthodes (c'est généralement la méthode la plus fiable, avec CSS sélecteurs).

Deuxième remarque : filtrez l'adresse IP de votre robot d'exploration dans Google Analytics afin de ne pas vous compter dans vos pages vues. Si vous déclenchez votre balise de consultation de page 2 à 3 secondes après le chargement de votre fenêtre, vous n'avez pas à vous soucier du trafic des robots d'exploration ou des bots comme celui-ci (et bravo à vous, c'est une vérité beaucoup plus utile sur les données).

Mise à l'échelle + domaines d'automatisation de ce processus

Certains d'entre vous pourraient dire : "Eh bien, ce n'est pas automatisé, je ne veux pas le faire manuellement."

C'est un point tout à fait valable. Personnellement, cela ne me dérange pas parce que la plupart de mes clients n'ont pas des millions de résultats de recherche renvoyés pour justifier de le faire chaque semaine (ou plus). Il s'agit généralement d'une tâche mensuelle ou trimestrielle que j'effectue en collaboration avec Google Analytics pour voir si les tendances et les modèles changent.

Si vous êtes plus technique, vous pouvez vous en tenir à Screaming Frog et configurer une solution VPS pour exécuter des analyses automatisées dans le cloud, en transmettant les résultats à Google BigQuery une fois terminé. SF a un bon guide à ce sujet.

Il existe d'autres solutions plus "clés en main" et certainement moins pratiques, comme ContentKing (je les ai utilisées dans le passé), qui permet également des "alertes" si certains seuils sont atteints. (Pensez aux recherches de numéros de produit sans résultat = e-mail ou notification Slack).

Autres domaines à rechercher avec un robot d'exploration SEO

J'espère que cela vous a ouvert un peu plus les yeux sur les possibilités d'utilisation des robots d'exploration SEO pour obtenir des informations d'optimisation. (Screaming Frog n'étant qu'un parmi tant d'autres, mais celui que je recommande).

Les résultats de recherche internes ne sont qu'une petite partie de ce pour quoi j'utilise les crawlers. Il y a tellement plus que les crawlers peuvent trouver pour vous. Je les utilise de différentes manières lorsque je travaille avec mes clients.

Si vous avez des questions ou des commentaires spécifiques à ce sujet ou sur tout autre sujet lié au CRO, n'hésitez pas à me contacter via LinkedIn, Twitter ou par e-mail : [email protected].