Hola,
como muchos sabéis hay herramientas externas (por ejemplo semrush) para analizar palabras clave, volumen de busquedas, etc...
Mi pregunta es...¿de donde sacan todos esos datos? lo pregunto porque a esa información sólo se tiene acceso desde la plataforma gratuita google ads ....
Gracias
No lo sé, pero por ejemplo el foro y la web no paran de rastrearlo con su bot de rastreo "
SemrushBot" . Está en el Top 1 de robot rastreador con mucha diferencia.
En pocos días (analíticas de Awstats)
CitarVisitas de Robots/Spiders (Top 10) - Lista completa - Última visita
113 robots distintos* Solicitudes Tráfico Última visita
SemrushBot 93,513+175 1.92 GB 06 Ene 2021 - 13:14
Top 10 (sin contar Google Bot)
CitarSemrushBot/7~bl; +http://www.semrush.com/bot.html)
MegaIndex.ru/2.0; +http://megaindex.com/crawler)
PetalBot;+https://aspiegel.com/petalbot)
YandexBot/3.0; +http://yandex.com/bots)
bingbot/2.0; +http://www.bing.com/bingbot.htm)
DotBot/1.1; http://www.opensiteexplorer.org/dotbot, help@moz.com)
Mail.RU_Bot/2.0; +http://go.mail.ru/help/robots)
MJ12bot/v1.4.8; http://mj1
Así que imagino que estarán rastreando internet de forma intensiva se puede hacer analíticas y demás "bastante" fiables.
Pues la verdad...no sé que intereses pueden tener semrush que su bot visite este foro porque su negocio se basa en palabras clave que la gente usa en el buscador de google.
Igual lo usan para rastrear donde están hablando de ellos.
¿Si genera tanto tráfico dentro de la web no os interesaría bloquearlo como hacen otras páginas a otros bots?
No importa el tráfico que generen en el foro, además no es tráfico "maligno", me refiero que es tráfico pausado, escalonado durante todo el día, es un bot de rastreo benigno, hace muchas peticiones pero repartidas durante todo el día y nunca todas de golpe.