El 57% de los responsables de la toma de decisiones en los ámbitos de la tecnología, data y análisis declararon que sus empresas aplican y desarrollan tecnologías de inteligencia empresarial y de mercado (1).
La inteligencia estratégica y de mercado y sus aplicaciones (inteligencia competitiva, inteligencia de patentes, inteligencia comercial, inteligencia tecnológica, inteligencia regulatoria, inteligencia de tendencias, inteligencia de seguridad, inteligencia de mercado, etc.) cubren un amplio abanico de campos y responden a múltiples retos dentro de la empresa:
- Estrategia (competencia, tendencia, innovación...)
- Marketing (lanzamiento de productos, conocimiento del consumidor, estudios de mercado, reputación...)
- Ventas (seguimiento de clientes y prospectos, desarrollo de negocio...)
- Legal (reglamentos y normas, falsificación, lobbying...)
- I+D (Patentes, Estudios, innovaciones, ensayos clínicos...)
- Producción (Proveedores, procesos, trabajos)
- Riesgos (política, activismo…)
En estas condiciones, las empresas prefieren soluciones de software de inteligencia de negocio que ofrezcan una amplia gama de funcionalidades, que puedan satisfacer esta variedad de necesidades y que puedan ser fácilmente desplegadas en una organización local e internacional.
La inteligencia estratégica y sus herramientas: una respuesta a muchos desafíos.
¿Cómo elegir un software de monitorización? ¿Según qué criterios?
El concepto de software de monitorización aquí discutido se refiere a soluciones para simplificar y automatizar todas o parte de las tareas de analisis, que a menudo se organizan según las 5 etapas principales de la monitorización, sea o no un especialista. Los beneficios esperados incluyen el ahorro de tiempo, la reducción de tareas tediosas y repetitivas, el aumento del tiempo dedicado a tareas de mayor valor añadido, como el análisis, un espectro más amplio de fuentes supervisadas, un mayor volumen de información analizada, cualificada y categorizada, un intercambio y una difusión más selectivos, y la mejora y colaboración en la optimización de la información y los datos.
Cubrimos las funcionalidades necesarias y esenciales, siguiendo las 5 etapas principales del ciclo: Recolección, análisis, capitalización, colaboración, mejora y resultados.
Esta semana, nos centraremos en la primera fase, la colección. Hablaremos aquí de colección en sentido amplio: búsqueda "one shot" mediante un motor de búsqueda, monitorización de fuentes para generar alertas en función de los cambios de contenido o de la aparición de palabras clave.
El ciclo de análsis gestionado por una solución de inteligencia de mercado.
1. La recopilación de fuentes
El núcleo de una plataforma de monitoreo es su capacidad para capturar, organizar y compartir datos relevantes. El rendimiento de la solución de monitorización depende en gran medida de la base constituida por la capacidad de recopilar datos y de las fases previas de la búsqueda (investigación, recopilación, capitalización y cualificación de las fuentes relevantes para la monitorización).
Por lo tanto, una herramienta de seguimiento tendrá que combinar el aprovisionamiento pertinente con potentes tecnologías de colecta y búsqueda.
La colección deberá basarse en 6 pilares para ser eficaz:
- Una oferta de fuentes verificadas y calificadas y una actualización permanente por consultores especializados, familiarizados con la investigación de la información y el monitoreo del sector. Durante este paso, se establecerá una lista de las fuentes que deben ser monitoreadas y constituirán el punto de partida, pero también los fundamentos del sistema de monitoreo.
- La posibilidad para el usuario final de añadir las fuentes especializadas de su elección en unos pocos clics.
- Tecnologías probadas de recolección de datos para raspado, rastreo, API, conectores a bases de datos de terceros, recolectores de datos de clientes.
- La contribución de la Inteligencia Artificial y el Aprendizaje Automático para aprender a reconocer y extraer información de sitios sin RSS o API.
- Capacidad para gestionar todos los alfabetos (latín, cirílico, árabe abjad, ideogramas...) y para gestionar y convertir todo tipo de formatos (RSS, XML, HTML, PDF, Office...).
- Tecnologías de búsqueda instantánea en un corpus de fuentes calificadas, combinadas con tecnologías de monitorización de fuentes diversificadas, web o campo.
Por lo tanto, la solución de monitorización debe ofrecer tecnologías y conectores para gestionar el rastreo, el acceso a bases de datos, la transformación de datos heterogéneos y no estructurados en información estratégica (archivos de Office, lenguajes, información no estructurada).
Seguimiento: Los 6 pilares de una fase
2. La necesaria diversidad de fuentes
La inteligencia competitiva se basa a menudo en la confrontación de información para poner en perspectiva varios puntos de vista. Además, algunas informaciones y datos no están disponibles en la web visible, ni siquiera en Internet. Por eso es necesario maximizar el número de tipos de fuentes a recolectar y analizar.
- Una solución poderosa de inteligencia de mercado debe integrar, además de las fuentes tradicionales de la web, otros tipos de fuentes complementarias o exclusivas en su contenido. Por lo tanto, es necesario poder buscar y recoger:
- La web en profundidad invisible (contenido mal o no indexado por los motores de búsqueda de Google)
- La dark web (Internet clandestina u oscura sólo accesible a través de software, configuraciones o autorizaciones específicas)
- Redes sociales occidentales y asiáticas: además de los pesos pesados (Instagram, Facebook, Twitter, Reddit...), también es necesario integrar las grandes redes en algunos mercados como Naver, QQ, Weibo, WeChat....
- Blogs, foros y sitios de opinión general y especializada (TripAdvisor, Yelp, Glassdoor...)
- Bases de datos y proveedores de contenidos (Factiva, Lexis Nexis, Thomson Reuters, Web of Science, Google Scholar, Patbase...)
- Datos del cliente (encuestas, notas, documentos internos)
- Datos de la monitorización de campo / ferias / congresos
- Los boletines informativos
- Sitios de prensa y noticias
- canales de RSS
- Datos de rastreo y raspado
- Datos a través de APIs
- Resultados de los motores de búsqueda.....
Buscar: Recopilar en una amplia variedad de fuentes
3. Gestión de fuentes complejas, especialmente a través de la Inteligencia Artificial
La solución de monitorización debe permitir recoger información de las denominadas fuentes "complejas". Recopilar y supervisar los canales RSS es fácil. La recopilación de datos heterogéneos en un sitio detrás de una autenticación es más complicada.
Por lo tanto, es necesario ser capaz de gestionar:
- Sitios detrás de la autenticación (si se proporcionan credenciales)
- Sitios y contenido detrás de un formulario (como un formulario de búsqueda)
- Sitios con datos dispersos no estructurados (que requieren una plantilla de extracción)
- Las áreas precisas de una página web a monitorizar
- Datos heterogéneos (varios idiomas, varios formatos)
- Sitios de noticias, corporativos o blogs sin feeds RSS
- Sitios sin APIs
En particular, el software debe poder confiar en:
- Inteligencia Artificial y Machine Learning para reconocer la estructura de una página web, noticias, página de resultados para automatizar la colección.
- Raspado web avanzado (web crawler, extracción de secciones de página, gestión de sesiones web, anonimización).
- Rastreo por la web (RSS, sitios web completos, sitios de noticias).
- APIs avanzadas de lectura/escritura para la conexión a bases de datos internas.
Monitoreo: Saber cómo manejar fuentes complejas.
4. Fuentes listas para usar
Las tecnologías de recolección probadas deben complementarse con una colección de fuentes calificadas, verificadas y pertinentes. La búsqueda de fuentes es un proceso que requiere mucho tiempo dentro del ciclo de monitoreo. Además, su herramienta debe ser capaz de proporcionar un catálogo de fuentes seleccionadas por especialistas, mantenidas y seleccionables por criterios (formato, idioma, país, sectores, etc....).
5. Motores de búsqueda y monitorización
El monitoreo y la recuperación de información en sentido estricto son dos enfoques diferentes. En el primer caso, las fuentes son monitoreadas para recibir alertas cuando ocurre cualquier cambio o aparecen expresiones clave o cuando se excede un umbral de información.
La búsqueda de información (a través de un motor de búsqueda) consiste en una consulta, para obtener información o encontrar una fuente.
Los dos enfoques se complementan perfectamente y deben ser facilitados y "equipados" por su solución de monitorización. En particular, debe proponer:
Una interfaz de consulta simplificada con ayuda para la redacción, sugerencias de términos y resumen de resultados
- Una interfaz experta para los especialistas de la información que desean gestionar operadores booleanos, paréntesis, truncamientos....
- Una contribución de AI (machine learning) para sugerir peticiones y mejorar la desambiguación.
- Una presentación organizada de los resultados de la búsqueda por tipo de evento a través de la IA y los filtros semánticos (por ejemplo, información mostrada instantáneamente según los temas de I+D, los productos, los contratos, las asociaciones, la innovación, la marca de la empresa, la contratación, el gobierno, los comentarios de los clientes, etc.....).
Estos son los criterios que deben tenerse en cuenta en la primera fase del ciclo de seguimiento, en lo que se refiere al origen y la recogida.
Discutiremos el análisis, la capitalización, el compartir, la colaboración y la valoración en futuras publicaciones.
1) Estudio sobre 2.154 responsables de la adopción de decisiones en materia de tecnologías mundiales de datos y análisis. Fuente: Forrester Analytics Global Business Technographics® Data And Analytics Survey, 2019.
.svg){kind=small}
