Mostrando entradas con la etiqueta Data Mining. Mostrar todas las entradas
Mostrando entradas con la etiqueta Data Mining. Mostrar todas las entradas

viernes, 21 de enero de 2022

10 TIP's de Analítica Avanzada: Introducción

 



Este es primero de un total de 11 artículos sobre TIP's o recomendaciones de analítica avanzada, que iré publicando periódicamente a fin de facilitar el conocimiento sobre estos temas.

Es claro que al momento es imprescindible el poder utilizar los datos para la generación de nuevos negocios, optimización de recursos o generación de nuevos productos y/o servicios, lo cual al momento inclusive debido al COVID-19 se ha impulsado aún más la necesidad de utilizar técnicas de analítica avanzada para la toma de decisiones. Sin embargo, la inquietud que surge es cómo puedo hacer que esto sea efectivo, cuáles podrían ser las mejores prácticas o TIPs que me permitan llevarlo a la práctica y así alcanzar los beneficios que tanto se comentan, por lo que vamos a desarrollar una serie de artículos en donde se abordarán cada uno de estos TIPs y que serán liberados periódicamente.

En esta primera entrega vamos a mostrar el camino que seguiremos al respecto y realizaremos una breve descripción de este, para lo cual vamos a empezar describiendo cuáles son las claves que ha impulsado el interés en el uso de la analítica de datos:

  • Captura de datos: Los avances tecnológicos como por ejemplo sensores basados en el Internet de las cosas (IoT - Internet of Things), comercio electrónico, redes sociales, dispositivos móviles han impulsado la captura de gran cantidad de datos a muy bajo costo.
  • Almacenamiento de datos: La explosión en las capacidades de almacenamiento de datos tanto en entornos privados o a través de computación en la nube ha facilitado el almacenamiento seguro de datos mucho más que antes.
  • Procesamiento de datos: Los avances en las redes de telecomunicaciones ha permitido tener un acceso más efectivo y al procesamiento masivo de datos de manera rápida y eficiente.

Estos elementos claves ha permitido la explotación del uso de datos y muchas empresas empezaron a tratar de sacar provecho de los mismos, para lo cual es necesario plantearse ciertas preguntas claves, que permitan sacar valor de los datos, como por ejemplo: ¿Qué sucedió con las ventas, los costos, gastos, etc.?, ¿Cuántas ventas se hicieron? ¿Cuán a menudo se cierra un negocio? ¿En dónde existen mayores gastos?, entre otras preguntas. En la medida que se hacen estas preguntas es necesario utilizar ciertas herramientas y dependiendo de esto nos encontraremos en cierto nivel de maduración cuyo resultado reflejará cierto tipo de hallazgo y también el nivel de valor que esto agregará a la organización, lo cual se puede resumir en la siguiente lámina.



Para llevar a cabo el trabajo de analítica es conveniente seguir un proceso que vaya desde el conocer las necesidades hasta la ejecución de las acciones pertinentes para alcanzar los beneficios esperados, lo cual está simplificado en la siguiente imagen.





Cada una de grandes actividades del proceso descrito anteriormente nos ayudan establecer los pasos para a seguir, sin embargo, a pesar de que estos pasos han sido definidos a través de diferentes recomendaciones a nivel de la industria (como por ejemplo CRISP-DM, KDD o SEMMA) esto no ha sido suficiente para obtener valor a través de los datos ya que es necesario también tener en cuenta algunos aspectos adicionales o TIPs en cada una de estas fases, los cuales se detallan a continuación:



Estos TIPs están relacionados con cada una de las fases del proceso de analítica de la siguiente forma:





Y es así como terminamos esta introducción con la ruta que seguiremos en los próximos artículos en donde se expliquen cada uno de los TIPs de analítica avanzada.


BIBLIOGRAFIA
  • Creating a Data-Driven Organization, Practical Advice from the Trenches, Carl Anderson, 2015
  • Analytics best practices, Prashanth H Southekal, 2020


domingo, 21 de agosto de 2016

Facebook Ecuador - Top 5 Fans - ¿Qué dice la gente?



En la entrega anterior vimos los posts que tenían mayor cantidad de likes y comentarios como una muestra de lo que se puede hacer a nivel de Inteligencia de Negocios y Minería de Datos. Ahora vamos a profundizar un poco más, utilizando la misma técnica de webscraping que nos permite obtener información de una página en particular.

Para esto vamos a continuar con los datos obtenidos previamente de las 5 páginas de facebook con más fans en Ecuador y vamos a seleccionar el post con más likes y el que tiene mayor cantidad de comentarios.

De estos 2 posts hemos extraído la información de los comentarios realizados y hemos utilizado una herramienta de analítica avanzada denominada KNIME para tomar todos los comentarios y clasificarlos por cantidad de repetición, a continuación mostramos el flujo elaborado en KNIME para realizar dicho trabajo a modo de ejemplo de la herramienta.



En el caso del post con más likes, el cual corresponde a uno emitido por Chevrolet, luego de la victoria del Independiente del Valle frente a Boca Junior, vemos a continuación una tabla con las palabras mas frecuentemente comentadas. La lista es grande y solo se muestran un extracto de ellas con la cantidad de veces que se ha repetido cada una:


 Luego con esta información generamos una nube de palabras que mostramos a continuación:


Haciendo lo mismo con el post con más comentarios, el cuál corresponde a TC Televisión, en un chat en vivo realizado a Mayra y Vincent del programa Calle 7, la nube de palabras resultante es la siguiente:




Esto es un paso previo para la analítica de sentimientos que nos permitirá entender la aceptación de los posts, así como identificar por ejemplo los usuarios que realizan comentarios positivos o negativos, lo cual puede ser de gran utilidad para tener una idea de lo que realmente piensa el cliente y que expresa más abiertamente a través de las redes sociales y que nos ayudará a conocerlo y adaptar de mejor forma nuestros servicios o productos a sus necesidades.

Esto lo revisaremos en una próxima entrega.

Hasta pronto!


domingo, 14 de agosto de 2016

Facebook Ecuador - TOP 5 Fans - ¿POSTs más aceptados?




Continuamos revisando los datos que obtuvimos a través de técnicas de minería de datos (Data Mining) y que encontramos en el grupo de TOP 5 por cantidad de fans en facebook de la última entrada, recordando que está basada en la información de los posts emitidos entre junio y julio del 2016 de las páginas con más fans según socialbakers.

Ahora continuaremos viendo cuáles son los posts con más likes y comentarios de las páginas revisadas. A continuación tienen una tabla de 5 posts con más cantidad de likes junto con la fecha y la página que la emitió. El post que aparece en primer lugar es uno de Chevrolet que publicó luego de la victoria del Independiente del Valle frente a Boca Junior y como se  puede observar, los 4 restantes también pertenecen a Chevrolet y otro tema a rescatar es que 4 de los 5 están relacionados con fútbol y con el tema del momento, esto es la Copa Libertadores.

PAGINA
ns1:permalink
ns1:message
ns1:like_count
FECHA
Chevrolet
Soñar tiene sus grandes recompensas, por eso ahora Independiente Del Valle está un paso más cerca de ser campeón. Felicitaciones muchachos, gracias por darle una alegría más a nuestro país. #NuncaDejesDeSoñar
                                 130.833
15/7/2016
Chevrolet
Gracias Independiente por la garra demostrada en la copa y por toda la alegría que le dieron al país. El próximo año volveremos. #NuncaDejesDeSoñar
                                 115.737
28/7/2016
Chevrolet
Todo Ecuador está contigo, nunca te rindas para conseguir tus sueños. ¡Vamos Independiente!
                                    82.349
6/7/2016
Chevrolet
No importa el color que elijas, los 650 HP del Corvette Z06 harán que quieras salir a mostrarlo al mundo. ¿Te gustaría? http://s.chevy.com/iY8m
                                    69.794
23/6/2016
Chevrolet
¿Quieres acompañar al Independiente Del Valle en la final? Escribe en los comentarios tu predicción del marcador. Acierta y participa por un viaje para apoyar al Independiente en Medellín. #NuncaDejesDeSoñar Términos y condiciones: http://bit.ly/29Kqor0
                                    69.274
18/7/2016


En cambio, si ordenamos los mismos datos, por cantidad de comentarios, el resultado se muestra en la siguiente tabla, en donde se destaca en primer lugar en comentarios un post de TC Televisión, el cual corresponde a una entrevista a Mayra y Vincent del programa Calle 7, del día 8 de junio. En los 4 restantes, podemos ver 2 de Anthony Swag, que en el análisis pasado encontramos que lidera en la relación entre posts con comentarios versus cantidad de posts. La característica en común de estos 5 posts es que todos están relacionados con videos en vívo en donde se interactúa a través de chat,

PAGINA
ns1:permalink
ns1:message
ns1:comment_count
FECHA
TC Televisión
¡Mayra y Vincent juntos por ti!

Conéctate ya con los competidores de Calle7tc e interactúa con esta "pareja explosiva". ¡Comparte para que todos tus amigos se unan a la fiesta!
                              39.545
8/6/2016
Anthony Swag
Dale me gusta te envió saludos ahora ❤️
                              29.596
2/7/2016
TC Televisión
¡Lissette Cedeño conversa contigo!

Conéctate al #TCchat e interactúa con "La Revelación" de TC Mi Canal! 💋 No olvides de compartir.
                              27.381
23/6/2016
TC Televisión
#TCChat | "Rayo" Vizcarra conversa con sus seguidores.

Da Like , comparte y conéctate con el querido bailarín. ¡Escríbele!📱
                              25.436
3/6/2016
Anthony Swag
En vivo❤️
Miren el vídeo que les digo: https://youtu.be/PAihKe2N0zA
                              24.979
22/7/2016


Esta información nos da pistas sobre lo que más llama la atención de la audiencia de nuestro país y desde el punto de vista de inteligencia de negocios, la técnica de webscraping nos puede ser de utilidad para entender lo que la competencia y las empresas están haciendo para posicionarse mejor en el mercado, sin embargo es importante recordar que esta información es el resultado del análisis de las 5 páginas de facebook con más fans y debe ser tomada solo como una pequeña muestra de lo que está pasando con las principales páginas.

En la próxima entrada, veremos en cambio qué es lo que están diciendo y las técnicas que se pueden utilizar para esto.

Hasta pronto!


domingo, 7 de agosto de 2016

¿Cantidad de Fans, Likes o Comments, qué es más relevante?


En mi última entrega planteaba la necesidad de estar preparado para la analítica de datos y es lo que he estado haciendo desde entonces y me pareció relevante plantear el siguiente tema con algo mas práctico y menos teórico. En otra, comentaba sobre un estudio realizado a empresas que habían sorteado bien la recesión del 2009 y una de las acciones más relevantes era de evaluar cómo proveer más valor para sus clientes y para lo cual hay que tratar de entenderlo mejor y una de las herramientas que nos puede permitir tener una interacción con ellos es a través de la redes sociales, en donde las personas se expresan más abiertamente.

Entonces en lugar de hacer referencias a estudios internacionales, gracias a la analítica de datos y en particular a técnicas de minería de datos (Data Mining) y de manera en particular en este caso, utilizando técnicas de extracción de datos de sitios webs (web-scraping), he realizado un breve análisis de las principales páginas de Facebook del Ecuador. Para esto, he tomado como referencia el ranking por cantidad de fans de socialbakers y he extraído información de las 5 primeras páginas las cuales son las que se muestran a continuación.


La información extraída es de los posts entre junio y julio cuyo resultado vemos a continuación:


Básicamente es la cantidad de posts, likes y comentarios de cada una de las páginas, de donde vamos a indicar algunos hallazgos (insights). El primero de ellos, es que de las cinco páginas, los medios de comunicación destacan por su capacidad de entregar contenido (más de 100 post de promedio diario), por otro lado vemos en cambio que a pesar que la página de Barcelona tiene mas fans, es la que tiene menos likes y comentarios de las cinco, ya que estos dos últimos indicadores están más relacionados con los posts generados, esto último se lo puede ver un poco más claramente en el siguiente cuadro que muestra la relación entre cantidad de fans (tamaño de circulo), cantidad de likes (parte inferior) y cantidad de comentarios (parte izquierda).


Considerando la relación entre posts, likes y comentarios, es normal que los medios de comunicación sean los que tengan mayor cantidad de estos dos últimos indicadores.

Sin embargo, si sacamos una relación entre cantidad de Likes versus cantidad de Posts, vemos que la relación de estas cinco páginas cambia completamente y que la pagina de Chevrolet (4to en cantidad de fans) pasa a primer lugar con una razón de 12.080 likes por cada post y la página Anthony Swag (5to en cantidad de fans) pasa a segundo lugar con 11.663 likes por cada post.


Y si en cambio consideramos los comentarios por post, lo que encontramos es que Anthony Swag pasa a primer lugar con 1.843 comentarios por cada post.


Hay que tomar en cuenta, que para éste análisis solo tomé la información de los 5 primeras páginas por fans, por lo que a nivel de likes y comentarios, estoy omitiendo el resto de universo de páginas de facebook de Ecuador, lo cual no quiere decir que la página de Anthony Swag sea la primera en comentarios a nivel del Ecuador, ni tampoco la página de Chevrolet la primera en likes, solo estoy mostrando la variación de posición entre las cinco páginas.

Sin embargo, esto sirve de referencia a la pregunta inicial, ¿Cantidad de Fans, Likes o Comments, qué es más relevante? Esto dependerá seguramente de la estrategia de cada página, sin embargo, lo que me parece importante rescatar es la necesidad de tratar de entender lo que le interesa al público (cliente) y que nos ayudará a dar más valor.

En la próxima entrega, exploraremos un poco más la reacción que generan los post, cuáles tuvieron más impacto y entraremos en el campo de minería de texto (text mining) y de sentimientos (sentimental analytics).

Hasta pronto!