apuntes

LENGUAJE R: HERRAMIENTA POTENTE Y GRATUITA PARA LA INTELIGENCIA DE NEGOCIO-ejemplo de análisis de textos

Después de un año de duro trabajo, termino el Programa de Big Data y Business Intelligence impartido por la facultad de ingeniería de la Universidad de Deusto. A lo largo de este tiempo, hemos aprendido muchísimo de las múltiples facetas de este concepto tan amplio que es el “Big Data”, pero, sin duda, uno de los mejores y más prácticos decubrimientos ha sido el entorno-lenguaje “R”.

R es un lenguaje superversátil, gratuito y con un soporte “open” impresionante en internet (por supuesto en inglés), que te permite encontrar siempre solución, un paquete desarrollado,consultas resueltas y scripts ejemplo, para cualquier necesidad que te encuentres en un proyecto. Yo, en este tiempo en el que me he podido empezar a asomar a este universo de posibilidades, lo he utilizado en prácticas de casos reales para distintos usos:

  • Hacer limpieza y manipulación de datos, eliminando las limitaciones de volumen que tenemos con herramientas habituales como Excel, y utilizando funciones que, en un solo paso, realizan operaciones que de otra manera supondrían numerosas pasos y tablas intermedias.
  • Aplicar modelos de predicción (regresión, clasificación) y descripción (clustering, asociación, correlación,..) a importantes volúmenes de datos para extraer conclusiones relevantes y no inmediatas.
  • Pasar información de un soporte-formato a otro de manera sencilla para poder importar o exportar desde o hacia distintas fuentes.
  • Hacer tratamientos de texto: palabras key, nubes de palabras o análisis de sentimiento de cualquier texto, incluso de páginas web o RRSS (facebook, twitter,..)

Esta última aplicación de ANÁLISIS DE TEXTO,  ha sido el objeto de mi último proyecto de trabajo en el máster, cuyo objetivo era practicar con algunas de las herramientas que R tiene para estos cometidos.

Decidí analizar los textos de los discursos de navidad del Lehendakari y del Rey de España en diciembre 2007 y en diciembre 2017. Quería observar qué diferencias y evolución ha habido entre los dos perfiles en estos 10 años. Tras la correspondiente limpieza y adecuación de los textos, por ejemplo sustituyendo ñ por gn, eliminando tildes, poniendo en minúsculas todo, igualando conceptos similares como democracia – democrático/a para poder observar mejor su peso, etc. muestro un ejemplo de algunos de los resultados obtenidos:

Las PALABRAS QUE NO FALTAN EN NINGUNO DE LOS DISCURSOS, estando presentes en todos, más de 2 veces, son las siguientes:

todosmas2

 LAS 20 PALABRAS MÁS REPETIDAS EN CADA DISCURSO, Y SU FRECUENCIA DE APARICIÓN A LO LARGO DEL MISMO, SON LAS SIGUIENTES:

2007

2017

Sin ánimo de ser exhaustiva ni realizar valoraciones, destaco algunas observaciones sencillas que se pueden extraer como ejemplo:

  • El lehendakari Ibarretxe en 2007 ha sido sin duda el más reiterativo en los conceptos clave de su discurso ya que presenta claramente una frecuencia más alta en mayor número de palabras que los demás.
  • En 2007 el lehendakari repetía la palabra “ETA” mientras que el Rey usaba “terrorismo” y la temática “terrorismo” ha perdido peso en 2017
  • En 2017 ambos dirigentes presentan en sus primeros puestos de reiteración, sus ámbitos territoriales (Euskadi, España) y aspectos ligados a la convivencia, sociedad o personas.
  • En 2017 “Cataluña” no es mencionada de manera relevante por el Lehendakari y sí por el Rey que destaca también otras palabras ligadas a este asunto.
  • La palabra “constitución”, principal argumento del discurso del Rey en 2007, desaparece de los discursos en 2017, siendo sustituida por conceptos más “soft”como democracia, derecho, principios,…
  • La “política” es claramente una preocupación de los 2 Lehendakaris, mientras que no es destacada por los Reyes de España.
  • La palabra “paz” la repiten ambos lehendakaris y no los reyes, y la palabra “vida” a la inversa, está muy presente en los discursos de los reyes pero nó de los lehendakaris.

Esté hincapié en determinados conceptos se muestra más graficamente si elaboramos las NUBES DE PALABRAS, resultantes de seleccionar los términos que cada gobernante ha utilizado en más de 6 ocasiones a lo largo de sus discursos. Los tamaños y colores de letra representan pesos de frecuencias relativas dentro de cada discurso:

nubes

Se observa un distinto estilo de comunicación entre los dirigentes españoles y vascos. Los lehendakaris presentan un estilo en el que abundan los términos muy reiterados, mientras que en el caso de los reyes, éstos concentran la insistencia en menos términos.

Por último, he querido hacer una pequeña prueba del funcionamiento de las herramientas de  ANÁLISIS DE SENTIMIENTO. R dispone de diversos paquetes para ello, yo he usado Tidyverse y Tidytext, que presentan 3 lexicons que realizan una valoración “emocional” de los sentimientos que teóricamente generan las palabras utilizadas. Los lexicones son en inglés, por lo que he traducido directamente con google (R dispone también de paquetes específicos de traducción que utilizar APIs por ejemplo de microsoft, pero no he tenido tiempo de probarlos)  los discursos del 2017 y, sin realizar ninguna revisión de la calidad de la traducción (seguramente habría que refinar muchas expresiones y términos), le he pasado los diccionarios lexicon de BING y NRC a cada discurso, para observar qué tipo de emociones provoca cada uno.

He aquí el resultado resumido del peso de cada sentimiento en los discursos de 2017:

sentimiento

Por último, utilizando el lexicon de AFINN que valora numéricamente las palabras entre -5 y +5 según la negatividad o positividad de los sentimientos generados, el resultado final es el siguiente, expresado en los correspondientes histogramas de frecuencia de presencia de cada tipo de valor emocional:

histogr

Nota: el número de palabras totales/únicas que se ha podido valorar (que después de ser traducido el discurso, estaban presentes en el lexicon) en cada caso ha sido de 85/53 para el Lehendakari y de 106/87.

Se observa que el discurso del lehendakari se encuentra sesgado hacia la positividad mientras que el del Rey de España presenta más valores extremos, lo que resulta en un valor “emocional” medio de +1,06 sobre 5 en el caso del lehendakari y de un 0,49 sobre 5 en el caso de el Rey, resultados que corroboran el mostrado en la clasificación de términos anterior.

En resumen,  el lenguaje R es una herramienta que, una vez realizado el esfuerzo inicial imprescindible para adquirir la competencia mínima, presenta un enorme potencial de aplicación a cualquier necesidad o problema de análisis de datos que a una empresa se le pueda presentar, siendo un aliado muy interesante y recomendable para el desarrollo del business intelligence en cualquier empresa.

Anuncios

FERRARIS EN GARAJES O LA PARADOJA DE LA ERA DIGITAL

Al hilo de un artículo sobre un discurso del presidente de Huawei en el 5th European Innovation Day, no puedo dejar de destacar y reforzar la llamada de atención que allí se hacía en esta era digital en la que estamos inmersos/as.

De nada sirve tener un Ferrari si la mayoría de las carreteras de tu zona están limitadas a 100.  La digitalización de un país requiere en primer lugar,  disponer de una red de infraestructuras de telecomunicaciones ad-hoc para el tipo de usos y servicios  a implantar.

ferraris

Es decir, hay que  construir una red principal de autopistas sin limitación, y el resto ampliar a 140, para poder disfrutar y aprovechar realmente las capacidades de un ferrari, tal y como están haciendo (han hecho) los países asiáticos.  Y esto efectivamente requiere de una importantisima inversión pública que  vertebre toda la geografía (a nivel estatal y supraestatal)  y dote de “autopistas digitales”, no sólo a las grandes concentraciones poblacionales, sino también  a las zonas  donde a  los operadores privados no les es rentable llegar.

Si no se hace así, iremos  quedándonos obsoletos tecnológicamente, hasta que la cabeza de carrera esté tan lejos que sea imposible de alcanzar y estemos avocados a ser unos meros seguidores (de tercer o cuarto nivel..), a las órdenes de los líderes (¿asiáticos, árabes,..?)  que por supuesto serán también los propietarios de todas las empresas de sectores estratégicos de nuestro entorno (no tenemos más que mirar un poco a nuestro alrededor para ver cómo se están comiendo los fondos de inversión todas las empresas locales punteras). No es una visión apocalíptica, está ocurriendo ya.   Concentremos nuestro esfuerzo  inversor y legislador en crear una red de infraestructuras regional y europea superpotente, sobre la que puedan correr a tope los servicios 4.0, 5.0,… y dejemos de acumular Ferraris en garajes.

LA PRESENCIA PRÁCTICA DE LA ÉTICA EN EL MODELO VASCO DE GESTION AVANZADA

El objetivo de este post es realizar un sencillo ejercicio práctico, motivado por mi curiosidad personal, consistente en analizar la presencia expresa de la ética en las directrices y buenas prácticas de los modelos de excelencia en gestión, y en concreto, en este caso, en el Modelo Vasco de Gestión Avanzada, que desde 2015 sustituye al modelo EFQM como estándar público vasco básico de referencia para la mejora de la competitividad y la calidad de gestión.

DESCARGA AQUÍ EL MODELO

La exigencia de un comportamiento ético a las organizaciones, públicas y privadas, es un aspecto que está recogido  hace tiempo en las prácticas de Responsabilidad Social Corporativa. Tampoco debemos olvidar  la obligatoriedad para las sociedades mercantiles de implantar modelos de prevención de riesgos penales una de cuyas recomendaciones es disponer de códigos éticos, o las obligaciones de transparencia exigidas por las distintas leyes y normas vigentes a las entidades gestoras de recursos públicos (incluye sector público y privado con financiación pública). Así mismo, en el caso concreto del sector público vasco, hace años que se editó y se estableció la obligatoriedad (relajada en algunos casos 😉 de aplicar la “Guía para el gobierno responsable de los entes, fundaciones y sociedades del sector público de la CAE” en la que la ética está explicitamente presente en numerosos epígrafes.

Sin embargo, a pesar de esa innegable presencia de la ética en nuestro contexto empresarial, social y político(¿?)/legal  y de que es muy común oir que la “ética vende” o que un “comportamiento ético es a la larga más rentable”, la impresión es que la ética empresarial sigue siendo un elemento independiente del negocio y de su competitividad y rentabilidad. Esto se manifiesta de forma clara en el entramado de memorias diversas que las organizaciones editan, publicando por un lado memorias de sostenibilidad o RSC y por otro memorias eccofin y/o de gestión, cuando el ideal sería poder fusionar ambas facetas e incorporar realmente la ética al día a día de los negocios, convirtiéndola en una exigencia igual de habitual y prioritaria que la propia rentabilidad de la actividad.

Veamos los resultados de este pequeño estudio respecto al MVGA:

ELEMENTO 1: LA ESTRATEGIA

En el subelemento E.2 CÓMO SE REFLEXIONA Y SE ESTABLECE LA ESTRATEGIA, se propone literalmente “Definir los elementos clave de largo plazo de nuestra organización (Misión, Visión, Valores, principios éticos o de buen gobierno, políticas,…) y utilizarlos como la base del desarrollo estratégico y de la cultura de la organización”

ELEMENTO 2: CLIENTESno aparece la ética de forma explícita

ELEMENTO 3: PERSONAS

En el subelemento P.1 CÓMO SELECCIONAMOS, RETRIBUIMOS Y ATENDEMOS A LAS PERSONAS, no habla expresamente de ética, aunque sí menciona valores o comportamientos habitualmente enmarcados en ella como la igualdad de oportunidades y el respeto a la diferencia entre personas.

En el subelemento P.4 CÓMO AMPLIAMOS LA CAPACIDAD DE LIDERAZGO DE LAS PERSONAS habla literalmente de “Garantizar la coherencia entre lo que la organización formalmente establece o declara y las prácticas internas reales, especialmente en lo relacionado con los valores y principios éticos

ELEMENTO 4: SOCIEDAD: no aparece la ética de forma explícita

Aunque sí se mencionan comportamientos habitualmente enmarcados en ella como consumos y compras  responsables, sostenibilidad, compromiso  social, etc.

ELEMENTO 5: INNOVACIÓN: no aparece la ética de forma explícita

ELEMENTO 6: RESULTADOS

En el  subelemento R.3 RESULTADOS EN PERSONAS aparece literalmente  la necesidad de medir “El resultado derivado de las actividades relacionadas con el impulso de la capacidad de liderazgo, delegación y asunción de responsabilidades, coherencia entre valores, principios éticos, de gestión, etc. transmitidos y realidad”.

En el resto de aspectos del elemento, no aparece la ética de forma explícita aunque se recoge indirectamente la necesidad de disponer de indicadores de medición de conceptos del ámbito ético como: la igualdad en PERSONAS, el compromiso medioambiental y social ligados a la Imagen y Reputación en CLIENTES o el desempeño del compromiso medioambiental y social en SOCIEDAD.

Resultado: de los 22 subelementos de gestión para los que se detallan propuestas de buenas prácticas en el MVGA,  la ética aparece expresamente mencionada en 3 de ellos.

Claves de la consultoría: reflexiones personales tras 20 años de profesión

El pasado 2 de enero cumplí 20 años trabajando ininterrumpidamente de consultora “todoterreno” de gestión/negocio. Mi primera nómina fue allá por 1995, en el entonces Andersen Consulting y actual Accenture, y mi última factura emitida ha sido por servicios de consultoría, actualmente como trabajadora autónoma debido a mi deseo de poder compaginar mi familia numerosa con mi profesión. Es decir, llevo 20 años trabajando de consultora.

He trabajado para clientes públicos y privados, para clientes pequeños y grandes, en proyectos estratégicos y también muy operativos, de casi todas las áreas de gestión, con y sin aplicación informática asociada, y si algo he aprendido es (además de ser experta en Excel y PowerPoint (:P) ) a tener una visión global de la organización, de su negocio y su contexto, de manera que soy capaz de ver claramente la relación de todas las actividades internas, y/o de las actividades y su impacto en el mercado/sector o en los grupos de interés, además de poder identificar rápidamente dónde hay oportunidades de mejora de la forma de hacer las cosas y cómo se podría mejorar. Hasta ahí, todo bien.
Y sin embargo hoy es el día que me sigue resultando difícil explicar a mi hija de 8 años qué hago…ahí va un sucedido real….

-ama!, la andereño (profesora) nos ha pedido que expliquemos a qué se dedican nuestros padres…aita es ingeniero, y tú?
-pues yo soy……economista (lo de licenciada en ciencias empresariales, como que me pareció más complicado….)
-y eso qué es?
-bueno, mejor dile que soy: consultora
-y eso qué es? qué haces?
-pues……..ayudar a las empresas a solucionar problemas, …..a hacer mejor las cosas, les ayudo con cosas que ellas solas no pueden,…
-ahh!….ya entiendo…..ayudar a los demás!………
Al día siguiente, después del cole, me cuenta que han estado hablando sobre el tema y que ella ha explicado a qué se dedica su ama, tras lo cual su andereño ha concluido que trabajo en una ONG…:)

(esto lo añado el día 14 de agosto de 2105: me hizo mucha gracia mi hijo el otro día, ante la enésima pregunta de a qué me dedicaba y tras decirles que “a hacer de todo un poco”, mi hijo concluyó: “ah o sea que eres como UNA NAVAJA SUIZA” jejeje, una buena definición 🙂

Resumiendo, profesión rara la nuestra, porque sabemos de todo pero no somos especialistas en nada, porque una de nuestras especialidades es saber qué especialista necesita nuestro cliente…..soy una consultora de gestión todoterreno.

Además, en estas reflexiones, también me gustaría resaltar otra idea que con los años cada vez siento más necesaria, y es que cualquier proyecto de consultoría debe de alcanzar y visibilizar beneficios que no existían antes de realizarlo. De otra manera estaremos vendiendo los famosos “pájaros y flores”, sólo papel o archivos que costarán mucho dinero y no servirán para nada.

Deberían de percibirse alguno de los siguientes resultados, que a su vez están internamente relacionados entre sí:

  1. Mejorar la cuenta de resultados: aumentar ingresos, reducir gastos y/o aumentar la productividad y eficiencia interna..
  2. Mejorar en el posicionamiento externo: mejora de imagen, mejora visibilidad, mejora de canales de comunicación,..
  3. Mejorar la capacidad competitiva de la empresa: ampliando/mejorando productos, servicios, mercados…
  4. Mejorar la capacidad de supervivencia de la empresa, ayudándole a cumplir con exigencias/requisitos del mercado/sector/gran cliente….
  5. Mejorar el clima y/o la satisfacción de las personas en/con el trabajo realizado. La felicidad interna genera además indirectamente beneficios a terceros y provoca círculos virtuosos de mejora.
  6. Mejorar la satisfacción de otros grupos de interés, específicamente de los clientes incrementando el valor o calidad de lo ofertado/demandado…
  7. ……

Sin olvidar que también hay otros proyectos, cuyos resultados son mucho más discretos pero igual de requeridos, como ayudar a hacer ofertas/proyectos para licitaciones públicas, elaborar presentaciones diversas e incluso otros, bastante políticamente incorrectos pero reales, como generar un documento cuyas conclusiones soporten decisiones previamente tomadas……
De todo ha habido en 20 años…….y veremos, y con un poco de suerte contaremos, qué nos deparan los próximos 20.

Como diría una famosa presentadora…SALUD y SUERTE!