Data Mining - SAS contra las cuerdas por Pentaho

Que los enanos que le estaban creciendo a SAS están ya en la universidad y que apuntan maneras no es ningún secreto, en concreo tenemos a WPS, que según nuestro compañero Raúl Vaquerizo del blog Análisis y Decisión nos permitiría una migración a una solución mucho más barata es totalmente factible y que conste que Raúl es un experto en SAS.

Por otro lado nos tramos noticias como la siguiente donde nos van haciendo una analogía entre SAS y el mundo del software libre; hya un punto muy interesante que es la comparación de la posición de Microsoft con respecto a Linux, donde Bill Gates decía que el software libre no cubría las necesidades de un usuario profesional y que sería sólo utilizado por aficionados; lo mismo pasó cuando surgieron las bases de datos libres... ya ahora es SAS que el software libre no se puede utilizar en su negocio...

Es muy intereante la gráfica sobre el nivel de búsquedas de SAS frente a Pentaho que nos encontramos en el articulo antes mencionado; si fuera el CEO de SAS estaría muy pero que muy preocupado.

Es cierto que a nivel profesional sólo SPSS (o IBM) puede competir con SAS a nivel analítico, que los clientes de SAS normalmente son clientes que búscan un software analítico y que esto todavía lo tiene que mejorar mucho Pentaho (también hay que recordar que adquirio WEKA por lo tanto está en ello), pero también es cierto que hay otras soluciones para suplir ahora mismo esta deficiencia, el siempre comentado R, y si no recuerdo mal estaban trabajando en enlazar R con Pentaho con algún resultado ya.

Por otro lado recordar que también se puede utilizar soluciones muy comentadas en este blog como son Knime y Rapidminer para solucionar la parte de minería de datos dejando Pentaho para temas de reporting, cubos, carga de BBDD...

Primero fueron los sistemas operativos, luego las BBDD, continuaron con los desarrollos de middlware... parece que ahora ya le toca al BI y a los desarrollos analíticos ¿no creéis?

Data Mining - Nuevo libro gratis Clever Algorithms

Hola a todos,
esta vez os traigo informacion sobre un nuevo libro GRATUITO (por lo menos por ahora) que acaba de salir al mercado, Clever algorithms.

Se trata de un compendio donde se reunen todos los algoritmos estocasticos de optimización que te puedas imaginar, en total hay 45 descritos enmarcados en diferentes categorías (algoritmos geneticos, redes neuronales...).

Destacar también que se encuentran algormitmos englovados dentro Swarm Algorithms y Immune Algorithms. La verdad es que durante un tiempo me interesé por esto dos tipos de algoritmos de optimización y no encontré nada, aunque hay que reconocer que yo soy estadístico no un programador de IA.

Espero que lo encontreis interesante, yo en cuanto tenga un respido le pienso dar una oportunidad, sobre todo me tiene intrigado el hecho que han copiado el modelo de respuesta inmunológica para optimizar funciones.

Geomarketing - Apertura Mercado en la Milla de Oro de Madrid

Hoy sale publicada una noticia en el diario "el mundo" con la nueva apertura de un mercadona en el céntrico y prestigioso ABC Serrano.

Lo primero que hemos hablado está claro, ¿mercadona en una zona de este nivel? Bueno, si buscamos en la base de datos alimarket muy cerca hay un Supermercado El corte Inglés y un Caprabo (digamos gama alta de supermercado) pero también hay dos supermercados DIA% (uno del tipo Market).


 ¿y cuales son los principales comercios del ABC Serrano? Pues en la ficha de la AECC (Asociación Española de Centros Comerciales) tenemos que compartirá espacio con Zara, Mango, Musgo, Douglas, Adolfo Dominguez, e Imaginarium como principales enseñas. Creo que el espacio que ocupará Mercadona será el de Zara, pero está sin confirmar, por el tema de espacio (el local que dicen que ocuparán es de 1500m2 lo mismo que el de Zara).

Para mi es sorprendente que Mercadona apueste por este tipo de ubicación, aunque si es cierto, que en esa zona no estaba presente. Para mi que mercadona está empezando a ser consciente de su buena imagen de marca, y ha decidido dar el salto a zonas potenciales antes no prioritarias.

¿no responderá al sorprendente nivel de compras on-line que recibe de la zona centro de Madrid? Debajo de mi casa, zona las Tablas, hay un Supermercado Madrid y un Ahorra Más, y siempre que llego me encuentro con el repartidor de Mercadona, desde Sanchinarro (3-4 km). ¿está cambiando el modelo de compra en los supermercados?¿qué porcentaje de compra online supone en la facturación en las grandes ciudades? ¿o será qué están como locos posicionándose en ciertas zonas antes de que les obligen a abrir centros de más de 2500m2 ?

Data Mining - Documento "Data Mining Map"

Trasteando por la red he encontrado un extraño documento donde se presenta el data mining bastante completito.

Pero lo mas interesante de este documento es que tiene una navegación visual en árbol, es decir, cada una de las ramas y técnicas del data mining están representadas en un árbol, y clikando sobre las diferentes hojas se accede a los documentos explicativos.

Considero que es una manera muy explicita de explicar las diferentes técnicas y pasos que se utilizan dentro de un proyecto; todos conodemos CRIPS-DM y SEMA, pero también es cierto que están ligadas a sus herramientas, detro de este documento podremos ver de manera clara y sencilla los mismo conceptos sin estar atados a una metodología propietaria.

La verdad una forma muy intersante de explicar la materia, os dejo el enlace aquí.

Data Mining - Presentación de Machine learning en R

Hola a todos,

hoy os traigo una presentación que ha creado dentro del departamento de I+D de Telefónica donde nos presentan una pequeña introducción desde 0 de R dentro del mundo del Machine Learning.

No es algo nuevo, estoy seguro que si buscamos un poco encontraremos cosas parecidas hechas anteriormente, pero lo que si es remarcable es que es dentro de una empresas privada y en nuestro país.

Os la dejo aquí para que le déis un vistazo.

Machine Learning in R

View more presentations from kerveros99.

También aprobecho para desearos felices fiestas a todos.

Geomarketing - Geolocalización y Forusquare (3)

De las opiniones que hemos ido vertiendo por los temas de geolocalización y foursquare, el diario catalán "ara" (ahora) en su suplemento de "araemprenem" (ahora emprendemos)  se ha hecho eco de las mismas en un artículo sobre la geolocalización.

Si lo queréis leer aquí lo tenéis, en catalán, pero entendible. Pinchad sobre la foto y se abrirá en google docs.

Geomarketing - Estudio de transeúntes. City Analytics y Cuende

Si hay algo que cada vez nos interesa más a la hora de abordar un estudio de geomarketing a pequeña escala es el análisis de los transeúntes. Saber cuanta gente pasa por una calle, el tipo de gente, edades, sexos, sus tipologías, horarios puede ser una de las variables más importantes a la hora de abordar una apertura o un cambio de ubicación. 

De este caso recuerdo el de una cadena de bisuteria famosa con un problema en una de sus tiendas en Valencia. La cuestión era que apesar de estar en una buena zona, muy acorde al tipo de tienda, los resultados que estaban obteniendo no eran muy satisfactorios. Analizando el flujo de personas pudimos ver como el tramo de calle donde estaban estaba "cortado", puesto que los flujos de personas se movian en otra dirección al llegar a ese tramo. Moviendo la tienda apenas 100 metros, los resultados fueron instantáneos. 

¿De qué datos disponemos para trabajar los flujos de personas? Actualmente la base de datos de transeúntes más usada el llamado fichero Gogh, que elabora la empresa CUENDE Infometrics. Tradicionalmente se ha venido usando para por ejemplo tarificar los circuitos de publicidad estática en las ciudades, pero cada vez son más las empresas de geomarketing que lo incorporan en sus análisis. La única pega es el precio, algo caro, pero bueno, los precios no son nuestra guerra en el blog. Las características de trabajo de este fichero son (extraído de su página web):

La captura de los desplazamientos se realiza el seguimiento de 5.700 panelistas mediante A-GPS en las áreas metropolitanas de Madrid y Barcelona. En otras poblaciones se recogen los trayectos mediante encuestas realizadas con tablet PC directamente sobre cartografía digital mediante software propio.

Trabajo de Campo:
Ámbito: Principales ciudades mayores de 70.000 habitantes. En las 6 mayores (Madrid, Barcelona, Sevilla, Valencia, Alicante y Bilbao) se incluyen las poblaciones de sus Áreas Metropolitanas con más de 50.000 habitantes.
Universo: Individuos de 14 a 75 años residentes en los municipios de referencia.
Muestra: 21.436 individuos.

 

Por suerte cada vez hay más iniciativas para el estudio de transeúntes. En el blog de UNICA360 de Guillermo Córdoba han publicado un post sobre city analytics. Podéis leerlo en su blog directamente, un muy buen post de recomendada lectura. Nos ofrecen datos de pasos de personas, vehículos, horario comercial óptimo, etc.

Geomarketing - Servicios a emprendedores

Esta semana amanece con tres noticias, bueno no es que sean nuevas, pero es el momento de hablar de ellas. Las tres son servicios a emprendedores marcados en el ámbito del geomarketing, con nuevas aplicaciones on-line, que permiten de manera sencilla obtener datos e informes de zonas para estudiar la viabilidad de negocios, enfocado a los emprendedores que buscan información para sus negocios.

Las herramientas son todas on-line, enfocadas a la venta de informes, con tecnología muy diferente, pero con un resultado muy parecido.

La primera es la herramienta presentada por AXESOR, que compró hace tiempo Data segmento, y que ha englobado la venta de sus servicios bajo el nombre matriz Axesor. Con su herramienta han buscado un canal de venta nuevo a los datos que tradicionalmente han comercializado, sobre todo a nivel de empresas, por lo que no habrá que esperar mucho para que su competidor en este tema, EInforma se ponga manos a la obra con este canal de venta. Básicamente, se trata de una herramienta donde a partir de una dirección, permite realizar áreas sencillas, como un círculo o rectángulo, donde se seleccionan las secciones censales que interesectan con él. La teconología usada es de ESRI, y la verdad es que es muy vistoso. Lo interesante es que puedes usarla gratuitamente, y sólo pagas por los informes que quieres de la zona.

 

Otra herramienta del estilo viene de la mano de IVER, la empresa que viene desarrollando aplicaciones comerciales de la herramienta gratuita GvSIG. Las herramientas que tienen son GeoMercat en desktop, en web y muy interesante en móvil. Me gustan estos desarrollos en plataformas gratuitas, y más viniendo de Valencia, de donde es uno.

 

 La tercera herramienta está en desarrollo, y viene de la mano de la empresa SITEP, que ha sido la adjudicataría de un sistema de ayuda a emprendedores para Barcelona Activa.

Data Mining - Interesante post en el blog de Enrique Dans

En el blog de Enrique Dans, blog tremendamente recomendable seas de ámbito que seas, podemos encontramos un interesante post sobre una herramienta de sentiment mining.

Es interesante ver como poco a poco este tipo de herramientas van surgiendo para suplir necesidades de mercado existentes; ya hablamos hace un tiempo de una herramienta española que venía a cubrir la misma necesidad.

Creo firmemente que dentro de un tiempo las grandes empresas dentro del análisis de datos (SAS e IBM) ofrecerán soluciones para este tipo de problema, haciendo que estas soluciones sean mucho más conocidas por el usuario no técnico.

Data Mining - Cosas que tienes que conocer en el 2011 segun Forbes, R.

Hola a todos;

hoy os adjunto un interesante articulo de la revista Forbes de algo que hemos estado intentado avisar a la comunidad de analístas de datos, que R será, o mejor dicho es, una técnología disruptiva la cual cambiará el equilibrio que hay entre las diferentes herramientas de análisis de datos.

Toca puntos que ya hemos comentado, como por ejemplo que Facebook utiliza R para sus análisis o
que R está sustituyendo al software propietario en las empresas y que por lo tanto se está creando una masa de técnicos que ya lo conocerán por defecto, entre otros puntos.

Un punto que no trata y que creo que es muy importante para la estandarización de la herramienta, y que hace que no sólo sea utilizada por Nerds, es la facilidad de uso. Todos sabemos que por muy pontente que sea algo si no es fácil utilizarlo se encontrará con grandes reticencias en su implantación, y es en este campo donde R está dando pasos increibles, con Red-R o sus intefaces con Knime o Rapid Miner.

Señores el futuro llama a nuestra puerta, ¿seremos capaces de seguirle el paso?

Geomarketing - TargetMap. Aplicación de Geomarketing.

Mapgenia acaba de lanzar una herramienta online para poder visualizar ficheros excel sobre Google Maps.

TargetMap ha sido concebida como una plataforma para compartir conocimiento, por lo que es completamente gratuita para aquellos que pongan sus datos y mapas resultantes a disposición de la comunidad.

Página inicial

Sólo tenemos que escoger un país, subir nuestro fichero excel con una columna con códigos postales o nomenclatura territorial, y en un momento veremos nuestros datos sobre el mapa.

Datos sobre España

Si subimos los datos por códigos postales, vemos cada registro colocado en su posición exacta. Además podemos ir agrupando hacia niveles superiores para trabajar con los datos asociados. Se pueden realizar sumas, cuentas y mapas de cobertura.

Podemos filtrar nuestra información por territorios, simplemente clicando sobre la zona del mapa que deseemos.

Actualmente ya dispone más de 30 países disponibles,  Los mapas se pueden exportar a presentaciones, insertar en blogs o compartir vía Twitter o Facebook.

Todos los mapas publicados se recogen en una biblioteca a disposición de todos los usuarios. Es posible combinar nuestros datos con información de los mapas públicos para crear nuevos mapas y obtener nuevas conclusiones.

Aquí tenéis el linkk para que le echéis un vistazo.TARGETMAP

Geomarketing - Análisis de supermercados según HUFF o MCI

Este puente he estado en Valencia, en el barrio donde crecí, y me llevé una sorpresa al ver que una cadena de supermercados se había hecho con otra, Consum adquirió los centros de Vidal Europa, por lo que la situación competencial en la zona con Mercadona ha variado en cuantía. Dado que el modelo de Huff es el usado en estos casos para calcular demandas potenciales, he hecho un pequeño estudio de la zona, aprovechando el mal tiempo que nos ha hecho en la fiesta de la Almudena.

A parte de usar el Modelo tradicional de Huff (superficie y Distancia) he usado el modelo MCI expuesto en la tesis de Rosa Colomé donde tenía en cuenta la distancia, la accesibilidad, y la oferta de bajos precios para calcular las probabilidades de atracción.

Aquí os cuelgo la presentación que he realizado del tema. Es sencillito pero aclarador.

Análisis de ubicación de supermercados con técnicas de Geomarketing

View more presentations from Jesus Lagos.

Geomarketing - Marketing Mobile (O2 + Starbucks + L'Oreal)

Llevamos días hablando de Foursquare con un denominador común, que no es más que la falta de uso en España, y lo muy segmentado que está en su uso. ¿qué podrían hacer las empresas para combatir este déficit? Pues en el Reino Unido han dado con clave. ¿qué es lo que se usa más hoy en día y no tiene una componente tan tecnológica como Foursquare? Pues el móvil mismo. Para ello, la pionera en estas lides, como no Starbucks, conjuntamente con L'Oreal han llegado a un acuerdo con la empresa de telefonía móvil O2 por lo que todos los usuarios que quieran podrán recibir SMS de con cupones para estas empresas. Así dicho de pronto, pues poco novedoso, pero lo bueno, es que O2 mandará los SMS a los terminales que estén cerca de las tiendas donde hacer descuentos (esto ya nos gusta más)

El tema está que en España como vimos el uso de foursquare para marketing era muy limitado, pero ahora ya no hace falta ser un "geek", todos tenemos móvil, y todos podemos recibir fácilmente esta publicidad. Esta tecnología la han hecho conjuntamente con la empresa PlaceCast.

Aquí tenéis acceso a toda la noticia.

Imagen de la aplicación

Geomarketing - A vueltas con la geolocalización

Con esto de las aplicaciones móviles parace que hay un pequeño "boom" del geomarketing, pero un poco en la línea desde mi punto de vista equivocada. Hoy leo una noticia interesante de una aplicación de geomarketing de Auchan (Alcampo en España) de geolocalización. Básicamente esta aplicación te ayuda a encontrar desde tu móvil el Auchan más cercano, y una vez allí te permite leer las promociones del lugar. 

Basar una estrategia de geomarketing, o hablar de geomarketing con esta aplicación me parece como vengo repitiendo una temeridad. ¿Por qué? Basicamente porque como ya hemos visto el uso de estas herramientas es mínimo, y me apresuro a decir que la gente que hace la compra poco tiene que ver con un estilo de compra "semanal". En mi experiencia en el sector alimentación siempre vimos claramente diferentes perfiles y hábitos de compra, y los famosos geeks ya estaban ahí, de hecho con unas compras más que impulsivas, y aquello de las ofertas y  promociones no casa muy bien con el perfil de persona que va con un IPod (sólo les ha faltado una aplicación de realidad aumentada para buscar productos). El benefecio de una verdadera herramienta de geomarketing es para la empresa, no para el consumidor, aunque este de manera secundaria salga beneficiado. ¿por qué? me pregunto de nuevo. Basicamente porque puedes estudiar los hábitos de compra de tus consumidores, y analizarlos geográficamente, y buscar patrones de comportamiento, y decidir si para esta ubicación es mejor 45m2 de frutas o 56m2 de frutas, y poder tener un espacio mucho más eficiente de tu punto de venta. TESCO en Reino Unido, manda 3000 folletos diferentes según el tipo de comprador, según su residencia, ajustando la oferta al usuario, no a un dispositivo móvil. 

En cambio esto no significa que esté en contra de este tipo de aplicaciones, pero si lo que realmente quieres es dar un servicio diferente a tus clientes, probad con esta aplicación de Wall-Mart (USA). Haces una foto a tu rincón de casa, y te recomienda la TV que mejor le va, simplemente increible:

Geomarketing - 2 webs que no podéis dejar de consultar

Si te gusta el geomarketing, o piensas que las trivialidades son muchas, no dejes de consultar estas dos webs. Básicamente son la madurez total del geomarketing, lo que siempre hemos defendido y la meta más próxima para un geomarketing de calidad, el spatial data mining.

De la primera ya os he hablado en numerosas ocasiones, el GeoDa Center, donde podemos encontrar diferentes softs como el conocido GeoDa 095i o la extensión R-Geo para el soft R de data mining que Paco tanto comenta en sus posts de data mining. Si os interesa documentación en castellano podéis consultar este enlace de una ponencia de Coro Chasco.

La segunda es el portal de Spatial Data Mining   donde podéis encontrar los software REDCAP y SOMVIS que ya os los presenté en otros posts. Ahora incluyen un nuevo soft de estudios de flujos.

Lo dicho, si queréis llegar un poco más lejos en esto del geomarketing, en estas webs encontraréis el software y las personas que os brindarán esta posibilidad.