Desarrollo de solución completa Big Data para la clasificación de conductores según patrones de comportamiento frente al volante y otros aspectos relevantes a considerar (tipo de vehículo, distancia y lugar).
- Infraestructura tecnológica y de servicios que abarca las siguientes etapas del ciclo de vida:
- Interfaces de auto diagnóstico OBD2 instalados en n vehículos para la captura de información relativa al comportamiento descrito en carretera.
- Transmisión vía Bluetooth desde la propia interfaz del receptor a dispositivos móviles Android a través del uso de la aplicación Torque.
- Entre las múltiples opciones de visualización de los indicadores disponibles, opción de exportación de los datos almacenados del usuario a una cuenta de correo electrónico creada con dicho fin.
- Ejecución programada de un script gestor de los correos enviados por los usuarios, recogiendo la información contenida adjunta en los mismos para su almacenamiento en una máquina centralizada.
- Automatización de la recepción de los logs de rutas en carretera en la máquina origen, y proceso de normalización y filtrado de campos innecesarios previo al volcado en HDFS.
- Proceso de catalogación de conductores según comportamiento en carretera, a través del procesamiento distribuido de la información, el cálculo de métricas y la clasificación de los mismos a través de un sistema de scoring.
- Tecnologías y servicios:
- Apache Flume
- Apache Hadoop 2.6.0
- Apache Hive
- Apache HCatalog
- Apache Derby
- Apache Oozie
- Roles desempeñados y labores completadas:
- Familiarización con el uso y conectividad de dispositivos inteligentes (IoT).
- Conocimiento y experiencia como Arquitecto Big Data para poder armar desde cero una infraestructura real Big Data.
- Conocimiento y experiencia como Desarrollador Big Data para comprender la programación distribuida y la funcionalidad del resto de herramientas que complementan y enriquecen el ecosistema.