Curso Taller Procesamiento y Análisis de Big Data - May 5

Curso Taller
Procesamiento y
Análisis de Big Data
Capítulo Cundinamarca
(Hadoop y Tableau)
ISO 9001: 2008
BUREAU VERITAS
Certification
CO237653
Sistema de Gestión Certificado:
Servicios al Ingeniero. Capacitación. Estudios Técnicos.
Mayo 5 y 6 de 2016
Centro de Convenciones ACIEM. Bogotá D.C.
Motivación
Metodología
El acceso a las redes de alta velocidad, el aumento de la capacidad de
procesamiento de los dispositivos móviles y el bajo costo de
almacenamiento, han generado que el volumen de datos disponibles en
la sociedad aumente considerablemente en la última década. Ésta
información ha tomado gran valor, debido a su utilidad y a su aplicación
en la prestación y en el ofrecimiento de servicios.
Usando diversas herramientas de software, el instructor
presentará los conceptos claves, explicará los datos a utilizar y
guiará a los participantes en el procesamiento y obtención de
resultados. Los datos a utilizar cubren diversas aplicaciones tales
como: mediciones del consumo de tráfico de internet de usuarios
móviles y fijos, la posición y trayectoria de usuarios de telefonía
móvil en una red de transporte y el análisis en la venta de
productos en línea.
Actualmente existen diversos métodos de análisis de datos (data
mining), así como herramientas para el diagnóstico y visualización de
esta información en bases de datos convencionales RDBS (Relational
Database Systems), que no proporcionan la velocidad requerida para su
procesamiento. Por esta razón, el proyecto de Open Source Hadoop, se
presenta como solución al problema del procesamiento de Big Data, ya
que, mediante la utilización de hardware de bajo costo, ha logrado
convertirse en la plataforma más utilizada por diferentes industrias
alrededor del mundo.
Este curso es una gran oportunidad para adquirir los conceptos, las
habilidades y el uso de herramientas prácticas para el procesamiento de
datos reales, con el fin de suplir la actual demanda de profesionales con
destrezas específicas en el procesamiento y análisis de Big Data.
Los ejercicios y las exposiciones se enmarcan en la minería de
datos (data mining), mediante laboratorios de procesamiento de
datos y diseño de dashboards con datos reales y de domino
público.
Requerimientos:
Computador personal con el siguiente software instalado:
•
R (open source)
•
Python (open source)
•
Tableau (licencia demo valida por dos semanas)
•
Opcional: HortonWorks sandbox
Objetivo
•
Presentar la tecnología de Big Data y las aplicaciones prácticas de
la exploración de datos (data mining).
Conferencista - Instructor
•
Introducir al participante, mediante ejercicios computacionales
prácticos, a los retos, herramientas y metodologías del procesamiento y análisis de gran cantidad de datos.
Diego Perea Vega
•
Al final del curso los participantes tendrán manejo de estas
herramientas, de las metodologías de exploración de datos y del
ecosistema Hadoop.
Dirigido a:
Profesionales, técnicos y gerentes de procesamiento datos en
entidades privadas y públicas de las áreas de telecomunicaciones,
mercadeo, venta de productos en línea, entidades financieras, logística,
transporte, entre otras.
Asociación Colombiana de Ingenieros
Ph. D., en Ingeniería. Universidad de Montreal (Canadá).
Optimización de sistemas de telecomunicación. Magister de la
Universidad de British Columbia. Ingeniero Electrónico de la
Universidad Javeriana. Físico de la Universidad Nacional de
Colombia. Cuenta con más de 12 años de experiencia profesional
en el procesamiento de datos en diferentes industrias y bajo
diferentes plataformas. En la actualidad es miembro del equipo de
gerencia de capacidad de red para TELUS en Canadá. Promotor
de la utilización de Hadoop y software de análisis y minería de
datos. Actualmente ejecuta proyectos de transición de bases de
datos convencionales a la plataforma Hadoop.
Procesamiento y Análisis de Big Data (Hadoop y Tableau)
Contenido
Informes
1. Introducción: Big Data y la evolución del procesamiento de gran cantidad de datos
2. El proyecto Apache Hadoop y su ecosistema
3. Etapas del procesamiento de gran cantidad de
datos:
• Buscando la mina de oro de los datos
• Proceso ETL (Extract Transform Load). Herramienta
Python.
• Haciendo preguntas a los datos
• Presentación de los datos e informe final
Duración
El Curso tendrá una duración de 16 horas
Sede de Evento:
ASOCIACIÓN COLOMBIANA DE INGENIEROS
Capítulo Cundinamarca
Centro de Convenciones ACIEM
Calle 70 No. 9-10. Bogotá, D.C.
3127393
[email protected] / www.aciem.org
Fecha:
Jueves 5 de mayo:
Viernes 6 de mayo:
8:00 a.m. - 5:30 p.m.
8:00 a.m. - 5:30 p.m.
Inscripciones
4. Herramientas disponibles para el análisis de
datos: Tableau y R.
Valor Inscripción:
Afiliados ACIEM e IEEE:
5. Laboratorio No. 1
• Procesamiento y análisis de datos de Uber
Para hacer efectivo el descuento como miembro de ACIEM y de
IEEE, se deberá acreditar su afiliación en el momento de la
inscripción. No se hará descuento posterior a la fecha de iniciación
del Curso.
6. Laboratorio No. 2
Para obtener el descuento como Ingeniero Afiliado a ACIEM,
deberá tener como mínimo dos meses de asociado.
• Procesamiento y análisis de datos de consumo de
internet
Este valor incluye un ejemplar de las memorias, almuerzos,
refrigerios y certificación
7. Laboratorio No. 3
• Procesamiento y análisis del consumo de productos en
línea
$1´850.000 + IVA
$1´500.000 + IVA
Los certificados de asistencia a las capacitaciones de ACIEM,
solo se entregarán a los participantes que hayan cumplido con
una asistencia de más del 85% de las horas clase establecidas
para la capacitación.
La inscripción deberá hacerse antes de iniciar el Curso.
8. Procesando gran cantidad de datos en el
ecosistema Hadoop
• Conceptos y ejemplos.
Una vez iniciado el Curso, no habrá reembolso del valor de la
inscripción pero se aceptará la asistencia de otra persona en
reemplazo. En caso de existir diferencia en el valor de inscripción
se deberá cancelar antes del evento.
9. Laboratorio No. 4
Formas de pago
• Uso del Hadoop Stack en HortonWorks Sandbox:
Proceso ETL, haciendo preguntas a los datos en Hive,
transferencia de los resultados al software Tableau
• Efectivo o cheque.
• Pago en línea: A través de la tienda virtual de ACIEM:
www.tienda.aciem.org
Información adicional e inscripciones:
10.Tópicos avanzados:
Educación Continuada
2367713/14
[email protected]
• Machine Learning
• Real Time Processing
• Internet de las Cosas (IoT)
ACIEM se reserva el derecho de cambiar a los conferencistas de
las capacitaciones por motivos de fuerza mayor
11.Laboratorio No. 5
• Pronosticando el aumento del consumo de internet
• Recomendando a los conductores de Uber los mejores
sitios para recoger pasajeros.
Se prohíbe la grabación parcial o total de audio y/o video de la
capacitación
www.aciem.org
ACIEMCundinamar
ACIEM.Cundinamarca
administracionACIEM
ACIEM-cundinamarca