Estás leyendo la publicación: DES 2023 reúne a líderes de la industria para debatir sobre modernización de datos, IA y más
Recientemente, la revista Analytics India (AIM) concluyó el envío de ingeniería de datos (DES) de este año impulsado por Tredence y en asociación con Infocepts y Tiger Analytics.
DES 2023, que es la única cumbre de India dedicada a la ingeniería de datos, ha llegado a una conclusión exitosa, reuniendo a algunos de los líderes de opinión, expertos y profesionales más influyentes en el campo de la ingeniería de datos.
La cumbre fue una oportunidad única para que los asistentes aprendieran sobre las últimas tendencias y las mejores prácticas en ingeniería de datos, se relacionaran con sus pares y obtuvieran información valiosa de los oradores principales y los paneles de discusión.
“Acabamos de crear la conferencia más grande del mundo centrada exclusivamente en la ingeniería de datos. Me sorprendió gratamente cuánto ha evolucionado el campo a lo largo de los años y tanto ruido en torno a la ingeniería de datos en la India”, dijo Bhasker Gupta, fundador y director ejecutivo de AIM.
El éxito de Data Engineering Summit 2023 marca un hito significativo en el crecimiento y la innovación continuos de la industria. Estos son algunos de los temas interesantes tratados en DES 2023.
Ingeniería de datos en un mundo de IA
Con el aumento del volumen y la complejidad de los datos, las organizaciones están aprovechando la IA para mejorar sus capacidades de ingeniería de datos, automatizar procesos y generar conocimientos a partir de sus datos.
Sunil Krishnareddy, VP & Head of Data Engineering services en Genpact, en su charla ‘Ingeniería de datos en la nueva era: la IA está aquí, ¿dónde están sus datos?‘ explora cómo el dominio de la ingeniería de datos está cambiando rápidamente con la llegada de modelos populares de IA como ChatGPT y Midjourney.
Del mismo modo, Gopan Vijayan Nair, Head of Enterprise Business de NVIDIA, analiza en su charla ‘La sinergia de la ingeniería de datos y la IA generativa en la revolución de las empresas’ el potencial para la integración de la ingeniería de datos y la IA generativa para crear soluciones poderosas que pueden mejorar la toma de decisiones, automatizar procesos y mejorar las experiencias de los clientes en el espacio empresarial.
Continuando en la misma línea, Dmitry Ustalov, Head of Ecosystem Development de Toloka, en su charla ‘Manejo del Ruido y la Subjetividad en el Etiquetado Datos’ también discutió cómo construir, usar y proteger conjuntos de datos representativos para problemas de IA, prestando especial atención a los datos de colaboración colectiva y los datos obtenidos de equipos de anotación internos
Lucha de datos en abundancia
Los desafíos de los datos aún persiguen a las empresas. Algunos de los desafíos destacados en el evento incluyen el panorama regulatorio cambiante, junto con la gestión de datos en la nube.
Kunal Mehta, Senior Manager de Data CoE, y Deepak Kumar, Senior Director of Data Engineering de Publicis Sapient, en su charla ‘Prácticas de ingeniería para construir resiliencia de datos en un mundo cada vez más sin cookies’ discutió la creciente importancia de los datos para las empresas, al tiempo que reconoció los desafíos de recopilar datos debido a la evolución de las regulaciones de privacidad de datos.
“Para los analistas de datos, el desafío no es la falta de disponibilidad de los datos, sino confiar en sus datos”, Dijo Kumar.
Ops es el nuevo petróleo
En la Cumbre de Ingeniería de Datos de este año, el enfoque fue mucho más que datos, y más hacia la puesta en funcionamiento de los datos, junto con la dinámica cambiante del campo sobre cómo se está moviendo hacia DevOps, AIOps, etc.
“Muy pocos de nosotros sabemos; una vez que los datos se migran, una vez que ingresan a los sistemas y permanecen durante mucho tiempo, tiende a olvidarse de ellos”, dijo Mousumi Kar, gerente sénior de ingeniería de datos en Tredence. Ella cree que al hacer operativa la usabilidad de sus datos, las organizaciones podrán generar valor con éxito.
Desarrollo de la pila de datos moderna
La modernización de datos tiene como objetivo mejorar la calidad, la accesibilidad y la confiabilidad de los datos, y permitir que las organizaciones obtengan información valiosa y tomen decisiones basadas en datos en tiempo real.
Jorawar Singh, director regional de desarrollo comercial de Artha Solutions y Rajiv Maskara, director, especialista en integración de datos, India en Qlik, en su charla ‘Desbloquear el poder de los datos usando la plataforma moderna de datos y análisis’ discutió la importancia de tener una pila de datos moderna para cualquier organización que quiera aprovechar todo el potencial de sus datos.
Del mismo modo, Sathish Kumar Thiyagarajan, director de tecnología de OurKadai Technologies, en su charla ‘Modernización de la capa de acceso a datos con Compile Time ORM’ explora la evolución de la capa de acceso a datos en aplicaciones empresariales que dependen de bases de datos relacionales durante las últimas dos décadas.
Malla de datos, estructura de datos y más
Data Mesh tiene el potencial de revolucionar la forma en que las organizaciones abordan la gestión de datos y les permite volverse más innovadoras y basadas en datos.
En su charla titulada ‘El auge de la arquitectura de malla de datos: un cambio de paradigma en la ingeniería de datos’ Amit Kapur, vicepresidente de ciencia e ingeniería de datos de Lowe’s, analiza cómo las organizaciones están adoptando este enfoque para superar los desafíos de las arquitecturas de datos monolíticas tradicionales y mejorar sus capacidades de gestión de datos.
Del mismo modo, Thirumalvalavan Venkatesan, Jefe de Práctica de Datos y Análisis – India en EPAM Systems, en su charla ‘Data Fabric o Data Mesh: ¿Qué enfoque se adapta mejor a la construcción de una plataforma de datos preparada para el futuro?’discutió cómo los líderes de análisis están buscando formas de mejorar la eficiencia de la gestión de datos, desbloquear mejores conocimientos comerciales y diferenciar sus activos de datos de los de la competencia.
Además, Muthu Govindarajan, socio de ingeniería de datos en Tiger Analytics planteó una pregunta interesante. Él pregunta: si las máquinas pueden volverse inteligentes con la llegada de IoT, ¿por qué no las plataformas de datos?
Otro tema interesante cubierto en DES 2023 fue el de Yashwanth Kumar, gerente de cuentas de ventas empresariales y Shounak Vijay, ingeniero de ventas APAC en Fivetran, donde mostraron cómo Condé Nast, una empresa global de medios de comunicación, monetizó billones de puntos de datos.