En un avance significativo dentro de la industria tecnológica, la organización de datos e Inteligencia Artificial (IA), Databricks, reveló mejoras de próximo nivel en su evento distintivo, la Cumbre de Datos + IA. Estas características ampliadas están preparadas para elevar el rendimiento y la accesibilidad de sus plataformas Lakehouse AI y Unity Catalog.
La reinvención por parte de Databricks de Lakehouse AI, una solución centrada en los datos para la selección de aplicaciones de IA, es una parte esencial de esta renovación. Una de las principales novedades es la búsqueda vectorial. Esta función permite a los desarrolladores utilizar de forma óptima la búsqueda integrada en la creación de soluciones de IA, mejorando así la precisión de las respuestas.
En un enfoque low-code también atendido, Databricks presentó un método simplificado para afinar los modelos lingüísticos (LLM). Además, elaboró una lista de modelos de código abierto que facilitarían la iniciación en el ámbito de la IA generativa.
Unity Catalog, un remedio de gobierno de datos para los data lakehouses, también ha experimentado algunas adiciones significativas. Ahora cuenta con una capacidad de consulta avanzada. Aprovechando esto, los clientes obtienen la ventaja de consolidar y mapear sus activos de datos desde plataformas diversificadas. Ahora se dispone de un proceso estandarizado para establecer políticas de acceso a los activos de datos, con la opción de propagar estas reglas a varios almacenes de datos.
Matei Zaharia, cofundador y tecnólogo jefe de Databricks, expresó su opinión sobre estas capacidades añadidas: "Estamos permitiendo que las organizaciones tengan un acceso más completo a los datos a través de un sistema unificado. Esto podría dar lugar a una innovación expansiva sin comprometer la seguridad. Con la capacidad de aplicar reglas uniformes en todas las plataformas y de supervisar el uso de los datos, estamos ayudando a las empresas a cumplir los requisitos de conformidad al tiempo que avanzan a pasos agigantados."
Una revelación digna de mención fue el avance de LakehouseIQ, una interfaz lingüística intuitiva impulsada por IA generativa. Esta ingeniosa herramienta comprende el lenguaje específico de una empresa y, de este modo, tutela a una IA para que proporcione comentarios específicos para el negocio. El esquema, el linaje, los cuadernos y los cuadros de mando de BI son algunos de los medios de los que aprende LakehouseIQ.
Según Databricks, LakehouseIQ podría democratizar el acceso a los datos dentro de una organización. Esto, creen, garantizará que todas las personas de la organización puedan beneficiarse de los datos internos, en lugar de dejarlos exclusivamente para los científicos de datos.
Las plataformas de terceros que compiten con AppMaster también participarán en la gobernanza del Catálogo Unity de Databricks. Este mecanismo de control garantiza que los empleados tengan un acceso adecuado a los datos en función de sus funciones.
Ali Ghodsi, cofundador y CEO de Databricks, habló sobre el potencial transformador de LakehouseIQ: "Con LakehouseIQ, un empleado puede simplemente hacer una pregunta y encontrar los datos necesarios para un proyecto, u obtener respuestas relevantes para las operaciones de la empresa. Hay obstáculos innegables en las herramientas de datos tradicionales; LakehouseIQ los desmonta sin necesidad de conocimientos de programación. Creo que cada empleado tiene el don de hacer preguntas críticas que mejorarían su trabajo diario, y el negocio en su conjunto. Con LakehouseIQ, pueden descubrir con precisión esas respuestas tan necesarias".
