Snowflake anuncia colaboración con NVIDIA y presenta Polaris Catalog en el Data Cloud Summit

Snowflake (NYSE: SNOW), la empresa de AI Data Cloud, ha anunciado en su evento anual para usuarios, Snowflake Summit 2024, Polaris Catalog, una implementación de catálogo abierto y de proveedor neutral para Apache Iceberg, el estándar abierto de elección para la implementación de data data lakehouses, data lakes y otras arquitecturas modernas. Polaris Catalog será de código abierto en los próximos 90 días para proporcionar a las empresas y a toda la comunidad Iceberg nuevos niveles de elección, flexibilidad y control sobre sus datos, con total seguridad empresarial e interoperabilidad de Apache Iceberg con Amazon Web Services (AWS), Confluent, Dremio, Google Cloud, Microsoft Azure, Salesforce, entre otros. 

Image description

“Las organizaciones quieren almacenamiento abierto y motores de consulta interoperables sin bloqueo. Ahora, con el apoyo de los líderes de la industria, estamos simplificando aún más la forma en que cualquier organización puede acceder fácilmente a sus datos a través de diversos sistemas con mayor flexibilidad y control", explica Christian Kleinerman, EVP of Producto, Snowflake. “Polaris Catalog amplía el compromiso de Snowflake con Apache Iceberg como el estándar abierto de elección, y señala la intención de los líderes de la industria en permitir a los clientes y a la comunidad Iceberg en general aprovechar sus datos a través de un enfoque abierto y neutral, potenciando la interoperabilidad entre motores sobre esos datos”.

Polaris Catalog presenta nuevos niveles de interoperabilidad para Apache Iceberg

Apache Iceberg emergió de la incubación para convertirse en un proyecto de alto nivel de la Apache Software Foundation en mayo de 2020, y desde entonces ha aumentado su popularidad hasta convertirse en un formato líder de tablas de datos de código abierto. Con Polaris Catalog, los usuarios obtienen ahora un lugar único y centralizado para que cualquier motor encuentre y acceda a las tablas Iceberg de una organización con interoperabilidad total y abierta. Polaris Catalog se basa en el protocolo REST de código abierto de Iceberg, que proporciona un estándar abierto para que los usuarios accedan y recuperen datos desde cualquier motor que admita la API Rest de Iceberg, incluidos Apache Flink, Apache Spark, Dremio, Python, Trino, etc.

Las organizaciones pueden empezar a ejecutar Polaris Catalog alojado en la AI Data Cloud de Snowflake en cuestión de minutos (Snowflake alojado en public preview en breve), o autoalojarlo en su propia infraestructura utilizando contenedores como Docker o Kubernetes. Dado que la implementación del backend de Polaris Catalog será de código abierto, las organizaciones pueden intercambiar libremente la infraestructura de alojamiento, eliminando al mismo tiempo la dependencia del proveedor.

Organizaciones líderes se unen a la comunidad de Polaris Catalog

Una parte de lo que hace que Apache Iceberg sea tan potente es su vibrante comunidad de usuarios, colaboradores y ofertas comerciales diversas. Para garantizar que Polaris Catalog pueda responder a las necesidades cambiantes de una comunidad y un panorama más amplios, Snowflake colabora con el ecosistema Iceberg para impulsar el proyecto.

Esto llega tras la reciente ampliación de la colaboración entre Snowflake y Microsoft, que crea una interoperabilidad más fluida entre Snowflake y Fabric. Esta interoperabilidad es posible gracias al compromiso de Snowflake y Microsoft de apoyar los principales estándares abiertos del sector para formatos de almacenamiento: Apache Iceberg y Apache Parquet. Ahora con Polaris Catalog, ambas organizaciones continúan colaborando con la misión conjunta de permitir a todos los usuarios aprovechar sus datos empresariales, independientemente de dónde estén almacenados, para crear aplicaciones impulsadas por IA a escala.

“Desde el primer día en Microsoft, nos hemos centrado en capacitar a todos los usuarios del planeta para lograr más, y esto comienza con una sólida base de datos. A través de nuestro sorporte y contribuciones a los estándares de datos abiertos, incluyendo Delta Parquet, Apache Iceberg y Apache XTable, estamos impulsando esta misión al permitir a las organizaciones un nuevo nivel de interoperabilidad de datos abiertos, para que puedan hacer más con sus datos", dice Arun Ulagaratchagan, Vicepresidente Corporativo de Azure Data de Microsoft. “Snowflake continúa siendo un partner estratégico nuestro, y estamos entusiasmados por su voluntad de trabajar con la comunidad Iceberg en un catálogo abierto para empoderar a nuestros clientes conjuntos y a la comunidad de código abierto en general con más flexibilidad y control sobre sus datos abiertos Iceberg”.

Con la experiencia de Snowflake, que sirve como datos fundacionales que impulsan las cargas de trabajo de IA y datos entre nubes de miles de clientes globales, y con la innovación y habilidades de código abierto de la comunidad Iceberg en rápido crecimiento, continuarán simplificando juntos la interoperabilidad de los datos entre motores.

Snowflake sigue ampliando su compromiso con el código abierto

Polaris Catalog sigue a una serie de recientes compromisos de Snowflake con respecto al código abierto, incluyendo sus inversiones en Iceberg Tables, que permiten a los clientes de Snowflake trabajar con datos en su propio almacenamiento en el formato Apache Iceberg, sin dejar de beneficiarse de la facilidad de uso, el rendimiento y la gobernanza unificada de Snowflake. 

Snowflake también ha anunciado recientemente Snowflake Arctic, uno de los large language models (LLM) empresariales más abiertos del mercado. Como parte del compromiso de Snowflake con el código abierto, no sólo ha publicado las ponderaciones de Arctic bajo una licencia Apache 2.0, sino también amplios detalles sobre cómo se ha entrenado a través de una serie de “libros de recetas”. Además, Snowflake apoya a la comunidad de código abierto Streamlit, que ahora cuenta con más de 275.000 desarrolladores activos mensuales y más de 6 millones de visitas mensuales a aplicaciones. Desde que Snowflake adquirió Streamlit en marzo de 2022, la comunidad de código abierto ha seguido floreciendo, creciendo más de un 500% en los últimos dos años, ya que Snowflake y Streamlit siguen invirtiendo en avances de código abierto de vanguardia para los desarrolladores. 

 Comentarios sobre la noticia de los expertos en Data Platform

“AWS se compromete a trabajar con partners, como Snowflake, en soluciones de código abierto que pueden fomentar la capacidad de elección para los clientes”, comenta Chris Grusz, Managing Director, Technology Partnerships, Amazon Web Services. “Estamos encantados de trabajar con Snowflake para seguir haciendo que Apache Iceberg siga siendo interoperable en todos nuestros motores”.


“En Confluent, tenemos la misión de acabar con los silos de datos para ayudar a las organizaciones a potenciar sus negocios con más información en tiempo real”, dice Shaun Clowes, Chief Product Officer, Confluent. “Con Tableflow en Confluent Cloud, las organizaciones podrán convertir flujos de datos de toda la empresa en tablas Apache Iceberg con un solo clic. Juntos, Polaris Catalog de Snowflake y Tableflow permiten a los equipos de datos acceder fácilmente a estas tablas para el desarrollo de aplicaciones críticas y análisis posteriores”.

“Los clientes quieren ecosistemas abiertos prósperos y ser propietarios de su almacenamiento, datos y metadatos. No quieren estar encerrados", afirma Tomer Shiran, fundador de Dremio. “Estamos comprometidos a apoyar los estándares abiertos, como Apache Iceberg y los catálogos abiertos Project Nessie y Polaris Catalog. Estas tecnologías abiertas proporcionarán la interoperabilidad del ecosistema y la capacidad de elección que los clientes merecen”.

“Participamos activamente en la comunidad de código abierto, especialmente en el ámbito de los datos”, ha declarado Neema Raphael, Chief Data Officer and Head of Data Engineering at Goldman Sachs. “Hemos abierto nuestra plataforma de datos, Legend, lo que nos permite trabajar con formatos de tabla de código abierto como Iceberg, que proporcionará una mayor interoperabilidad a través de motores de consulta como Snowflake. El lanzamiento de un catálogo de Iceberg de código abierto como Polaris es un paso emocionante en la promoción de ese compromiso con la interoperabilidad”.

“La popularidad de Apache Iceberg ha establecido un estándar de almacenamiento abierto que simplifica el acceso a datos de copia cero para las organizaciones en todo su ecosistema”, señala Raveendrnathan Loganathan, Executive Vice President of Software Engineering at Salesforce. “Nuestra Data Cloud de Salesforce se ha construido desde cero con los estándares abiertos Apache Parquet para archivos y Apache Iceberg para tablas, fomentando las innovaciones de copia cero para desbloquear datos atrapados, obtener información y orquestar acciones en todo el cliente 360. Estamos encantados de contar con Snowforce para el almacenamiento de datos. Estamos encantados de contar con Snowflake como miembro de nuestra Zero Copy Partner Network, y nos entusiasma ver cómo este nuevo estándar de catálogo abierto impulsará el acceso a la copia cero en la empresa”. 

Tu opinión enriquece este artículo:

El 40% de los restaurantes ya implementan IA generativa para mejorar su eficiencia y la experiencia de sus clientes

En un momento en que el sector de la restauración y el delivery se enfrenta a desafíos sin precedentes debido a la saturación del mercado y las cambiantes expectativas de los consumidores, la innovación tecnológica se presenta como la clave para el éxito futuro. Tecnologías como la IA, el Big Data, contar con una buena estrategia de marketing y la implementación de plataformas integradas para maximizar las ventas, serán clave para impulsar el futuro de la restauración.  

Navidad en Menorca: mercadillos y showcookings para que toda la familia viva esta festividad de una forma muy especial

Mercadillos navideños al más puro estilo de los mercados navideños del Centro de Europa, conciertos, artesanía, talleres y exhibiciones de gastronomía. Menorca se prepara para disfrutar de unas navidades fantásticas con actividades pensadas para grandes y pequeños. Unas fechas en las que, además, Menorca Región Gastronómica iniciará el camino para representar a la isla en el European Young Chef Award 2025, con showcookings en todos los pueblos de Menorca.

El renting de coches en ascenso con 301.898 operaciones hasta noviembre de 2024 (el 11,9% más que el año anterior)

El renting de Turismos, Vehículos Industriales, Vehículos Agrícolas y Todoterrenos registró 301.898 operaciones hasta noviembre de 2024, el 11,9% más que el año anterior, según las cifras facilitadas por la Asociación Española de Leasing y Renting (AELR). Estas cifras significan que alrededor de 1 de cada 4 vehículos -el 24,2%- que se matricularon en España el mes pasado lo fueron mediante renting.

Trioteca advierte sobre subidas “importantes” de precios medios por la que será la “gran amenaza” de 2025: la falta de oferta

Trioteca, empresa referente en la búsqueda y contratación de hipotecas en España, presenta su último Centro de Estudios (CET) correspondiente al mes de noviembre, donde constata la tendencia al alza de los precios de la vivienda, con el valor nominal medio de la hipoteca por encima de los 180.000 euros y el valor medio de la vivienda financiada rozando los 260.000 euros. 

Financial Times reconoce a Prosegur como la empresa más “inclusiva y equitativa” del sector de la seguridad privada en el mundo

Prosegur, líder en el sector de la seguridad privada, ha sido incluida por segundo año consecutivo en el ranking ‘Diversity Leaders’, elaborado por el Financial Times en colaboración con Statista. En esta ocasión, la compañía española ha alcanzado la séptima posición en la categoría ‘Business Services and Supplies’, escalando desde el noveno puesto obtenido el año anterior.

Éste sitio web usa cookies, si permanece aquí acepta su uso. Puede leer más sobre el uso de cookies en nuestra política de cookies.