Versions Compared

Key

  • This line was added.
  • This line was removed.
  • Formatting was changed.

...

Nuevo Onesait Platform DataFlow

Hasta esta versión, Onesait Platform ha contado con Streamsets Data Collector (SDC) como motor del módulo Onesait Platform Dataflow. SDC era un software open-source, durante este tiempo hemos usado con éxito esta tecnología en multitud de proyectos y productos.

...

Streamsets, la compañía detrás del SDC, cambió su política de licencias y a partir de la versión 4.0, SDC no es open-source. Debido a este cambio en la licencia hemos realizado un fork del repositorio open-source de SDC, que parte de la versión 3.23.0 y desde esta release, el equipo de Onesait Platform llevará a cabo tanto correcciones como nuevas funcionalidades. Este nuevo producto, derivado de SDC tiene el nombre de Onesait Platform Dataflow y seguirá manteniendo la licencia Apache License 2.

En cualquier caso, Onesait Platform continuará soportando Streamsets Data Collector para todos aquellos proyectos que prefieran adquirir la licencia de Streamsets.

Más detalle en Nueva versión de Onesait Platform Dataflow

...

Integración de cluster Spark

Otras mejoras

Acceso a VPNs privadas desde DataFlow

Se ha encapsulado en el DataFlow la capacidad para conectarse a una VPN tipo OpenVPN desde dentro de un pipeline, de modo que se arranque el acceso a esta VPN al arranque del flujo y se desconecte al terminarlo de forma autónoma.

Esto nos permitirá hacer ingestas de forma muy sencilla contra repositorios a los que sólo hay acceso desde un VPN.

...

Más detalle sobre cómo configurar esto en Acceso desde Dataflow a VPNs privadas

...