Blog

Noticias

Lanzamiento de Parquet S3 FDW 1.0.0

Acabamos de lanzar la versión 1.0.0 del conector de datos externos (FDW) para el archivo Parquet en Amazon S3. 

Esta versión es compatible con PostgreSQL 13, 14  y 15. 

Esta versión mejora los siguientes elementos (desde la 0.3.0):

  • Compatible con PosgreSQL 15.0
  • Soporte para función de modificación
  • Compatibilidad con las opciones de región y endpoint de aws
  • Solucionado el problema de datos duplicados si el nombre del archivo contiene espacios.
  • Permite realizar una inserción sin columna clave

El FDW soporta las siguientes funciones:

  • Soporte para el uso de SELECT con archivos tipo parquet en el sistema de archivos local o en Amazon S3
  • Soporte para INSERT, DELETE, UPDATE (modificación foránea).
  • Soporte para el acceso a MinIO como alternativa a Amazon S3.
  • Permite comprobar si los servidores foráneos mantienen las conexiones abiertas tras la finalización de la transacción. Esta opción está controlada por keep_connections y su valor por defecto es on.
  • Soporte para la función parquet_s3_fdw_get_connections() de parquet_s3_fdw  que notifica la existencia de conexiones abiertas con servidores foráneos.
  • Soporte para la creación de una tabla foránea para múltiples archivos de un directorio especificando la ruta del mismo.
  • Soporte del modo sin esquema que permite el acceso a los elementos del archivo de datos sin cambiar la definición de la tabla mediante el uso de la columna tecleada de jsonb.

Desarrollado por el Toshiba Software Engineering & Technology Center.

Para más información, consulten el repositorio.