Índice

Search

  1. 10.2
  2. Versión 10.1.1
  3. Versión 10.1
  4. Versión 10.0
  5. Versión 9.6.1
  6. Versión 9.6.0

Guia de versiones

Guia de versiones

Motor de Spark

Motor de Spark

A partir de la versión 10.1.1, el Motor de Spark cuenta con las siguientes características nuevas:

Tipos de datos binarios

A partir de la versión 10.1.1, el motor de Spark es compatible con el tipo de datos binarios para las funciones siguientes:
  • DEC_BASE64
  • ENC_BASE64
  • MD5
  • UUID4
  • UUID_UNPARSE
  • CRC32
  • COMPRESS
  • DECOMPRESS (ignora la precisión)
  • AES Encrypt
  • AES Decrypt
El motor de Spark no es compatible con el tipo de datos binarios para las condiciones de combinación y búsqueda.
Para obtener más información, consulte el capítulo "Referencia de funciones" en la
Guía del usuario de Informatica Big Data Management 10.1.1
.

Compatibilidad de las transformaciones en el motor de Spark

A partir de la versión 10.1.1, las transformaciones cuentan con la siguiente compatibilidad adicional en el motor de Spark:
  • La transformación de Java se admite, aunque con algunas restricciones.
  • La transformación de búsqueda puede acceder a un origen de búsqueda de Hive.
Para obtener más información, consulte el capítulo "Asignación de objetos en el entorno de Hadoop" en la
Guía del usuario de Informatica Big Data Management 10.1.1
.

Estadísticas de tiempo de ejecución para las ejecuciones de tareas del motor de Spark

A partir de la versión 10.1.1, puede ver las estadísticas resumidas y detalladas de las tareas de asignación ejecutadas en el motor de Spark.
Puede ver las siguientes estadísticas de resumen de Spark en la vista
Estadísticas resumidas
:
  • Origen. El nombre del archivo de origen de la asignación.
  • Destino. El nombre del archivo de destino.
  • Filas. El número de filas leídas para el origen y el destino.
La vista
Estadísticas detalladas
muestra un gráfico de los recuentos de fila para las ejecuciones de tareas del motor de Spark.
Para obtener más información, consulte el capítulo "Asignación de objetos en el entorno de Hadoop" en la
Guía del usuario de Informatica Big Data Management 10.1.1
.