Guia de versiones

Anterior Siguiente

Big Data Management

En esta sección se describen las nuevas características de Big Data en la versión 10.1.1 Update 2.

Truncar particiones de tablas de Hive en las asignaciones que utilizan el motor de tiempo de ejecución de Blaze: A partir de la versión 10.1.1 Update 2, puede truncar las particiones de tablas de Hive en las asignaciones que utilizan el motor de tiempo de ejecución de Blaze.
Para obtener más información acerca de la truncación de particiones en un destino de Hive, consulte la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.
Filtros para columnas particionadas en el motor de Blaze: A partir de la versión 10.1.1 Update 2, el motor de Blaze puede introducir filtros en las columnas particionadas hasta el origen de Hive para aumentar el rendimiento.
Cuando una asignación contiene una transformación de filtro en una columna particionada de un origen de Hive, el motor de Blaze solo lee las particiones cuyos datos cumplen la condición del filtro. Para permitir que el motor de Blaze lea particiones específicas, la transformación de filtro debe ser la siguiente transformación tras el origen en la asignación.
Para obtener más información, consulte la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.
Compatibilidad de OraOop en el motor de Spark: A partir de la versión 10.1.1 Update 2, puede configurar OraOop para ejecutar asignaciones de Sqoop en el motor de Spark. Al leer o escribir datos en Oracle, puede configurar el argumento directo para permitir que Sqoop utilice OraOop.
OraOop es un complemento especializado de Sqoop para Oracle que utiliza protocolos nativos para conectarse a la base de datos de Oracle. La configuración de OraOop mejora el rendimiento.
Para obtener más información, consulte la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.
Compatibilidad de Sqoop con asignaciones nativas de Teradata en clústeres de Cloudera: A partir de la versión 10.1.1 Update 2, si utiliza una conexión de Teradata PT para ejecutar una asignación en un clúster de Cloudera y en el motor de Blaze, el servicio de integración de datos invoca a Cloudera Connector Powered by Teradata en tiempo de ejecución. A continuación, el servicio de integración de datos ejecuta la asignación mediante Sqoop.
Para obtener más información, consulte la guía
Informatica 10.1.1 Update 2 PowerExchange for Teradata Parallel Transporter API User Guide
.
Compatibilidad con programadores en motores de Blaze y Spark: A partir de la versión 10.1.1 Update 2, los siguientes programadores son válidos para las distribuciones Hadoop tanto en motores de Blaze como en motores de Spark:
Programador de distribución equilibrada. Asigna recursos a los trabajos de modo que todos los trabajos reciben, por término medio, la misma proporción de recursos con el tiempo.
Programador de capacidad. Diseñado para ejecutar aplicaciones de Hadoop como un clúster compartido de múltiples inquilinos. Puede configurar el Programador de capacidad con o sin etiquetado de nodos. Las etiquetas de nodos son una forma de agrupar nodos que tengan características similares.
Para obtener más información, consulte el capítulo sobre asignaciones en un entorno Hadoop en la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.
Compatibilidad con las colas de YARN en motores de Blaze y Spark: A partir de la versión 10.1.1 Update 2, puede dirigir los trabajos de Blaze y Spark a una cola de programador de YARN específica. Las colas permiten que varios inquilinos compartan el clúster. Al enviar aplicaciones a YARN, el programador las asigna a una cola. La cola de YARN se configura en las propiedades de conexión de Hadoop.
Para obtener más información, consulte el capítulo sobre asignaciones en un entorno Hadoop en la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.
Características de seguridad de Hadoop en IBM BigInsights 4.2: A partir de la versión 10.1.1 Update 2, puede utilizar las siguientes características de seguridad de Hadoop en la distribución de Hadoop de IBM BigInsights 4.2:
Apache Knox
Apache Ranger
Cifrado transparente de HDFS; Para obtener más información, consulte la guía
Informatica 10.1.1 Update 2 Big Data Management Security Guide
.
Modos de seguridad SSL/TLS: A partir de la versión 10.1.1 Update 2, puede utilizar los modos de seguridad SSL y TLS en las distribuciones de Cloudera y de HortonWorks Hadoop, incluidos los siguientes métodos de seguridad y complementos:
Autenticación Kerberos
Apache Ranger
Apache Sentry
Alta disponibilidad del nodo de nombres
Alta disponibilidad del administrador de recursos
Para obtener más información, consulte la
Guía de instalación y configuración de Informatica 10.1.1 Update 2 Big Data Management
.
Orígenes y destinos de Hive en Amazon S3: A partir de la versión 10.1.1 Update 2, Big Data Management admite la lectura y escritura en Hive en depósitos de Amazon S3 para clústeres configurados con las siguientes distribuciones Hadoop:
Amazon EMR
Cloudera
HortonWorks
MapR
BigInsights; Para obtener más información, consulte la guía
Informatica 10.1.1 Update 2 Big Data Management User Guide
.

Nuevas características (10.1.1 Update 2)

Descargar guía

Enviar comentarios

Communities

Knowledge Base

Success Portal

Rename Saved Search

Índice

Guia de versiones

Guia de versiones

Big Data Management

Big Data Management