Spark es un proyecto de Apache con un motor de tiempo de ejecución que puede ejecutar asignaciones en el clúster de Hadoop. Configure las propiedades de conexión de Hadoop específicas para el motor Spark. Después de crear la asignación, puede validarla y ver el plan de ejecución del mismo modo que en los motores Blaze y Hive.

Al insertar lógica de asignación en el motor Spark, el servicio de integración de datos genera un programa Scala y lo empaqueta en una aplicación. Envía la aplicación al ejecutor Spark que la envía al administrador de recursos en el clúster de Hadoop. El administrador de recursos identifica recursos para ejecutar la aplicación. Puede supervisar el trabajo en la Herramienta del administrador.

Para obtener más información sobre el uso de Spark para ejecutar asignaciones, consulte la

Guía del usuario de Informatica Big Data Management 10.1

.