¿Qué es Apache Twill?

Apache Twill es una librería que ofrece una abstracción sobre Hadoop YARN para simplificar el desarrollo de aplicaciones distribuidas, ofreciendo un módulo similar al de Threads de Java.

Veamos cómo se usa.

Imaginemos este ejemplo: un Servidor que hace echo del mensaje que le llega:

Que lanzaría con:

Si quiero ejecutar el EchoServer en un cluster YARN bastaría con convertir el ejemplo a:

Crearé mi Servicio Twill:

Donde zkConnectStr es la conexión con una instancia de ZooKeeper en ejecución.

Y lo lanzaré con mi TwillController:

Otra funcionalidad interesante es que permite ejecutar aplicaciones sin preocuparnos de los conflictos con las versiones de Hadoop:

Leer más

A %d blogueros les gusta esto: