domingo, 17 de abril de 2016

¿Cómo se beneficia Hadoop de las redes de altas prestaciones?

¿Cómo se beneficia Hadoop de las redes de altas prestaciones?

+ =
.


  • El funcionamiento de HDFS ya de por sí presenta una elevada latencia, por ello cuanta menos latencia tenga la red, mejor será el rendimiento general en el sistema de ficheros de Hadoop.


  • HDFS trabaja con bloques de datos muy grandes, por lo que necesita de una red que tenga un gran ancho de banda, como bien podría ser InfiniBand para tener la fluidez necesaria para un rendimiento óptimo.


  • Muchos de los sistemas que emplean Hadoop, como bien puede ser Cassandra o la mayoría de bases de datos NoSQL, vuelcan la información directamente a la memoria, así que un hardware de red con sistemas de descarga del procesador puede incrementar ampliamente el rendimiento, consiguiendo operaciones de escritura muy rápidas

En Hadoop la replicación de datos se hace entre nodos esclavos de forma independiente del nodo Maestro, por lo que una red de altas prestaciones con comunicación directa entre todos los nodos facilita enormemente el trabajo, además de aumentar el rendimiento.

Twitter @SierraBares
Reacciones:

0 comentarios:

Publicar un comentario