Desarrollo de interfaces para la configuración, administración y monitoreo del Clúster Live-Hadoop

Abstract

Resumen Para hacer procesamientos con grandes volúmenes de datos (Big Data) es necesario tener un clúster. Montar un clúster no es una tarea sencilla, existe un sistema operativo desarrollado en la Universidad Central de Venezuela por los profesores José R. Sosa y Jesús Lares que monta un clúster Beowulf listo para procesar y almacenar grandes volúmenes de datos. Este sistema operativo lleva por nombre Live Hadoop y presenta ciertas limitaciones que hacen que resuelva un conjunto limitado de problemas de Big Data. Algunas de las limitaciones que presenta actualmente es a la hora de iniciar, configurar y monitorear dicho clúster ya que estas tareas se realizan mediante scripts por consola, lo que hace todo el proceso más lento, tedioso y complicado y que tenga que ser aprovechado solo por usuarios expertos. En consecuencia el objetivo de este Trabajo Especial de Grado consistió en desarrollar una Aplicación Web para llevar a cabo cada uno de estos procesos de instalación, configuración, administración y monitoreo cuyas interfaces nos permitan hacer estas tareas más fáciles de usar y entender, y así poder dar un mejor y mayor uso a este clúster y llegar a muchos más usuarios finales Para el desarrollo de este esta aplicación se empleó una adaptación de la metodología Programación Extrema (XP), incluyendo el uso de tecnología tales como: HTML, CCS, PHP, Phyton entre otras.