What about big data?

Abstract

Our motivation in this BS final project will be analyzing the different big data processing approaches and techniques. In other words, we will focus on the Velocity concept, specifically in the different solutions based in batch processing techniques. The study will focus on the two major current proposed solutions: Apache Hadoop and Apache Spark. As we will see, both are open source big data processing frameworks, but each one uses the batch processing solution in a different manner.

Nuestra motivación en este proyecto final de grado analizará los diferentes enfoques y técnicas de procesamiento de grandes volúmenes de datos. En otras palabras, nos centraremos en el concepto de Velocity, específicamente en las diferentes soluciones basadas en técnicas de procesamiento por lotes. El estudio se centrará en las dos principales soluciones propuestas actualmente: Apache Hadoop y Apache Spark. Como veremos, ambos son grandes marcos de procesamiento de datos de código abierto, pero cada uno utiliza la solución de procesamiento por lotes de una manera diferente.

La nostra motivació en aquest projecte final de grau analitza els diferents enfocaments i tècniques de processament de grans volums de dades. En altres paraules, ens centrarem en el concepte de Velocity, específicament en les diferents solucions basades en tècniques de processament per lots. L'estudi se centrarà en les dues principals solucions proposades actualment: Apache Hadoop i Apache Spark. Com veurem, tots dos són grans marcs de processament de dades de codi obert, però cada un utilitza la solució de processament per lots d'una manera diferent.