Qué es
Big Data hace referencia a datos cuyo volumen, velocidad de generación o variedad de formatos hacen inviable trabajarlos con las bases de datos y herramientas tradicionales de una sola máquina. No es un umbral fijo de tamaño, sino un problema de escala: cuando los datos ya no entran en la memoria o el disco de un servidor, ni pueden procesarse a tiempo con métodos convencionales.
Por qué surgió como concepto
El crecimiento de internet, los dispositivos móviles, los sensores y las redes sociales multiplicó la cantidad y variedad de datos generados cada segundo. Esto impulsó el desarrollo de sistemas distribuidos (como Hadoop y luego Spark) capaces de repartir el almacenamiento y el procesamiento entre muchas máquinas trabajando en conjunto.
Cómo se suele caracterizar
El marco más conocido para describirlo es el de las 5 V del Big Data: volumen, velocidad, variedad, veracidad y valor. En la práctica, resolver un problema de Big Data implica elegir la infraestructura y las herramientas adecuadas para alguna combinación de estas dimensiones.