ビッグデータ

従来の方法では扱いきれないほど、量・種類・発生速度が大きいデータの総称。

単にデータ量が多いだけでなく、テキストや画像など形式が多様であること、絶え間なく発生し続けることなども含めて特徴づけられる。専用の分散処理技術と組み合わせて扱われることが多い。

HadoopやSparkといった分散処理の技術は、このビッグデータを現実的な時間で処理するために発展してきた。