Основы Big Data. Концепции, алгоритмы и технологии

“В жизни все меняется быстро и живо”, — озвучил когда-то очевидную и простую вещь в “Мертвых душах” Николай Васильевич Гоголь. Наверное, даже он не подозревал, насколько быстро и живо будет меняться мир через каких-то 200 лет. Да что там 200. Полный демонтаж и перестройка человеческого сознания дикими темпами происходит в разрезе последних 10-15-ти лет. Мы переместились в виртуальный мир. Образование, покупки, счета, личная жизнь… Неужели здесь проходит большая часть нашего времени? И что за всем этим стоит: неминуемый прогресс, выгода и расчет больших корпораций или стремление людей к удобству и максимальному упрощению всех жизненно значимых процессов? Одно известно точно: интернет покорил мир, вовлек миллиарды людей, технологий, приборов, машин. И объемы ежесекундно накапливаемой информации неумолимо возрастают. Неудивительно, что такой глобальный процесс заинтриговал ученых, которые нарекли всю эту «вакханалию» с неуемным нагромождением данных – Big Data. Для достоверности уточним, термин «Big Data» впервые ввел аналитик Даг Ланей в 2001 году. В своей работе он писал: «Большие данные — это огромный массив информации, который увеличивается с перманентно возрастающей скоростью и имеет большое разнообразие форматов. Это ценный ресурс, требующий новаторских подходов анализа и обработки. А уж если правильно вычленить из него пользу — появляются безграничные возможности для оптимизации процессов и понимания их сути». Другими словами, главная цель всех усилий в этом направлении — попытаться эффективно обрабатывать массивы разнородной информации и извлекать из них пользу. Данная книга расскажет более детально о причинах возникновения новых подходов к хранению и обработке данных, с учетом их растущих объёмов и форматов, позволит читателям лучше понимать технические и технологические процессы, которые стоят у истоков Больших данных.