Эссе на тему: "Как Big Data изменят наш мир"

Введение
В технике используется такое понятие как Big Data, что означает «большие данные». Большие данные не имеют строгого определения. Нельзя провести четкую границу — это 10 терабайт или 10 мегабайт? Само название очень субъективная. Слово «большое» — это как «один, два, много» у первобытных племен.
Однако есть устоявшееся мнение, что большие данные — это совокупность технологий, которые призваны осуществлять три операции. Во-первых, обрабатывать большие по сравнению с «обычными» сценариями объемы данных. Во-вторых, уметь работать с данными, быстро поступают в очень больших объемах. То есть данных не просто много, а их постоянно становится все больше и больше. В-третьих, они должны уметь работать со структурированными и плохо структурированными данными параллельно в разных аспектах. Большие данные предполагают, что на вход алгоритмы получают поток не всегда структурированной информации, и из него можно извлечь больше, чем одну идею.
Основная часть
Типичный пример больших данных — это информация, которая поступает из различных физических экспериментальных установок - например, с большого адронного коллайдера, сенсоры которого постоянно производят огромное количество данных. Установка непрерывно выдает большие объемы данных, а ученые с их помощью решают параллельно множество задач.
Многие разработчики привыкли работать со статическими объектами и мыслить категориями состояний. В больших данных парадигма другая. Мы должны уметь работать с непрерывным потоком данных, и это интересная задача. Она затрагивает все больше и больше областей. Однако есть другая сторона этих данных - воздействие на человека: его бытия, мысль, взгляд, мышления, действия и т.д. То есть, по сути, это манипуляция людьми с помощью больших данных. Однако как это происходит?
Мы часто слышим об очередных модные приложения и программы, которые используют какие-то магические штуки вроде нейросетей, больших данных или основаны в начале искусственного интеллекта. Для многих это магия, так как далеко не все понимают или понимают, что же скрывается за этими словами. Самое интересное, что Big Data (большие данные) уже много лет формирует наш ежедневный образ жизни и влияет на наши поступки и решения. Большие данные — это способ обработки огромных и разнообразных массивов информации, которые поступают каждую секунду. Такие данные важно быстро обработать и
структурировать для того, чтобы в будущем получить что-то полезное из них. Как мы сталкиваемся с Big Data каждый день? Человек - главный генератор и потребитель больших данных. Ежедневно мы создаем столько новой информации, сколько раньше создавали десятилетиями. Не важно, что большая часть этого - наши Селфи. Сейчас 90% имеющейся информации было создано за последние два года. Мы генерируем информацию не только с помощью фотографий и социальных постов. Это каждый наш поисковый запрос, шаг, подсчитан фитнес-трекером, видео, пересмотрено на YouTube. Почти каждое наше действие кем-то записывается и становится частью Big Data.
Только в Google происходит около 40 000 запросов в секунду, что дает около 1,2 триллиона поисковых запросов для больших данных ежегодно. И с каждым днем количество данных увеличивается быстрыми темпами. Если сегодня мы генерируем 4,4 Зеттабайт данных, то к 2020 мы будем создавать уже 44. К 2020 году почти треть всех данных будет проходить через облачные сервисы, а значит будет подвергнута анализу.
Интересно, что для анализа больших данных не всегда используются компьютеры корпораций. Часто пользователи сами предоставляют свои компьютеры для решения различных научных задач. В это же время 73% организаций проинвестировали или собираются инвестировать в развитие крупных данных.
Крупные компании типа Google, Facebook и даже государства обрабатывают и используют эту информацию для улучшения нашего образа жизни. Ну, или для показа более релевантной рекламы. Если упростить, то большие данные собираются из нескольких источников:
• Открытые данные: социальная, экономическая и другая публичная информация о городах, странах. Данные о законодательстве, статистика спортивных мероприятий. По сути, любая открытая справочная информация.
• Социальные сети: все то, что мы с вами добровольно рассказываем Facebook и ВКонтакте. Даже если пост не публичный, он становится частью Big Data. В среднем Facebook пишут около 31250000 сообщений и просматривают 2770000 видео каждую минуту.
• Интернет вещей — это еще один интересный термин. Если ваш холодильник имеет доступ в интернет, значит ваши продукты - тоже большие данные. Любые сенсоры в телефоне, смарт-часах, фитнес трекерах передают самую разнообразную информацию о вас и ваших занятиях. Например, в 2016 году было продано около 1,4 биллиона (более миллиарда) смартфонов. В каждом из которых множество сенсоров для сбора данных об их владельце. И с каждым годом появляется все больше вещей с интернет доступом, а еще вчера они прекрасно работали и без него.
• Личные данные тоже становятся частью больших данных. Часто эти данные обезличены: данные вашей медицинской карты, списки дел и так далее.
• Коммерческие транзакции. Речь не только о банковских транзакциях, но и о любых платежи в интернете.
• Любой другой контент, создаваемый нами: видео на YouTube, фотографии в Instagram. Каждую минуту мы загружаем 300 часов видео на YouTube, а в 2015 году загрузили около триллиона фотографий, из которых миллионы доступны публично. К концу 2019 года 80% всех фотографий будет сделано на смартфон
Все это пугает и иногда хочется спрятаться под камень и добывать огонь с помощью двух палок. Однако, по Большими данными - будущее и приходится мириться с тем, что Большой Компьютер знает о нас все. Хотим мы этого или нет. На основе этих данных мы можем не только получать третированную рекламу, ориентированную только на нас, но и значительно улучшить нашу жизнь. Только большинство не понимает, как происходит это улучшение и пугается любого упоминания о беге датой. Если вас уже поразили размеры того, сколько информации обрабатывается, то вот еще один интересный факт. Сегодня обработке подвергается только 0,5% всех доступных данных. Поэтому самое интересное все еще впереди.
Часто Big Data используют для предсказания будущего. Например, спортивных мероприятий вроде Олимпийских игр. Ученые в 2012 году с помощью компьютерной модели прогнали эмуляцию Игорь и получили прогноз, что США получат 108 медалей, но по факту США получили 104 медали.
Конечно, в спорте не последнюю роль играет человеческий фактор, но уже давно математический анализ влияет на покупку и продажу игроков в бейсболе и в других спортивных играх. С приходом больших данных и нейросетей провести этот анализ стало еще проще.
С помощью них становится возможно предотвратить эпидемию. Анализируя поисковые запросы и посты в социальных сетях медики могут отследить увеличение ключевых слов-симптомов болезней и предложить пользователям обратиться к врачу за профилактической медицинской помощью.
В некоторых городах уже сегодня можно добраться до работы без пробок, благодаря большим данным. Например, в Лондоне ежесекундно анализируется автомобильный трафик и светофоры переключаются в соответствии с загруженностью дорог. Иногда они даже заставляют водителей объехать пробку. Вы едете на работу и даже не знаете, что на соседней улице произошла авария.
Наверное, вы слышали об автомобилях Tesla, которые могут ездить без помощи водителя. Пожалуй, это первые беспилотные автомобили, доступны любому желающему. Tesla ориентируются в пространстве не только с помощью спутника, карты, GPS и других сенсоров.
Автомобиль постоянно анализирует ваш стиль вождения: как часто вы набираете скорость, жмете педаль тормоза, как двигаетесь по вашим ежедневным маршрутам. Эти данные собираются из всех автомобилей компании и после анализа возвращаются обратно. Вчера вы доверились автопилота Tesla, а на повороте он не сбросил скорость или вообще свернул не туда. Сегодня уже другого владельца автомобиль провезет по этому участку без ошибок.
Конечно, Tesla это только начало и скоро по всему миру будут ездить беспилотные Uber, Google и Яндекс такси. Если отвлечься от будущего, то кажется, что Большие данные совсем не влияют на нас и нашу жизнь. Однако, это совсем не так.
Например, создание карт для GPS-навигации идет с помощью Big Data. Тысячи снимков со спутника, анализ движения автомобилей, данные об авариях. Все это учитывается в любом современном приложения для навигации и маршрут будет построен на основе этих данных.
Новостные ленты в социальных сетях уже давно показывают посты не по дате публикации, а на основе того, что думает о наших преимуществах алгоритм мережи. Уже сегодня сложно найти хоть одну область нашей жизни, которая не подвержена большим данным. Любое наше действие так или иначе уже кем-то посчитано и повлияет на наши действия в будущем.

Заключение
Магазины все чаще будут предлагать товары, которые нам могут потребоваться, еще до того, как мы об этом подумаем. Врачи смогут заранее провести профилактические мероприятия от будущей болезни и предотвратить эпидемию.
ВКонтакте нам подскажет, кого выбрать в президенты в этом году, а рядом будет реклама холодильника, о котором мы мечтаем уже неделю. И все это Бег дата, которую не стоит бояться, и о которой следует знать. Она меняет бытия человека или с или без ее ведома. Кто-то не чувствует это влияние руководствуясь ощущением роста технологического прогресса, а кто-то понимает, что информационно-технический прогресс меняет нас.
Как показывает опыт европейских стран, таких государств как США и Канада, наиболее эффективные решения «больших данных» открывают новые перспективы для развития компаний в различных сферах: финансовой, в т.ч. банки и страховые компании; транспортной, логистической; топливно-энергетической; аграрной; в органах государственного управления. Организации, начали использовать технологию «больших данных» получают значительные конкурентные преимущества, ведь могут, как показывает опыт передовых компаний, принимать решения на основе современной, актуальной, полной информации.
Несмотря на различные секторальные и структурные основы национальных экономик развитых стран, включая различия в уровнях инновационной и вертикальной интеграции, широкое внедрение «больших данных» свидетельствует об осознании наступления устойчивой революции ИКТ и открытие новых возможностей для различных по потенциалу стран. Результаты экономических выгод можно разделить на следующие три широкие категории:
- повышение эффективности распределения и использования ресурсов благодаря построению бизнес-моделей, проведению маркетинговой деятельности, где «большие данные» являются основным источником информации;
- совершенствование продукта и процесса производства через инновации на основе научно-исследовательской деятельности, образованию обратной связи между потребителем и продавцом;
- совершенствования управления благодаря своевременным решением и большей осведомленности.
С момента появления, концепция «больших данных» проникла в различные информационно-технологической сферы и занимает все более важную роль на практике. Изучение и имплементация опыта внедрения новых информационных технологий и взаимосвязанных с ними концепций даст нашей стране возможность обеспечить положительные изменения конъюнктуры рынка путем более тщательного и глубокого понимания аспектов своего бизнеса, быстрого принятия решений, что приведет к улучшению производительности, усиление позиции в мире и больших инноваций.