Большие данные

Билл Маккормик, менеджер по продуктам компании InterSystems, дал интервью компании «Открытые системы», организатору ежегодного форума Big Data — самого представительного российского форума, посвященного эффективному использованию Больших Данных.

Все больше информации об абонентах собирается через инфраструктуру сотовой связи и датчики, встроенные в смартфоны. Эта информация ценна с точки зрения маркетинга и потенциально может приносить пользу обществу, однако вся она — сугубо личного характера, что обостряет споры вокруг сохранения приватности.

Тема январского номера журнала Computer (IEEE Computer Society, Vol. 47, No. 1, 2014) — перспективы.

В ЦЕРНе создана развитая информационная инфраструктура для хранения и обработки огромных объемов экспериментальных данных.

Государства накапливают массу персональных данных о гражданах, например через переписи. Все чаще, однако, мы видим злоупотребления. Кто несет ответственность, когда правила использования данных нарушаются? Как культура или политика может влиять на жизненный цикл персональных данных?

По мере того как все больше организаций запоздало пытаются обратить себе на пользу технологии больших данных, растет спрос на ИТ-профессионалов, способных собрать, классифицировать, анализировать и создавать архитектуры, объединяющие различные источники данных.

Компания Extreme Networks представила систему Purview для аналитики Больших Данных на базе ASIC, которая комбинирует сетевые данные и данные приложений, упрощая управление крупными сетями и развертывание облачных сред.

Большие Данные меняют жизнь общества — все больше государств, компаний и отдельных людей устремляются на поиски сокровищ в виде плодотворных идей, фактов или тенденций, ранее скрытых в ворохе больших массивов разнообразных данных. Однако данные раскрывают свои секреты лишь тем, кто готов «слушать» и вооружен необходимыми инструментами, позволяющими обнаружить неочевидные корреляции и охватить все имеющиеся массивы.

Группа исследователей из Массачусетского технологического института готовит к демонстрации сетевую систему хранения Больших Данных на флэш-памяти, обещающую более высокую скорость произвольного доступа, чем традиционные на основе жестких дисков, соединенных сетью Ethernet.

IBM представила серверы X6 – шестое поколение корпоративной архитектуры X-Architecture.

Oracle Big Data Appliance X4-2 и Oracle Exadata Database Machine предлагают полную платформу для работы с Большими данными.

Согласно опросу EMC, треть респондентов утверждают, что их компании уже получили конкурентные преимущества за счет внедрения технологий Больших Данных, и лишь 25% участвовавших в нем компаний не планируют их применения.

Облака и компьютерные системы, служащие для обработки больших объемов данных, могут стать альтернативными путями развития HPC.

Компания SGI приобрела разработчика средств виртуализации систем хранения Больших Данных FileTek.

Долгое время понятие «грид» означало либо добровольное объединение вычислительных ресурсов, либо среду выполнения научных расчетов, но сегодня стало ясно, что объединение в единую распределенную инфраструктуру ресурсов памяти серверов, входящих в кластер, позволяет ускорить работу в режиме реального времени со структурами памяти больших объемов.

Большие Данные могут иметь самое разное происхождение, однако в любом случае извлечение знаний из них сопряжено с определенными трудностями. В решении этой задачи может помочь парадигма социальной сети -- в качестве инструмента анализа Больших Данных могут cлужить персональные децентрализованные облака, состоящие из социально связанных индивидуумов.

Тема июньского номера журнала Computer (IEEE Computer Society, Vol. 46, No. 6, 2013) — новые возможности и проблемы Больших Данных.

Потребность хранить, обрабатывать и анализировать большие объемы данных заставляет предприятия массово внедрять облачные технологии. Понимание движущих экономических факторов играет ключевую роль при разработке облачных сервисов следующего поколения.

Big Data дожили до своего «деревянного» юбилея — возраст пять лет достаточен для переосмысления прошедшего и построения перспективных планов.

Aдаптация процессоров под задачи позволит значительно быстрее обрабатывать и анализировать данные.