Большие данные

Инициатива федерального правительства США «Большие данные: исследования и разработки» носит административный характер и полностью игнорирует личностный фактор. Что за этим стоит?

После пяти лет работы по созданию системного ПО для устройств хранения исследовательское подразделение корпорации EMC в России расширило поле своей деятельности на решение проблем обработки Больших Данных.

Проблема Больших Данных вызвана не столько большими объемами, сколько неспособностью традиционных методов справиться с потоками разнообразных данных, поступающих из огромного числа внешних и внутренних источников, имеющих различную структуру и схемы индексации. Для работы с Большими Данными требуются новые решения, например, такие как пакет SAS High-Performance Analytics.

Развитие ИТ-индустрии за ее относительно короткую историю определялось различными факторами, а сегодня индустрию двигает индивидуализация.

Проблема Больших Данных вечна и призрачна — на всем протяжении истории технологии управления данными всегда имелись данные, которые хотелось бы эффективно хранить и обрабатывать, но их объемы делали эту задачу непосильной для существующих СУБД. Однако иногда удается найти решение частных случаев проблемы Больших Данных — например, для категорий данных, управляемых традиционными СУБД.

Под влиянием роста объемов данных в бывшей совсем недавно стабильной области СУБД начались подвижки, выразившиеся, в частности, в появлении двух движений — NoSQL и NewSQL.

Выполненная по заказу ЦРУ, разработка компании Cleversafe может быть востребована в ряде сугубо гражданских приложений.

Символами первой промышленной революции были чугун и пар, второй — сталь и поточное производство, третьей — полимерные материалы, алюминий и электроника, а очередная революция пройдет под знаком композитных материалов и данных. Big Data —это ложный след или будущее индустрии?

Многочисленные исследования аналитиков и игроков ИТ-рынка свидетельствуют, что одна из главных нынешних проблем компаний и организаций — переизбыток информации, причем высказывается даже мнение, что человечество производит сейчас данных больше, чем может хранить. Что значит для общества проблема Больших Данных и какие пути ее решения предлагают сегодня субъекты индустрии ИТ?

Технические руководители крупнейших ИТ-компаний: Hitachi Data Systems, Teradata, EMC/Greenplum и Fujitsu рассказывают о своих взглядах на Большие Данные, облака и аналитику.

В течение последних лет корпорация IBM планомерно выстраивала на базе собственных и приобретенных технологий платформу управления информацией, охватывающую все средства, необходимые предприятиям для работы с данными, однако сейчас эта картина будет неполной без включения в цепочку поставки средств работы с Большими Данными.

Виртуализация значительно изменила ИТ, за исключением сегмента высоконагруженных приложений и серверов больших баз данных, где этот подход неэффективен. Однако сегодня и здесь наступает время революционных изменений, но совершенно иного плана.

Сегодня решение проблемы больших данных связывают с облаками и технологиями категории MapReduce, однако востребованы и традиционные подходы, основанные на распределенных файловых системах, надежно работающих с неограниченными объемами данных.

Понятие бесконечности часто встречается в вычислительных задачах, однако до сих пор не существовало методов непосредственного компьютерного манипулирования бесконечно большими и бесконечно малыми величинами. Профессор Нижегородского государственного университета им. Н. И. Лобачевского Ярослав Сергеев занимается именно разработкой методики использования бесконечных величин в вычислительной технике.

Едва ли можно представить бизнес-процесс или приложение, которые в той или иной форме не зависели бы от сервисов и устройств хранения файлов. За полвека рутинные средства управления файлами операционных систем.