Пользователям, которым нужно было работать с файлами большего объема – видео в форматах высокой четкости, научными и медицинскими данными, приходилось разбивать такие файлы на фрагменты для последовательной обработки. Теперь компания подняла допустимый объем до целых 5 терабайт. Разумеется, для работы с такими большими файлами клиентам потребуется соответствующая пропускная способность. Для облегчения загрузки больших объемов данных в AWS реализован новый интерфейс загрузки файлов по частям (Multipart Upload). С его помощью можно организовать, например, потоковую загрузку в систему данных секвенирования геномных последовательностей по мере их создания, сохраняя все данные в одном объекте, а затем анализировать этот объект на кластере машин Amazon EC2.

Все компоненты набора средств разработки для AWS, консоль управления S3 и функции импорта и экспорта данных в AWS теперь поддерживают работу с файлами объемом до 5 терабайт.

Поделитесь материалом с коллегами и друзьями