Разработка и философия SWARM Журналист: Константин, привет! Расскажи, пожалуйста, кратко о себе и о продукте, над которым ты работаешь. Константин: Привет. Я занимаюсь руководством отдела разработки распределенной системы хранения данных SWARM. Наш продукт — это РСХД, предназначенный для хранения больших объемов информации с оптимизированным, отказоустойчивым и распределенным доступом к ней. Основным для SWARM является объектный […]

Оптимизация пространства всегда была одной из важных задач в сфере информационных технологий. Свободного места не бывает много, поэтому, начиная с самых первых компьютеров, начали появляться методы сжатия информации. Они менялись, в зависимости от актуальности той или иной проблемы – сначала было важно максимально эффективно сжимать код и текстовую информацию, потом стало очевидно, что объемы текста […]

Дедупликация данных, часто называемая просто дедупликацией (deduplication), — это метод сжатия данных, предназначенный для устранения избыточных копий данных. Она широко используется в системах хранения данных (СХД) для уменьшения потребности в хранении, оптимизации пространства хранения и улучшения управления данными. Этот процесс особенно важен в современном мире, где организации генерируют и хранят огромное количество данных. В этой […]

Представлены результаты тестирования [1] энергонезависимой CXL DRAM в составе совместного решения Lenovo (experimental Lenovo x86 Server), Samsung (Samsung CXL Memory Expander) и VMware (experimental version vSphere ESXi) при организации архитектуры двухсокетных серверов с многоуровневой памятью.  Серверы Lenovo с поддержкой CXL должны быть доступны для заказа уже в ближайшей перспективе. Грегори Пруэтт (Gregory Pruett), главный инженер Lenovo […]

Введение Спецификация TP4146 (NVM Express® Flexible Data Placement – FDP, https://nvmexpress.org/wp–content/uploads/NVM–Express-2.0-Ratified–TPs_12122022.zip) была полностью согласована и одобрена еще в конце 2022 г., однако продвижение использования ее преимуществ уже в составе готовых решений началось лишь с июня 2023 г. Среди компаний, принимавших активное участие в ее разработке: Samsung, Meta, Google, KIOXIA, Micron, SK hynix / Solidigm, Microchip, […]

Введение DDN (DataDirect Networks, https://www.ddn.com/) — крупнейшая в мире частная компания по хранению данных, образованная в 1998 г. В 2022 г. оборот компании составил $352 млн. В портфеле DDN представлены все типы СХД: NAS, блочные, объектное хранилище, а также собственные кластерные файловые системы и системы управления данными. В последнее время DDN позиционирует себя как ведущий поставщик технологий и […]

Энергонезависимая память (PMEM/NVDIMM) Термином Persistent Memory (PMEM) охватывается большое семейство энергонезависимой памяти, куда входят продукты на базе технологий NVDIMM, SCM (storage class memory), NRAM, FRAM, ReRAM, MRAM, HPE Memristor и др. (рис. 1). Рис. 1. Сравнение технологий памяти [1]. PMEM — это энергонезависимая, побайтно-адресуемая память с низкой задержкой и плотностью, большей или равной динамической оперативной […]

Введение По данным Intel [3] память остается самой дорогостоящей компонентой серверов (рис. 1). На фоне экпоненциального увеличения числа ядер CPU и геометрического роста параметров AI-моделей (которые достигают сотен млрд и более), а также возрастающего спроса на обработку в реальном времени интерес к большему объему ОП будет оставаться еще длительное время. Рис. 1. Память остается самым […]

Введение В настоящее время большую часть решений на рынке в стадии предпродажной подготовки занимают т.н. модули расширения памяти (expansion memory module), которые представляют из себя пакет DIMM DRAM с контроллером CXL. Решения с NVDIMM-N и NVDIMM-P представляют лишь единичные образцы, а последние все еще находятся в стадии разработки. Предложения на на рынке для расширения памяти […]

Введение Omni-Path Architecture (OPA) — высокопроизводительная коммуникационная архитектура, принадлежащая Intel. Она ориентирована на низкую задержку связи, низкое энергопотребление и высокую пропускную способность. Intel планировала разработать технологию на основе этой архитектуры для экзафлопсных вычислений (https://en.wikipedia.org/wiki/Omni–Path). Производство продуктов Omni-Path началось в 2015 году, а поставки этих продуктов начались в первом квартале 2016 года. В ноябре 2015 года […]