GPFS-SNC – новая вычислительная архитектура IBM

На конференции Supercomputing 2010 корпорация IBM представила новую архитектуру хранения данных General Parallel File System-Shared Nothing Cluster (GPFS-SNC), которая позволит преобразовывать терабайты "чистой" информации в применимые на практике знания в два раза быстрее, чем это было возможно ранее. Анонсированная разработка IBM одержала победу в конкурсе Storage Challenge ("Проблема хранения данных").

Новая архитектура, созданная в исследовательском центре IBM Research-Almaden, основана на принципе "shared nothing", "никаких общих ресурсов": узлы в составе кластера не имеют одновременного доступа к одним и тем же данным, а каждый из них работает со своим отдельным разделом базы данных. Это позволяет достичь новых уровней готовности, производительности и масштабируемости.

GPFS-SNC представляет собой распределенную вычислительную архитектуру, в которой каждый узел является самостоятельным объектом. Рабочие задачи распределяются между этими независимыми объектами-компьютерами, и ни один из них в процессе работы (и обращения к данным) не тратит время на ожидание другого.

GPFS является ключевой технологией для таких решений как IBM High Performance Computing Systems, IBM Information Archive, IBM Scale-Out NAS (SONAS) и IBM Smart Business Compute Cloud. Новая архитектура может сделать более эффективным выполнение сложных аналитических задач, поскольку предоставляет единую файловую систему и пространство имен (namespace) для всех разнородных вычислительных платформ, оптимизируя процесс и экономя дисковую память.

"Компании буквально наталкиваются на непреодолимое препятствие, будучи не в состоянии справиться с огромными объемами ежедневно генерируемых данных, — отметил Прасенджит Саркар (Prasenjit Sarkar), ведущий изобретатель по направлению Storage Analytics and Resiliency в исследовательском центре IBM Research-Almaden. — Мы постоянно исследуем и разрабатываем наиболее передовые в отрасли технологии хранения информации с целью решения проблемы "больших данных". Этот новый метод разбиения памяти хранения данных на логические разделы (storage partitioning) является важным шагом на этом пути, поскольку он ускоряет для компаний процесс "получения знаний из данных" (time-to-insight), позволяя не беспокоиться о традиционных ограничениях системы хранения".