Silicon Taiga: Новое хранилище данных компании IBM на 120 петабайт

В настоящее время специалисты компании IBM занимаются разработкой и сооружением самого большого в мире хранилища информации емкостью 120 петабайт, которое, в конечном счете, будет состоять более чем из 200 тысяч жестких дисков. Согласно представителю компании IBM Брюсу Хиллсбергу (Bruce Hillsberg) в этот гигантский контейнер сможет хранить около одного триллиона файлов данных, именно такие количества файлов с данными требуются во время проведения расчетов сложных математических моделей, таких как метеорологические модели и моделирование изменений климата в масштабах всей планеты.

120-петабайтный "жесткий диск" сможет хранить 24 миллиарда MP3-файлов, со средним размером в 5 мегабайт, или 60 резервных копий всего Интернета (150 миллиардов веб-страниц), сделанных с помощью сервиса Internet WayBack Machine. И хотя данный проект хранилища выполняется под конкретного заказчика, все технологии и решения, разработанные компанией IBM, будут использоваться в дальнейшем для создания коммерческих систем подобного типа.

"Я уверен, что подобные системы, являющиеся в настоящее время чем-то экстремальным, через несколько лет будут повсеместно использоваться в системах облачных вычислений, которые приобретают все большую и большую популярность" - рассказывает Хиллсберг в интервью издательству MIT Technology Review. Тем временем, Стив Конвей (Steve Conway) из известной компании IDC подтвердил, что новое хранилище информации компании IBM является самым емким хранилищем в мире. "Хранилище, емкостью в 120 петабайт, является самым большим хранилищем, о котором я когда-либо слышал" - рассказывает Конвей. - "Все самые распространенные на сегодняшний день подобные хранилища информации имеют емкость приблизительно в 15 петабайт".

Естественно, создание такого объемного хранилища информации используется специалистами компании IBM как своеобразный полигон для отработки существующих и создания новых технологий хранения данных. Это использование водяной системы охлаждения вместо воздушной, организация RAID-массивов нового поколения, использование которых позволит суперкомпьютеру продолжить работу в нормальном режиме даже при одновременном выходе из строя большого количества жестких дисков. Но самой "вкусностью" нового хранилища станет файловая система GPFS (General Parallel File System), претерпевшая значительные изменения и модификации, которая обеспечивает высокоэффективный множественный доступ к файлам, хранящимся на разных дисках.