Националната лаборатория „Брукхейвън“ в САЩ вече е натрупала 6 пъти повече данни от цялата писмена история на човечеството

Центърът за научни данни и изчисления (SDCC) към Националната лаборатория „Брукхейвън“ (BNL) към Министерството на енергетиката на САЩ се похвали, че вече разполага с повече от 300 петабайта данни в своите съоръжения за съхранение. Според Datacenter Dynamics това е третото по големина хранилище за научни данни в САЩ и най-големият архив на лентови устройства в САЩ.

Съхраняваните данни са свързани с експерименти в областта на ядрената физика и физиката на елементарните частици. В прессъобщение на лабораторията Брукхейвън служителите на SDCC казват, че архивът съдържа 6 пъти повече данни от цялата писмена история на човечеството, като се започне от санскритските източници.

По-специално, архивът съдържа данни от експерименти в Релативисткия колайдер на тежки йони (RHIC) на Министерството на енергетиката на САЩ, който работи в лабораторията Брукхейвън от 2000 година и данни от експеримента ATLAS в Големия адронен колайдер (LHC).

Цялата информация е достъпна онлайн и при поискване. Информацията се съхранява във високотехнологична роботизирана лентова библиотека.

Лабораторията вече е разработила собствен софтуер и уебсайт за наблюдение на трансфера на данни, а структурата работи и с други лаборатории на DOE и IBM за разработване на система за управление на информацията – High-Performance Storage System (HPSS). Последната гарантира, че различните системи за съхранение (от ленти до дискове) могат да се използват ефективно в различни комбинации. Разработен е и софтуерът, използван от физиците за достъп до информацията на SDCC.

Служителите на SDCC съобщават, че лабораторията има полза от хибридното съхранение. Данните се съхраняват основно на ленти и се прехвърлят на дискове само при необходимост, което намалява разходите за експлоатация и прави съхранението по-екологично. Например, дисковете изискват охлаждане и захранване, докато лентите просто лежат в библиотеките извън периода на експлоатация. Самите лентови библиотеки се помещават в специални зали с оптимизирано потребление на енергия и охлаждане.

Налице е и свободен капацитет за нарастващия „кеш“ от данни, събрани от лабораториите. В рамките на експеримента sPHENIX учените възнамеряват да генерират около 565 петабайта данни, които се записват едновременно на дискове и ленти. През следващата година RHIC ще бъде заменен от EIC, който се очаква да генерира 220 петабайта данни на година.

Отбелязва се, че капацитетът на лентовото съхранение обикновено се удвоява на всеки 4-5 години и става все по-компактен. Чрез периодичното прехвърляне на данни от стари на нови носители специалистите освобождават много място в библиотеката. Сега потенциалният капацитет на библиотеките на Лабораторията е около 1,5 екзабайта, но учените се надяват, че с времето ще го увеличат до 3 екзабайта. Забележително е, че търсенето на лентови касети само нараства. През 2023 година доставките достигнаха рекордно високо ниво от 153 екзабайта.