Структура вычислительно комплекса ЦИВК 2019

2019:

Вычислительный комплекс ЦИВК  логически состоит из следующих компонентов :

Кластеры.

интерактивный (lxpub[01-05].jinr.ru) :  пять  64-х битных машин

вычислительный :  248 машин, 4128 cores,  55.489 kHS06, который влючает  вычислительные фермы :

— общего назначения;

— для экспериментов  LHC;

— параллельных вычислений;

— кластер для NICA,MPD, BM@N;

Введена в эксплуатацию подсистема CVMFS  которая служит для развертывания больших пакетов программного обеспечения коллабораций работающих в WLCG.  B настоящее время  у нас уже хранятся версии ПО  NICA, BM@N, MPD  (/cvmfs/nica, /cvmfs/…)  и  занимают   9.5 ГБ .

Cерверы дискового пространства.

— dCache 2789 TB(ATLAS,CMS) + 147TB(локальные пользователи); 

— EOS         4PB ;

— CVMFS    9.5 ГБ;

— xrootd    40GB  ;

— AFS      ~12.5 TB  (домашние каталоги пользователей, рабочие пространства ) .

— NFS       ~ 11 TB ; 5 NFS servers 

Bспомогательные серверы .

  • e-mail
  • home WWW pages
  • databases MySQL , Postgres,  Oracle
  • DNS
  • мониторинг Nagios
  • ftp
  • ….

Эти сервисы в основном работают “прозрачно” с точки зрения пользователя, то есть, не требуя дополнительных настроек. Часть этих серверов (WWW, ftp, MySQL), обеспечивает поддержку лабораторных (ЛИТ) и институтских сервисов. Часть (mail) предназначена в основном для обслуживания нужд пользователей ОИЯИ .

WLCG.

Для обслуживания сайта WLCG в ОИЯИ (сайт — отдельный кластер в распределенной среде WLCG) и других международных коллабораций, установлено 22 сервера с системой gLite (ПО промежуточного уровня WLCG). Кроме функций поддержки работы самого сайта JINR-LCG2, часть серверов реализуют важные сервисы и функции поддержки Российского сегмента проекта WLCG.

На JINR Tier2 добавлены виртуальные организации:
ILC (WLCG http://www.linearcollider.org/) ,

MPD (JINR NICA),

BM@N (JINR NICA) ,

COMPASS (WLCG CERN).

Для виртуальной организации JUNO на Tier2 будет установлено и настроено несколько сервисов:

CE JUNO — будет разрешено запускать задачи в ферме JINR/Tier2
VOMS сервер, зеркало основного VOMS в Китае;
CVMSF stratum-1 сервер, для поддержки, доступ к репозиториям ПО JUNO в Китае.

 

Сеть и телекоммуникация.

В настоящее время в ЦИВК :

Local Area Nertwork (LAN100Gbps

Wide Area Network (WAN)   100Gbps, 2x10Gbps ,

запланировано обновление :

LAN  2×100 Gbps.

WAN  3x100 Gbps.

Новости  :

В мае 2019 Запущен канал 100Gbps в LHCOPN,  который отлично работает. С остальными внешними каналами работа значительно улучшилась.

 

Структура Вычислительного кластера ЦИВК 2018