2023:
Вычислительные ресурсы ЦИВК представлены вычислительными кластерами:
- Интерактивный кластер: lxpub [01-05].jinr.ru;
- Пользовательский интерфейc (шлюз для внешних подключений): lxui[01-04].jinr.ru;
- Вычислительная ферма.
Вычислительных узлов: 485;
Ядер: 10356;
Вычислительная мощность: 166788.4 HEP-SPEC06, 16.11 HEP-SPEC06 average per core.
Подробнее о кластерах ЦИВК здесь.
Мониторинг ресурсов ЛИТ:
тут (общий: Tier1,Tier2,Cloud,Govorun) и тут по Tier2.
Интерактивный кластер (lxpub.jinr.ru, lxui.jinr.ru) предназначен для повседневной работы, отладки программного обеспечения, выполнения заданий в пакетной системе. В интерактивном режиме пользователи могут запускать программы, непрерывное время работы которых не превышает 30 минут.
Вычислительная ферма предназначена как для локальных пользователей ЦИВК, так и для пользователей международных проектов. Запуск задач на счет, управление выполнением задачи и отправка результатов пользователю производятся средствами системы SLURM Для отладки задачи можно использовать интерактивный режим запуска .
Ресурсы Хранения ЦИВК
2023:
На сайте ЦИВК пользователи обеспечиваются следующими системами хранения данных и программного обеспечения:
- EOS: 2023Q4=23328.10 TB ; 2023Q3=22203.82 TB; 2023Q2=21829.01 TB; 2023Q1=16582.35 TB;
ALICE @ EOS Total: 1653.24 TB
- EOSCTA: 11.5 PB;
- dCache : (только для CMS, ATLAS ):
2023Q2: 3753.694341 TB ( CMS= 1903.269531TB; занято 422.708210 / свободно 1480.230266 ATLAS=1850.424810TB; занято 1087.250671 / свободно 715.476494)
Local & EGI @ dcache2 199.74 TB
2023Q4: 3933.47 TB ( CMS 1994.22TB + Atlas 1939.25 TB)
Local & EGI @ dcache2: 199.74
TB tape robot : 3003TB
- CVMFS: capacity is 140TB (2 squid servers cache CVMFS ) 1 сервер stratum-0, 2 сервера stratum-1, 4 сервера squid. VOs: NICA (MPD, B @ MN, SPD), dstau, er, jjnano, juno, baikalgvd….
- AFS: ~ 12.5 TB (user home directories, workspaces)
2023 : Удалены 8 старых дисковых серверов,
Добавлены 4 новых DELL R740 по 300 ТБ каждый.
SE disk имеет 4 servers; в EOS — 28.
В dCache добавили: 2 сервера(Qtech QSRV-462402_3) = 681.1 TB ,
в EOS : добавили 20 серверов (Qtech QSRV-462402_4)
Программное Обеспечение ЦИВК.
2023Q1
Базовой операционной системой практически всех компонентов ЦИВК является OC Linux — CentOS Scientific Linux или Ubuntu. Linux выбран и в качестве базовой ОС в проектах wLCG и UMD. Так как ЦИВК является также и элементом мировой вычислительной структуры грид wLCG, то на счетных машинах и многих серверах, а так же на интерактивных машинах установлено ПО промежуточного уровня интеграции ресурсов в грид UMD-4 :
ОС: Scientific Linux release 7.9
EOS 5.1.9 (constantly changing: 5.1.26 — 2023.08.01)
dCache 8.2
Enstore 6.3 for tape robots SPECall_cpp2006 with 32-bit binaries SPEC2006 version 1.1
BATCH: SLURM with adaptation to kerberos and AFS
ALICE VObox
grid UMD4 + EPEL (current versions)
cvmfs
openafs
ALICE VObox
VOMS
Cредства и утилиты поддержки работы пользователей:
графическая оболочка XFree86
поддержка «рабочего стола» Gnome и KDE
Компиляторы:
- gcc, g++ ,gfortran version 4.4.7
- f78, ifort , g77 version 3.4.6,
- fort77 (Выполняет f2c, а затем использует gcc или g++)
- gfortnan
- (f2c перекодировщик из FORTRAN в C )
- mpicc, mpif77 для параллельных вычислений
- ifort — invokes the Intel(R) Fortran Compiler (version 13.1.3)
- f2py Fortran to Python interface generator
Редакторы:
- emacs ( редактор (в X терминале) Очень многофукционален, но весьма сложен для неопытных пользователей.
- sed утилита для обработки текстовых файлов.
- vi текстовый редактор
- gawk GNU awk (используется для обработки форматированных текстовых файлов). Лучше вызывать просто awk
Oтладчики: ddd, gdbm jdb
Средства сборки: make,gmake,imake
Web-браузеры: Mozilla, Konqueror, Netscape
Утилиты работы с Интернет: lynx, pine, ssh, ftp и т.п.
Офисный пакет: LibreOffice
Базы данных: mysql, postgresq, db4, qt-mysql
Пакеты для работы с графическими изображениями: ImageMagic, grace и т.п.
eclipse интегрированная среда для построения интегрированных сред разработки (IDE). Используется для создания различных сквозных вычислительных решений для множества сред выполнения программ.
/usr/bin/ar программа архивации – создание, модификация, извлечение данных архива, в том числе и библиотек
/usr/bin/ranlib – печатает содержимое архива Список индесов хранится в этом же архиве.
/usr/bin/nm – печатает список символов в архиве
/usr/bin/ld – редактор связей создает выполняемый модуль
Языки программирования:
- perl скриптовый язык
- python высокоуровневый язык программирования общего назначения
- java объектно-ориентированный язык программирования
=================================