Термины и определения
- ADB
Arenadata DB (ADB)- Аналитическая распределенная СУБД, построенная на основе Greenplum и предназначенная для хранения и обработки больших объемов данных.
- ADQM
Arenadata QuickMarts (ADQM) – Кластерная колоночная система управления базами данных, построенная на основе ClickHouse.
- ADG
Arenadata Grid (ADG) - Система распределенных вычислений в оперативной памяти, построенная на основе Tarantool.
- ADCM
Arenadata Cluster Manager (ADCM) — Универсальный оркестратор гибридного ландшафта. Позволяет быстро устанавливать, настраивать все data-сервисы компании Arenadata и управлять ими.
- Ansible
Программное решение для удаленного управления конфигурациями. Оно позволяет настраивать удаленные машины. Главное его отличие от других подобных систем в том, что Ansible использует уже существующую инфраструктуру ОС и не требует дополнительного ПО в удаленных машинах. Ansible позволяет настраивать удаленные машины и разворачивать компоненты комплексных услуг (например, Витрин данных) на виртуальных машинах.
- Ansible Playbook
Способ отправки команд Ansible на удалённые компьютеры с помощью скриптов. Позволяет настраивать целые сложные среды, передавая скрипт одной или нескольким системам.
- API
Application programming interface (англ.) – сервис взаимодействия компьютерной программы с другими программами.
- API endpoint
Эндпоинт API (Proxi API) - точка доступа к API приложения. Определяется URL, включающим в себя определенный порт. У одного приложения может быть несколько эндпоинтов. При использовании средств наложенной защиты в Proxi API в Datamart Platform Studio на доступ к эндпоинтам Proxi API могут быть наложены ролевые ограничения.
- CI/CD
Методология, построенная на комбинации непрерывной интеграции, доставки и тестирования кода при разработке приложений.
- Docker
Программное обеспечение для автоматизации развёртывания и управления приложениями в средах с поддержкой контейнеризации, контейнеризатор приложений.
- Docker Compose
Платформа контейнеризации, предназначена для конфигурирования многоконтейнерных приложений. В Docker Compose можно управлять несколькими контейнерами Docker.
- CSV
Comma-Separated Values (англ.) – значения, разделённые запятыми) — текстовый формат, предназначенный для представления табличных данных.
- DBeaver
Клиентское приложение для управления базами данных (БД), которое использует программный интерфейс JDBC для взаимодействия с реляционными БД через драйвер JDBC-драйвер.
- DDL
Data definition language (англ.) – семейство компьютерных языков, используемых в компьютерных программах для описания структуры баз данных.
- DNS
Domain Name System «система доменных имён» — компьютерная распределённая система для получения информации о доменах. Чаще всего используется для получения IP-адреса по имени хоста (компьютера или устройства), получения информации о маршрутизации почты и/или обслуживающих узлах для протоколов в домене.
- ETL
Extract, transform, load (англ.) – решение, используемое при выгрузке данных из различных источников ведомств и дальнейшего хранения их в Витрине данных для чтения, использования и взаимодействия с другими ведомствами.
- Gitea, Gitlab
Легковесные системы с открытым исходным кодом для управления репозиториями контроля версий ПО.
- Grafana
Веб-приложение для аналитики и интерактивной визуализации показателей мониторинга с открытым исходным кодом.
- HTTP
HyperText Transfer Protocol (англ.) – протокол прикладного уровня передачи данных, в настоящий момент используется для передачи произвольных данных.
- In-memory хранилища (СУБД)
Концепция хранения данных, в которой данные сохраняются в оперативной памяти приложения, а диск используется для бэкапа, что позволяет на несколько порядков быстрее оперировать данными в хранилищах. В классических подходах данные хранятся на диске.
- OpenAPI
The OpenAPI Specification (англ.) – формализованная спецификация и экосистема множества инструментов, предоставляющая интерфейс между front-end системами, кодом библиотек низкого уровня и коммерческими решениями в виде API.
- Prometheus
Программное приложение, используемое для мониторинга событий и оповещения, которое записывает метрики в реальном времени в базу данных временных рядов, построенную с использованием модели HTTP-запроса, с гибкими запросами и оповещениями в режиме реального времени.
- Resque
Ruby-библиотека для создания фоновых задач, составления очередей таких задач и их последующего выполнения. Имеет собственный интерфейс отображения и управления очередями.
- REST
Representational state transfer (англ.) – архитектурный стиль взаимодействия компонентов распределенного приложения в сети.
- Ruby
Основной язык программирования, на котором написано ПО Datamart Platform Studio.
- SLA
Показатель доступности сервиса или услуги. Измеряется в процентах.
- SQL
Structured query language (англ.) – язык структурированных запросов. Декларативный язык программирования, применяемый для создания, модификации и управления данными в реляционной базе данных, управляемой соответствующей системой управления базами данных.
- SQL-запрос
Запрос к Базе данных.
- SSH
Сетевой протокол прикладного уровня, позволяющий производить удалённое управление операционной системой и туннелирование TCP-соединений.
- Swagger
Свободно распространяемое ПО с открытым кодом для автоматической генерации документации по API.
- Tarantool
Платформа in-memory вычислений с гибкой схемой данных для создания высоконагруженных приложений. Включает в себя базу данных и сервер приложений на Lua.
- URI
Унифицированный идентификатор ресурса. URI — последовательность символов, идентифицирующая абстрактный или физический ресурс.
- URL
Подмножество URI, которое указывает, где находится ресурс, и механизм его получения.
- Vert.x
Библиотека для разработки асинхронных приложений, основанная на событиях.
- XML
eXtensibe Markup Language (англ.) – универсальный текстовый формат для хранения и передачи структурированных данных.
- YAML
Формат описания данных, концептуально близкий к языкам разметки, но ориентированный на удобство ввода-вывода типичных структур данных для многих языков программирования. Используется, как основной формат для файлов конфигурации.
- ZooKeeper
Сервер с открытым исходным кодом для высоконадежной распределенной координации облачных приложений.
- Адаптер
Приложение в витрине данных, осуществляющее взаимодействие витрины с внешними информационными системами.
- База данных (СУБД)
Совокупность данных, хранимых в соответствии со схемой данных, манипулирование которыми выполняют в соответствии с правилами средств моделирования данных.
- Бандл
Компонент, содержащий программные инструкции для выполнения различных операций с одним или более приложениями.
- Витрина данных
Комплекс программных и технических средств в составе информационно-телекоммуникационной инфраструктуры участника НСУД, предназначенный для формирования и (или) получения данных с использованием среды взаимодействия НСУД.
- Гипервизор (ГВ)
В терминологии Datamart Platform Studio термином «Гипервизор», сокращённо «ГВ», обозначается Платформа виртуализации.
- ГОСТ
Нормативно-правовой документ, в соответствии требованиями которого производится стандартизация производственных процессов
- Датацентр (ДЦ, ЦОД)
Логическое объединение группы серверов в интерфейсе Datamart Platform Studio.
- Инсталляция приложегния, Инсталляция
В терминологии Datamart Platform Studio инсталляцией обозначается логическая привязка приложения к определенному серверу в рамках услуги. Физическая установка приложения на сервер - это одно из допустиимых действий с инсталляцией приложеия.
- Интерфейсы приложений
Интерфейсы взаимодействия приложения с другими приложениями, определенные в сответствующих бандлах. Каждый интерфейс в Datamart Platform Studio имеет определенный порт, системное имя, формат и протокол.
- ИС
Информационная система.
- Кластер
В Datamart Platform Studio допускается объединение нескольких инсталляций одного приложения в рамках услуги в единый логический компонент – кластер. Инсталляции,собранные в кластер, управляются Datamart Platform Studio, как единая группа и к ним применяются групповые действия на уровне кластера.
- Коннектор
В терминологии ПО Datamart Studio «коннектор» представляет из себя один из компонентов ПО витрины данных, обеспечивающий взаимодействие (обмен данными) между ядром витрины, обрабатывающем запросы к витрине на уровне логических БД и физической СУБД, в которой хранятся данные.
- КриптоПро
Разработанная одноименной компанией линейка криптографических утилит (вспомогательных программ) — так называемых криптопровайдеров. Они используются в других программах для генерации электронной подписи (ЭП), работы с сертификатами, организации структуры PKI и т.д.
- Метаданные
Данные,которые несут информацию о типе, структуре, происхождении, свойствах, авторе, владельце, месте и времени создания и другие сведения об объекте. Метаданные раскрывают сведения о признаках и свойствах, характеризующих какие-либо сущности, позволяющие автоматически искать и управлять ими в больших информационных потоках.
- НСУД
Национальная система управления данными.
- Окружение
Логическое предназначение стенда, на котором разворачивается услуга. В текущей версии Datamart Platform Studio предполагаются следующие назначения окружения витрин данных: 1) окружение разработки (используется командой для нужд разработки) 2) тестовое окружение (услуги, предназначенные для тестирования) 3) стейджинг окружение (близкие к промышленным характеристик для целей тестирования) 4) продакшн окружение (услуга, функционирующая под реальной нагрузкой)
- Оркестратор
Тип ПО. Оркестраторы управляют жизненными циклами контейнеров приложений. Основные задачи, решаемые оркестратором: подготовка инфраструктуры и развертывание, конфигурация и планирование, распределение ресурсов, масштабирование контейнеров на основе рабочих нагрузок, балансировка нагрузки, мониторинг состояния ПО, Организация взаимодействия между различными компонентами систем.
- Оркестрация (Оркестровка)
Автоматическое размещение, координация и управление сложными компьютерными системами и службами.
- Платформа виртуализации
Специфическое ПО, позволяющее создавать и настраивать виртуальную инфраструктуру (ВМ, сети, дисковые хранилища), а также настраивать доступ к созданной инфраструктуре. В Datamart Platform Studio используется API различных Платформ виртуализации для создания и управления виртуальной инфраструктурой, требуемой для предоставления услуг.
- ПО
Программное обеспечение.
- Приложение
ПО, поставляемое в комплекте Datamart Platform Studio, разрешенное для установки на удаленные ВМ посредством Ansible Playbook, описанных в соответствующем приложению бандле. Каждое приложение услуги функционирует самостоятельно, взаимодействуя с другими приложениями посредством интерфейсов приложений.
- Программа
Программа оркестрации компонентов витрин данных Datamart Studio
- Репозиторий
Место, где хранятся и поддерживаются файлы, требуемые для установки и функционирования приложений, бандлы Datamart Platform Studio, а также другие артефакты, используемые для установки, мониторинга и функционирования услуг.
- Ресурсная группа (РГ)
Ресурсная группа (РГ гипервизора) - это выделенный пользователю лимит ресурсов и лимитов в рамках платформы виртуализации Базис.DinamiX.
- Сервер
В интерфейсе программы Datamart Platform Studio термин «сервер» используется для описания ВМ, K8s POD, физических серверов (bare metal), с которыми производится взаимодействие при помощи Ansible с целью установки и конфигурирования комплексного ПО услуг.
- Сценарий
Объект Datamart Platform Studio, представляющий собой последовательность шагов, совокупность которых выполняет определенный процесс автоматизации, выполняющийся по определенному действию в |prod|(хуку).
- Услуга
Услугой в теминалогии Datamart Platform Studio называется настройка комплекса ПО и необходимой для функционирования этого ПО программно-аппаратной инфраструктуры, позволяющая запустить в эксплуатацию требуемый пользователю комплекс ПО (витрины данных, комплекс СУБД, комлекс потоковой обработки данных и другие типы, которые могут быть произвольно определены пользователем Datamart Platform Studio).
- Участник НСУД
Федеральный орган исполнительной власти, иной орган государственной власти, государственный внебюджетный фонд, орган местного самоуправления, иное юридическое лицо, являющиеся стороной действующего соглашения о присоединении к Национальной системе управления данными.
- Хранилище репозиториев
Система управления репозиториями, к которой подключается Datamart Platform Studio.
- Шаг сценария
Структурный элемент сценария, представляющий собой исполняемый код, который выполняется на основании входящего контекста шага, и возвращает, в случае необходимости, исходящий контекст.