Alpha.Community

В разделе Документация вы найдете все для уверенного старта и работы с Альфа платформой: от пошаговых инструкций по установке и конфигурированию до подробного описания работы компонентов и подсистем. Для поиска необходимых тем и вопросов в документации, воспользуйтесь поиском и фильтрацией результатов.

Базы данных 3x

Раздел находится в процессе разработки, его содержимое будет дополняться в следующих редакциях.

Хранение данных

Данные хранятся в фрагментах – файлах, содержащих данные за сутки. У каждого фрагмента определяется нижняя граница времени для фрагмента - начало суток по времени UTC.

После поступления в базу данных, данные последовательно проходят несколько стадий хранения:

  • в активной области
  • в архивной области

Активная область предназначена для группировки записей по временным рядам. Это необходимо для повышения эффективности сохранения данных на диске и их чтения.

Каждому источнику соответствует своя активная область. Длительность хранения фрагментов в активной области задаётся в настройках базы данных.

Фрагменты, нижняя граница которых оказывается левее предела времени хранения в активной области, переносятся в архивную область.

Фрагменты из всех активных областей переносятся в единую архивную область, при этом фрагменты из разных активных областей, имеющие одинаковую нижнюю границу времени сливаются в один файл фрагмента. Для уменьшения занимаемого места на диске, фрагменты в архивной области сжимаются с параметрами сжатия, указанными в настройках базы данных.

Данные в базе данных хранятся в закрытом бинарном формате. Сервер истории допускает лишь добавление новых записей. При этом механизм обновления ранее сохранённой истории, реализованный в Alpha.Imitator, не меняет существующие записи, а добавляет новые записи с пометками о модификации ранее сохранённых, формируя таким образом новый слой записей. Модификация выполняется автоматически при запросе данных. Записи с пометками о модификации создаются в импортированной области базы данных, после чего автоматически переносятся в архивную область в фоновом режиме. При переносе в архив, записи с пометками о модификации вставляются во временные ряды рядом с записями, которые они модифицируют.

Файловая структура базы данных

Сохранение записей в базу данных

Сервер истории, принимая порцию данных, сохраняет каждую запись в её временной ряд. Если временного ряда нет – создаёт его.

Запись может быть отфильтрована и не записана в историю в следующих случаях:

  • Если метка времени записи лежит левее нижней границы для всей базы данных, запись считается устаревшей и отбрасывается.
  • Если метка времени записи лежит левее нижней границы активной области, запись считается архивной и отбрасывается.
  • Если метка времени записи лежит левее метки времени последней записи во временном ряду, запись считается инверсной (нарушающей ход времени) и отбрасывается.
  • Если метка времени записи находится на час правее от текущего времени сервера истории, запись считается опережающей и отбрасывается.

    Опережающие записи отбрасываются для того, чтобы записи с меткой времени на день/месяц/год вперёд (например, из-за неполадки оборудования), не приводили к отбрасыванию всех последующих записей за этот период как инверсных.

Количество отфильтрованных записей отображается в статистике.

Сохраняемые данные записываются в соответствующие фрагменты активной области базы данных, если подходящего фрагмента нет, то он создаётся. В файл фрагмента попадают записи временных рядов по всем элементам, информация по которым хранится в истории.