Просмотр логов для работы с источником

Для просмотра логов необходимо использовать OpenSearchDashboards.

Учетную запись и путь для подключения запросите у администратора.

Просмотр логов для добавления источника

После добавления источника в интерфейсе DLH система автоматически запускает импорт модели источника.

Проверить состояние запуска можно по логам в OpenSearchDashboards:

  • Успешность создания источника.

../_images/view_logs-create_source.png

  • Завершение импорта модели.

../_images/view_logs-import_model.png

  1. В интерфейсе DLH выберите нужные таблицы/атрибуты и сохраните изменения.

  2. Перейдите в БД DLH -> raw-data-catalogue.

  3. Пишите SQL запрос на создание индекса на таблицах, на которых будет импорт данных (рекомендуется для больших таблиц, НО только с Primary Key!).

    1CREATE INDEX CONCURRENTLY <index_name> ON raw_data_catalogue.<rdc_origin_schema>.<rdc_origin_table> (<origin_pk>);

Просмотр логов для загрузки csv-файла

  1. Добавьте источник.

  2. Система автоматически запустит импорт модели источника.

  3. Выберите нужные таблицы/атрибуты и сохраните изменения.

  4. Выбираем таблицу для которой будет загружен файл.

  5. Загрузите csv-файл, нажмите «Отправить» (Нажимать только 1 раз!).

  6. Система выдает уведомление, что файл успешно загружен.

  7. Далее рекомендуется проверить логи в «OpenSearch Dashboards».

  • Система успешно получила запрос на загрузку файла.

../_images/view_logs-csv_import.png

  • Система приступила к загрузке файла.

../_images/view_logs-csv_import_run.png

  • Система завершила загрузку файла.

../_images/view_logs-csv_import_end.png