pnthrleo / big-data-2023-part2

Взаимодействие с источниками данных

Цель работы

Целью данной работы является получение навыков выгрузки исходных данных и отправки результатов модели с использованием различных источников данных согласно варианту задания.

Выполнение работы

1. Был создан форк репозитория, созданного в рамках первой лабараторной, на GitHub, в который регулярно проводились commit'ы и push'ы в ветку разработки.
2. Былр реализовано взаимодействие сервиса модели с базой данных Cassandra.
3. Были обеспечены процессы аутентификации/авторизации при обращении сервиса модели к базе данных в момент отправки результата работы модели. В исходном коде отсутствуют в явном виде пары логин/пароль, адрес/порт сервера базы данных, токены доступа.
4. База данных автоматически наполняется данными для обучения, валидации и тестирования.
5. Код был покрыт юнит-тестами и функциональными тестами при помощи pytest.
6. Была произведена модификация CI/CD пайплайнов для дополнительного развёртывания базы данных Cassandra и учёта изменений в исходном коде сервиса модели.

Результаты юнит-тестирования

Результаты функционального тестирования

Скрипт конфигурации CI

Скрипт конфигурации CD