Сравнить коммиты
6 Коммитов
7bb2455d4c
...
lab_3/mast
| Автор | SHA1 | Дата | |
|---|---|---|---|
|
e43c47dae6
|
|||
|
cddf0e0b65
|
|||
|
d417fa1d5d
|
|||
|
8d7d2d5d7a
|
|||
|
00f85d5d3c
|
|||
|
cbed2cf894
|
20
README.md
20
README.md
@@ -8,9 +8,15 @@
|
|||||||
](https://www.kaggle.com/datasets/vijayaadithyanvg/car-price-predictionused-cars/data) —
|
](https://www.kaggle.com/datasets/vijayaadithyanvg/car-price-predictionused-cars/data) —
|
||||||
продажа подержанных автомобилей на рынке в Индии.
|
продажа подержанных автомобилей на рынке в Индии.
|
||||||
|
|
||||||
## Установка
|
## Сервис предсказания цен
|
||||||
|
|
||||||
### Общий порядок
|
См. `services/ml_service/README.md`.
|
||||||
|
|
||||||
|
## Исследовательская часть проекта
|
||||||
|
|
||||||
|
### Установка
|
||||||
|
|
||||||
|
#### Общий порядок
|
||||||
|
|
||||||
**Внимание**: Здесь описан только общий порядок установки. Определённые части проекта могут требовать установки по отдельным инструкциям.
|
**Внимание**: Здесь описан только общий порядок установки. Определённые части проекта могут требовать установки по отдельным инструкциям.
|
||||||
|
|
||||||
@@ -47,13 +53,13 @@
|
|||||||
|
|
||||||
5. **При необходимости** скачайте данные. Каноническое расположение для данных проекта: `data/`.
|
5. **При необходимости** скачайте данные. Каноническое расположение для данных проекта: `data/`.
|
||||||
|
|
||||||
### Зависимости
|
#### Зависимости
|
||||||
|
|
||||||
#### Общие зависимости
|
##### Общие зависимости
|
||||||
|
|
||||||
Зависимости — пакеты Python — записаны в файле `requirements/requirements.txt` (см. **Пакеты Python**).
|
Зависимости — пакеты Python — записаны в файле `requirements/requirements.txt` (см. **Пакеты Python**).
|
||||||
|
|
||||||
#### Пакеты Python
|
##### Пакеты Python
|
||||||
|
|
||||||
Установка/обновление пакетов Python в активное окружение из файла `requirements/requirements.txt`:
|
Установка/обновление пакетов Python в активное окружение из файла `requirements/requirements.txt`:
|
||||||
|
|
||||||
@@ -61,10 +67,10 @@
|
|||||||
pip install -U -r requirements/requirements.txt
|
pip install -U -r requirements/requirements.txt
|
||||||
```
|
```
|
||||||
|
|
||||||
## Разведочный анализ данных (EDA)
|
### Разведочный анализ данных (EDA)
|
||||||
|
|
||||||
См. `eda/README.md`.
|
См. `eda/README.md`.
|
||||||
|
|
||||||
## Исследование и настройка предсказательной модели
|
### Исследование и настройка предсказательной модели
|
||||||
|
|
||||||
См. `research/README.md`.
|
См. `research/README.md`.
|
||||||
|
|||||||
@@ -6,7 +6,7 @@ $DEFAULT_ARTIFACT_ROOT = "./mlflow/mlartifacts/"
|
|||||||
|
|
||||||
$MLFLOW_PORT = if ($env:MLFLOW_PORT) { $env:MLFLOW_PORT } else { 5000 }
|
$MLFLOW_PORT = if ($env:MLFLOW_PORT) { $env:MLFLOW_PORT } else { 5000 }
|
||||||
|
|
||||||
New-Item -ItemType Directory -Force -Path $DEFAULT_ARTIFACTS_ROOT | Out-Null
|
New-Item -ItemType Directory -Force -Path $DEFAULT_ARTIFACT_ROOT | Out-Null
|
||||||
|
|
||||||
& mlflow server `
|
& mlflow server `
|
||||||
--backend-store-uri="$BACKEND_URI" `
|
--backend-store-uri="$BACKEND_URI" `
|
||||||
|
|||||||
@@ -1,10 +1,11 @@
|
|||||||
FROM python:3.11-slim
|
FROM python:3.11-slim
|
||||||
|
|
||||||
WORKDIR /
|
WORKDIR /service
|
||||||
|
|
||||||
COPY . /service
|
COPY ./requirements.txt .
|
||||||
|
RUN pip install --no-cache-dir -r requirements.txt
|
||||||
|
|
||||||
RUN pip install --no-cache-dir -r /service/requirements.txt
|
COPY . .
|
||||||
|
|
||||||
VOLUME /models
|
VOLUME /models
|
||||||
|
|
||||||
@@ -12,9 +13,7 @@ EXPOSE 8000/tcp
|
|||||||
|
|
||||||
ENV MODELS_PATH=/models
|
ENV MODELS_PATH=/models
|
||||||
|
|
||||||
WORKDIR /service
|
|
||||||
|
|
||||||
CMD ["uvicorn", "app:app", "--host", "0.0.0.0", "--port", "8000"]
|
CMD ["uvicorn", "app:app", "--host", "0.0.0.0", "--port", "8000"]
|
||||||
|
|
||||||
# docker build -t ml_service services/ml_service/
|
# docker build -t ml_service:1 services/ml_service/
|
||||||
# docker run -v "$(pwd)/services/models:/models" -p 8000:8000 ml_service
|
# docker run -v "$(pwd)/services/models:/models" -p 8000:8000 ml_service:1
|
||||||
|
|||||||
71
services/ml_service/README.md
Обычный файл
71
services/ml_service/README.md
Обычный файл
@@ -0,0 +1,71 @@
|
|||||||
|
# Сервис предсказания цен
|
||||||
|
|
||||||
|
Веб-сервис предсказания цен на подержанные автомобили; только stateless API. Об используемой предсказательной модели см. `research/README.md`.
|
||||||
|
|
||||||
|
## API
|
||||||
|
|
||||||
|
**Базовый URL**: `/api`. Все указанные далее URL записаны **относительно базового URL**, если не указано иное.
|
||||||
|
|
||||||
|
* Полная интерактивная документация (Swagger UI): `/docs`.
|
||||||
|
|
||||||
|
* Предсказать цену подержанного автомобиля: `/predict`.
|
||||||
|
|
||||||
|
Пример запроса:
|
||||||
|
|
||||||
|
* requst query: `item_id=16` (параметр `item_id` необходим!);
|
||||||
|
|
||||||
|
* request body:
|
||||||
|
|
||||||
|
```json
|
||||||
|
{
|
||||||
|
"selling_price": 5.59,
|
||||||
|
"driven_kms": 27000.0,
|
||||||
|
"age": 5.0,
|
||||||
|
"fuel_type": "petrol",
|
||||||
|
"selling_type": "dealer",
|
||||||
|
"transmission_type": "manual"
|
||||||
|
}
|
||||||
|
```
|
||||||
|
|
||||||
|
* response body:
|
||||||
|
|
||||||
|
```json
|
||||||
|
{
|
||||||
|
"item_id": 16,
|
||||||
|
"price": 3.743508852258851
|
||||||
|
}
|
||||||
|
```
|
||||||
|
|
||||||
|
* Тестовый эндпоинт: `/`
|
||||||
|
|
||||||
|
Возвращает простой демонстрационный объект JSON.
|
||||||
|
|
||||||
|
Может использоваться для проверки состояния сервиса.
|
||||||
|
|
||||||
|
## Развёртывание
|
||||||
|
|
||||||
|
### Файл модели
|
||||||
|
|
||||||
|
Файл используемой предсказательной модели `model.pkl` можно извлечь из MLFlow скриптом `services/models/fetch_model_as_pickle_from_mlflow.py`. Файл модели можно разместить в директории проекта, а именно в `services/models/`.
|
||||||
|
|
||||||
|
Например, извлечь модель по имени (`<model-name>`) и версии (`<model-version>`) (например, `UsedCardPricePredictionFinal/1`) (команда запускается из корневой директории проекта — от этого зависит путь к создаваемому файлу):
|
||||||
|
|
||||||
|
python services/models/fetch_model_as_pickle_from_mlflow.py --model "models:/<model-name>/<model-version>" services/models/model.pkl
|
||||||
|
|
||||||
|
Можно указать адрес tracking сервера MLFlow, например: `--tracking-uri "http://localhost:5000"`.
|
||||||
|
|
||||||
|
Информация о других опциях доступна:
|
||||||
|
|
||||||
|
python services/models/fetch_model_as_pickle_from_mlflow.py --help
|
||||||
|
|
||||||
|
### Образ Docker
|
||||||
|
|
||||||
|
Сборка образа (замените `<version>` на номер версии) (команда запускается из корневой директории проекта — от этого зависит путь к директории):
|
||||||
|
|
||||||
|
docker build -t ml_service:<version> services/ml_service/
|
||||||
|
|
||||||
|
Запуск образа (замените `<version>` на номер версии образа, `<models-dir>` на **абсолютный** путь к директории, где размещён файл предсказательной модели `model.pkl`, `<port>` на порт для запуска веб-сервиса (например, `8000`)):
|
||||||
|
|
||||||
|
docker run -v "<models-dir>:/models" -p <port>:8000 ml_service:<version>
|
||||||
|
|
||||||
|
Модель может быть размещена в директории проекта; тогда, например, при запуске команды из корна проекта: `$(pwd)/services/models` (здесь `$(pwd)` используется потому, что необходим абсолютный путь).
|
||||||
Ссылка в новой задаче
Block a user