Files
ipam_control/docs/changes/019-n-plus-one-queries/PLAN.md
T
ayurishchevandClaude Opus 5.5 13e17fbb47 Задачи 011-024: доработки по ревью кодовой базы и исправление находок
Ревью кодовой базы (docs/reviews/2026-09-26-codebase-review.md) и планы по каждой находке:
011 IP уникален в VRF и хранится в самом узком префиксе (addresses.vrf_id, составной FK
    с каскадом при переносе VRF, миграция 0007 с остановкой на дублях).
012 Ограничение попыток входа (login_attempts, 429 + Retry-After), выравнивание времени
    ответа, журнал без вытеснения анонимными событиями (миграция 0006).
013 Границы пагинации: отрицательные/чрезмерные limit/offset дают 422 вместо 500.
014 Экран адресов: страница свободных адресов арифметикой, пагинация в SQL.
015 Запрет адреса сети/broadcast, загрузка не выше 100 %.
016 Роль по умолчанию — viewer.
017 Проверка JWT_SECRET/ADMIN_PASSWORD при старте.
018 null в PATCH очищает текстовые поля; нейтральный текст конфликта БД.
019 Пакетная загрузка в списках вместо N+1.
020 Автоназначение адреса вне вложенных префиксов, с блокировкой префикса.
021 Advisory-lock при снятии прав администратора, уникальный lower(username) (миграция 0008).
022 Контейнер не от root, healthcheck, блокировка миграций, requirements.lock.
023 Экранирование LIKE, журнал отказов очистки, заголовки безопасности, учёт force-удаления,
    отзыв токенов при смене пароля (claim pv, миграция 0005).
024 Исправление находок ревью 011-023 (docs/reviews/2026-09-26-changes-011-023-review.md):
    сериализация попыток входа, запрет переноса адресов в адрес сети/broadcast, журнал входов,
    запрет смены своего пароля через PATCH, валидация PATCH устройства, обновлён тест токенов.

Тесты: 14 passed. Документация: README.md, docs/changes/011-024, docs/reviews.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
2026-09-26 21:33:50 +03:00

2.9 KiB

N+1 запросов в списках (изменение 019)

Находка ревью № 9, серьёзность — низкая (производительность).

Context

Счётчики и связанные данные догружаются отдельными запросами на каждую строку: _device_out (2 запроса на устройство — до 1 000 на странице), _isp_out (организация), _vrf_out, _type_out, _org_out (счётчики), «Обзор» (_prefix_outs для всех активных префиксов с _depths/_capacities по организациям).

Решение

  1. Пакетные выходные функции — принимают список строк и делают фиксированное число запросов:
    • устройства: один запрос адресов WHERE device_id IN (…) + словарь типов (типов мало — один SELECT всех);
    • операторы: selectinload(Isp.networks) + словарь организаций по IN;
    • VRF / типы / организации: счётчики одним GROUP BY по IN (…);
    • одиночные эндпоинты (GET /devices/{id} и т.п.) вызывают пакетную функцию со списком из одного элемента.
  2. Обзор: считать ёмкость и загрузку одним SQL-запросом по листовым активным IPv4-префиксам (лист — префикс без детей) вместо полной сборки PrefixOut по всем префиксам; top_prefixes — _prefix_outs только для 4 выбранных.
  3. Формат ответов не меняется.
  4. Контроль: в тестовом режиме — счётчик запросов через событие before_cursor_execute (фикстура), чтобы зафиксировать «не больше K запросов на список».

Файлы

app/api/v1/refs.py, app/api/v1/overview.py, app/api/v1/prefixes.py (при необходимости), tests/test_api.py.

Тест

Один тест уровня функций (сессия SQLAlchemy к БД стенда, счётчик через before_cursor_execute): пакетный вывод 20 устройств — не больше 3 запросов. Внешние API-тесты счётчик не видят, поэтому тест вызывает функции напрямую.

Проверка

pytest -q; сравнение ответов API до/после на демо-данных (скрипт диффа JSON в scratchpad) — идентичны; замер времени GET /devices?limit=500 на синтетических данных.