Legora тестирует юридического ИИ-агента, не видя его работы
Команда из трёх инженеров и трёх юристов создаёт тестовые среды по образцу клиентских задач, поскольку разработчики не могут читать записи работы агента.
Legora не может читать записи работы своего ИИ-агента у юристов: данные принадлежат клиентам юридических фирм, объяснил технический директор Якоб Лауритцен в интервью Latent Space.
Детали: Сервис помогает юристам составлять и редактировать документы в Word, проверять договоры и проводить комплексную проверку перед сделками. Один из его инструментов позволяет разбирать 10 000 договоров в одной таблице.
Как это работает: Вместо проверки по записям реальной работы команда создаёт тестовые среды, воспроизводящие задачи клиентов. Этим занимаются три инженера и три юриста.
Роль моделей: Лауритцен рассказал, что после одного обновления модель стала реже ошибаться при указании источников. Самой Legora для этого ничего менять не пришлось.
Инфраструктура: Конфиденциальность определила и выбор облака: по словам Лауритцена, Legora размещает всю систему в Microsoft Azure.