Квалитет
Дали одговорите ги цитираа вистинските извори?
Retrieval резултати врз твојот сопствен корпус, земени од вистински пилот упити. Споредба со baseline на eval сет што го градиме со тебе во 1. недела.
Пилот програма
Пилотот е вистинскиот формат за „проба на Archivez врз твојот сопствен корпус“. Лесна обврска, ограничено на еден клиент, завршува со пишан извештај за употреба и одлука за продукциско воведување.
Временска рамка
1. недела
Клиентот е подигнат на staging или продукција. Админ корисниците се поканети преку мејл линк. Иницијален bulk-upload на твојот примерок документи.
2. недела
Документите завршуваат со индексирање (истиот ден за под 1.000 фајлови). Пилот корисниците ги поврзуваат своите сандачиња. Следените контакти се дефинираат по корисник.
3–6. недела
Пилот корисниците поставуваат прашања, пријавуваат лоши одговори. Feedback петелка за квалитетот на пребарувањето, точноста на цитатите, мобилниот UX. Неделен 30-мин check-in.
7–8. недела
Извештај за употреба — број на упити, најцитирани документи, eval-set резултати врз твојот корпус. Цена за продукциско воведување.
Обем
Критериуми за одлука
На крајот на пилотот споделуваме извештај за употреба. Одговара на четири прашања на кои твојот тим треба да добие одговор пред да плати за продукција:
Квалитет
Retrieval резултати врз твојот сопствен корпус, земени од вистински пилот упити. Споредба со baseline на eval сет што го градиме со тебе во 1. недела.
Употреба
Број на упити по корисник, најцитирани документи, задржување од недела на недела. Ако употребата опадне во 4. недела, пилотот одговара зошто пред да пристигне 8. недела.
Трошок
Проектирана месечна AI потрошувачка при твојата вистинска стапка на упити, со препорачана cost cap по клиент калибрирана според твојот образец на употреба.
Триесетминутен уводен разговор е доволен за да одлучиш дали пилотот има смисла. Донеси пример од видот прашање на кое би сакал твоите документи да одговорат.