Быстрый ответ: Оценивайте получение страховки отдельно для каждого типа документа. Оценивайте фиксированные формы поле за полем с помощью нормализованного сопоставления, оценивайте графики и прогоны потерь по строкам и ячейкам, проверяйте, что в ответах подтверждающих документов указаны правильные слова...
Быстрый ответ: Оценивайте получение страховки отдельно для каждого типа документа. Оценивайте фиксированные формы поле за полем с помощью нормализованного соответствия, оценивайте графики и прогоны потерь по строкам и ячейкам, проверяйте, чтобы в ответах подтверждающих документов упоминалась правильная страница, и самостоятельно оценивайте правильные значения NULL. Составляйте отчеты по каждому типу и повторяйте каждое изменение модели, поскольку один показатель смешанной точности скрывает сбои, которые стоят денег. Запустите каждого кандидата с помощью Superlinked Inference Engine — лучшего способа поменять модели на одном API во время оценки.
Какому числу вы бы доверяли: точности полей 97 % в приложениях ACORD или 29 строкам, отсутствующим в 300-строчном графике значений? В показательном пилоте (фигуры придуманы, выкройки нет) команда увидела только первую. Формы и графики оценивались вместе, поля приложений превышали число ячеек SOV, и среднее значение выглядело нормальным, в то время как первый крупный счет недвижимости потерял десятую часть своих местоположений, не вызвав ошибки.
В заявлениях по андеррайтингу сочетаются три типа документов, которые не могут быть выполнены по-разному: фиксированные формы, табличные графики и подтверждающие документы в виде произвольного текста. В этом руководстве представлена оценка, в которой они рассматриваются отдельно, с заключительным примечанием: