Как я оцениваю OCR и нахожу ошибки в работе моделей

155 подписчиков

12+
12+

2 дня назад

ПожаловатьсяНарушение авторских прав

155 подписчиков

12+
12+

2 дня назад

ПожаловатьсяНарушение авторских прав
12+
12+

2 дня назад

Присоединяйтесь к предстоящему курсу: https://isaacflath.com/pdf2production Неправильный результат распознавания текста часто приводит к трудноотлаживаемым ошибкам в программном обеспечении или агентах. Я подробно описываю процесс, который использую для оценки моделей и агентов распознавания текста, отвечающих на вопросы по PDF-файлам. Мы сравниваем исходный текст с извлеченным, аннотируем конкретные ошибки, проверяем цитаты и трассировки, а также создаем тесты для выявления первопричины. Примеры включают таблицы для проверки качества продуктов питания, отсутствующие водяные знаки и одну неправильно считанную цифру в таблице, вызывающую серьезные ошибки. Я также показываю, как я постепенно создавал инструменты аннотирования, исходя из того, что мне действительно нужно было сделать. Больше примеров документов и руководств: https://isaacflath.com/subscribe Как выбрать модель OCR: https://isaacflath.com/writing/how-to-choose-an-ocr-model 00:00 Мой рабочий процесс оценки OCR 01:04 Безобидные различия и фактические ошибки 02:08 Связывание аннотаций с PDF-файлом и результатом OCR 03:53 Неправильный ли исходный код или ошибка OCR? 05:30 Сравнение Chandra и Gemini Flash 07:08 Водяной знак, пропущенный обеими моделями 10:04 Оценка ответа агента и его ссылок 11:37 Неверный ответ с правдоподобной ссылкой 13:18 Обратная проверка трассировки 14:40 Одна цифра меняет ответ на 600 миллионов долларов 15:01 Создание теста, близкого к первопричине 16:17 Правильный ответ и проверка ссылок с помощью Jev 17:45 Риски генерации ссылок впоследствии 19:11 Форма переписи населения превращается в искаженный текст 20:04 Тестирование другого подхода к распознаванию текста 21:52 Неоднозначные подписи и проверка человеком 23:39 Создание инструментов аннотирования по одному полезному изменению за раз 25:35 Как сузить выбор моделей распознавания текста

Название:

Как я оцениваю OCR и нахожу ошибки в работе моделей

Категория:

Разное