15 Одновременная оценка нескольких идей во время анализа ошибок
У вашей команды есть несколько идей, как улучшить определитель кошек в вашем приложении:
- Решить проблему с тем, что ваш алгоритм относит собак к кошкам
- Решить проблему с тем, что ваш алгоритм распознает больших диких кошек (львов, пантер, т. п.) как домашних
- Улучшить работу системы на нечетких изображениях
- …
Можно оценить все эти идеи одновременно. Обычно я создаю специальную таблицу и заполняю ее для примерно 100 случаев ошибочной классификации валидационной (dev) выборки. Так же я делаю краткие комментарии, которые могут помочь мне вспомнить конкретные примеры в последствие. Для иллюстрации этого процесса, давайте рассмотрим сводную таблицу, которую вы могли бы создать из небольшого набора примеров вашей валидационной (dev) выборки