Сверь числа и знаки с фото.
Турнир по искусственному интеллекту Профессии будущего и ИИ
Система заметно чаще отклоняет работы учеников из одной конкретной группы. Что стоит проверить? Выбери несколько ответов.
☐ Не влияет ли на решение системы признаки, которые не должны иметь отношения к качеству работы ☐ Одинакова ли доля ошибок системы для разных групп ☐ Не отличаются ли данные для разных групп по качеству и полноте ☐ Не стоит ли просто сделать интерфейс программы ярче
Краткий ответ: выбирай 1, 2 и 3. Четвёртый вариант про яркость интерфейса не подходит.
Почему:
Признаки, не связанные с качеством работы. Если система опирается на группу ученика, школу, устройство или другой подобный признак, это может быть предвзятость. Нужно проверить, не влияет ли это на решение.
Доля ошибок для разных групп. Даже при высокой общей точности система может чаще ошибочно отклонять работы одной группы. Сравнивают долю ложных отклонений и ложных принятий.
Качество и полнота данных. Если данные одной группы представлены хуже или размечены иначе, система может работать для неё несправедливее.
Яркость интерфейса не влияет на то, как модель оценивает работу, поэтому не объясняет неравномерные отклонения.
Проверка: первые три пункта позволяют найти три возможные причины — неподходящие признаки, неравенство ошибок и проблемы данных. Четвёртый пункт относится к оформлению, а не к решению системы.