Интернет-энциклопедия «Википедия» начнет использовать сервис ОRES (Objective Revision Evaluation Service) для оценки качества статей и вносимых в них правок.
При помощи методов машинного обучения на примере одобряемых редакторами исправлений искусственный интеллект научился выявлять случаи некорректных правок, вандализма, удаления страниц и оповещать об этом модераторов. Для обучения алгоритма использовали более 4,6 миллиона статей из англоязычного раздела, оценку которым проставили вручную.
В результате ORES научился обрабатывать правки в течении 50-100 миллисекунд и выставлять оценку качества статьям при помощи уже существовавшей ранее в «Википедии» модели анализа. Сервис поддерживает 14 языков, и их количество будет расти, говорят создатели.
Ранее в качестве механизмов защиты страниц от вандализма Wikimedia Foundation использовала Huggle и STiki, но эти инструменты работали только в англоязычной версии.
Для иллюстрации работы сервис Wikimedia опубликовала два примера правок, анализируемых ORES. Изменение, где пользователь заменил полезную ссылку на бессмысленное предложение, алгоритм назвал вредной с вероятностью 91,63%.
Во втором случае редактор указал правильную ссылку на статью про спектакль «Старуха» режиссера Роберта Уилсона, а ORES с вероятностью 86,83% определил, что правка вредной не является.