
Полиция Эйвона и Сомерсета тайно вела базу данных почти на 500 тыс. жителей Бристоля — с психиатрическими записями, данными о школьных обедах, жилищном статусе и подростковых беременностях. Алгоритмы анализировали эти данные и присваивали каждому «рейтинг риска» — например, для детей учитывались пропуски в школе, долги семьи по аренде и получение бесплатного питания.
Расследование Wired показало: модель предсказания краж работала с точностью ниже 10% более трех лет — это значит, что девять из десяти помеченных людей преступниками не были. Полиция утверждает, что эту конкретную модель так и не развернула. Зато две другие модели — для предсказания угрозы сексуальной и криминальной эксплуатации детей — тихо свернули, когда выяснилось, что им нельзя доверять.
«Я не думаю, что ИИ-модель должна иметь такую власть над жизнями людей», — замечает Пеграм.
Можно ли доверять ИИ решения о том, кто преступник?
❤️ — нет, это должны решать только люди
🔥 — можно, если система работает точно
