Представим: беспилотный автомобиль попадает в аварию. Что должна делать система? Остановиться? Самообучиться? Пересчитать модель принятия решений? А если речь о медицинском ИИ, который поставил ошибочный диагноз — должен ли он немедленно скорректировать рекомендации, уведомить врачей или временно отключиться?
Главный вопрос в том, готовы ли мы принять, что даже самые совершенные алгоритмы не будут безошибочными, даже если их применение в целом снизит количество аварий, врачебных ошибок или экономических просчетов.
От ответа на этот вопрос во многом будет зависеть скорость внедрения ИИ в «чувствительных» областях — от транспорта, медицины, строительства до финансов, юриспруденции.