Примечание переводчика. Пару дней назад на ГТ появилась статья, где владелец Tesla Model S утверждает, что автопилот его электромобиля спас пешехода от смерти . В ней сказано, что автор письма написал это письмо, так как «Сейчас появилось много негативных отзывов об Autopilot и о смерти водителя несколько недель назад. Я думаю, что для вас важно узнать об этой истории.» Выглядит как вполне нормальная реакция на критику, если бы не несколько моментов. Это письмо является, по сути, своеобразным ответом на критику цифр, приведенных в представленной ниже статье, которая была опубликована на сайте Fortune 05.07.2016.
«Figures never lie, but liars always figure.»
«Скажи мне, какую сторону ты поддерживаешь, и я предоставлю статистику в поддержку твоей точки зрения»
2016 Tesla Model S 70D с Автопилотом (фото: Sam Abuelsamid)
Варианты вышеприведенных цитат существуют многие годы и их происхождение неизвестно. Но в обеих идиомах есть большая доля правды. Обсуждается ли число безработных, рост экономики, результаты голосований или заявления о безопасности — прежде, чем воспринимать полученный ответ нужно определить, какой вопрос был задан. Разные вопросы могут дать совершенно разные ответы.
Это относится и к заявлениям о безопасности автоматизации транспорта, включая недавний пост в блоге компании Тесла, в котором было сказано о гибели Джошуа Брауна в столкновении с трейлером в начале мая, который ехал в своей Tesla Model S с активированный автопилотом. В заявлении Теслы сказано:
Как обычно, мы должны спросить: а на какой вопрос был дан ответ? На основании заявления компании Тесла можно предположить, что с момента появления автопилота в октябре 2015 год все автомобили моделей S и X в мире проехали 130 млн. миль. Если мы принимаем такое толкование, то мы также должны предположить, что во всем мире не было других инцидентов со смертельными случаями, о которых мы не знаем на данный момент. Учитывая, что Тесла собирает огромный объем телеметрии со своих автомобилей, поверим, что так и есть — на данный момент 1 смертельный случай на 130 млн. миль.
Экран опций Автопилота показывает, что все функции в бета-версии, хотя большинство пользователей, возможно, не понимают, что это значит (фото: Sam Abuelsamid)
А что же насчет 1 смертельного случая на 94 млн миль в США? Наилучшим источником подобной информации являются данные системы Fatality Analysis Reporting System (FARS) Министерства транспорта США, в которой представлены данные по ДТП по штатам и местным организациям для всего США. Эта система – восхитительный источник информации по ДТП и трендам. Поскольку данные за 2015 год были только предварительно оглашены, последние полные представленные данные есть за 2014 год, потому воспользуемся ими. В 2014 году жители США пропутешествовали 3,026 триллионов миль (прим. переводчика 3,026х10^12)) по дорогам и погибло за это время на дорогах 32 675 человек. Это означает примерно 1 смерть на 92 миллиона миль, немного хуже заявления Теслы, и 2015 год будет несколько хуже по этому показателю, так как погибло большее число мотоциклистов и пешеходов.
Анимация происходящего вокруг в панели инструментов с показом движущихся вокруг транспортных средств, но без указания пешеходов, велосипедистов или дорожных знаков (фото: Sam Abuelsamid)
Последнее очень важно, так как система FARS включает в себя данные всех смертей на дорогах, как в легковых автомобилях и грузовиках, так и те, которые произошли в случае ДТП автомобиля с другими участниками транспортного движения (мотоциклы, велосипеды или пешеходы). Насколько известно на сегодня, ни одна из машин оборудованных Автопилотом пока не сбила и не убила пешехода или велосипедиста. Потому компания Тесла по сути сравнивает два разных набора данных. В 2014 году 4 586 мотоциклистов и 5 813 пешеходов/велосипедистов погибли в результате ДТП в США.
Это оставляет 22 276 участников движения в автомобилях (водителей и пассажиров), которые погибли. Это число и следует, скорее всего, сравнивать с цифрой 1 смерть на 130 млн миль. В таком случае выходит одна смерть на 135,8 млн миль при управлении транспортным средством человеком. И по этой статистике живые водители водят лучше, чем компьютеры. Однако даже это, скорее всего, также не самое корректное сравнение. Каждая смерть — трагическая потеря, сегодняшние данные в 1 смерти на более чем 90 млн. миль фактически очень малая величина. Набор данных «всего одна смерть» недостаточен для статистически корректного суждения.
Эти 130 млн. миль звучат как огромное число в отрыве от реальности и в 87 раз больше, чем наезд тестового флота компании Google в Кремниевой долине и Остине, Техас. Однако это всего лишь 0,0043% от всего расстояния, что проехали транспортные средства в 2014 году. До появления большого числа данных (я не хочу, чтобы погибло больше людей, хотя это неизбежно на определенном суммарном числе поездок) слишком рано для каких-либо суждений о том, есть ли какой-то прогресс в вопросах безопасности.
Точно известно следующее — Тесла не сообщила о том, если ли у них данные о том, как часто водители вели себя не как Браун и обращали внимание на то, что Автопилот некорректно работал и не видел того, что должен был, и брали управление на себя. Если бы большинство водителей вели себя, как Джошуа Браун, считая машину полностью автономной, число жертв могло бы быть выше сейчас. Или нет. Для такого вывода просто недостаточно данных.
Я верю, что автоматические технологии вождения улучшатся со временем и уменьшат число аварий, травм, смертей и сопутствующих расходов. Я просто не убежден, что у нас есть такие данные сегодня, для подтверждения или опровержения этой информации.
Я также не убежден, что следует использовать людей как подопытных мышей, поскольку я не уверен, что их можно обеспечить адекватной информацией и обеспечить реальное информированное согласие от них. Даже если эти участники были проинформированы как следует, миллионы других людей на дорогах не давали согласие на то, чтобы быть частью эксперимента, а их жизни так же ценны для общества, как и жизни водителей автомобилей Тесла. Тот факт, что жизнь мистера Брауна была единственной утраченной в том инциденте являлось всего лишь случайным совпадением.
Автор является старшим аналитиком команды Transportation Efficiencies в Navigant Research.
«Figures never lie, but liars always figure.»
«Скажи мне, какую сторону ты поддерживаешь, и я предоставлю статистику в поддержку твоей точки зрения»
2016 Tesla Model S 70D с Автопилотом (фото: Sam Abuelsamid)
Варианты вышеприведенных цитат существуют многие годы и их происхождение неизвестно. Но в обеих идиомах есть большая доля правды. Обсуждается ли число безработных, рост экономики, результаты голосований или заявления о безопасности — прежде, чем воспринимать полученный ответ нужно определить, какой вопрос был задан. Разные вопросы могут дать совершенно разные ответы.
Это относится и к заявлениям о безопасности автоматизации транспорта, включая недавний пост в блоге компании Тесла, в котором было сказано о гибели Джошуа Брауна в столкновении с трейлером в начале мая, который ехал в своей Tesla Model S с активированный автопилотом. В заявлении Теслы сказано:
Это первый известный случай со смертельным исходом за более чем 130 миллионов миль, в которых был активирован Автопилот. Среди всех транспортных средств в США смертельные случаи происходят 1 раз на 94 миллиона миль
Как обычно, мы должны спросить: а на какой вопрос был дан ответ? На основании заявления компании Тесла можно предположить, что с момента появления автопилота в октябре 2015 год все автомобили моделей S и X в мире проехали 130 млн. миль. Если мы принимаем такое толкование, то мы также должны предположить, что во всем мире не было других инцидентов со смертельными случаями, о которых мы не знаем на данный момент. Учитывая, что Тесла собирает огромный объем телеметрии со своих автомобилей, поверим, что так и есть — на данный момент 1 смертельный случай на 130 млн. миль.
Экран опций Автопилота показывает, что все функции в бета-версии, хотя большинство пользователей, возможно, не понимают, что это значит (фото: Sam Abuelsamid)
А что же насчет 1 смертельного случая на 94 млн миль в США? Наилучшим источником подобной информации являются данные системы Fatality Analysis Reporting System (FARS) Министерства транспорта США, в которой представлены данные по ДТП по штатам и местным организациям для всего США. Эта система – восхитительный источник информации по ДТП и трендам. Поскольку данные за 2015 год были только предварительно оглашены, последние полные представленные данные есть за 2014 год, потому воспользуемся ими. В 2014 году жители США пропутешествовали 3,026 триллионов миль (прим. переводчика 3,026х10^12)) по дорогам и погибло за это время на дорогах 32 675 человек. Это означает примерно 1 смерть на 92 миллиона миль, немного хуже заявления Теслы, и 2015 год будет несколько хуже по этому показателю, так как погибло большее число мотоциклистов и пешеходов.
Анимация происходящего вокруг в панели инструментов с показом движущихся вокруг транспортных средств, но без указания пешеходов, велосипедистов или дорожных знаков (фото: Sam Abuelsamid)
Последнее очень важно, так как система FARS включает в себя данные всех смертей на дорогах, как в легковых автомобилях и грузовиках, так и те, которые произошли в случае ДТП автомобиля с другими участниками транспортного движения (мотоциклы, велосипеды или пешеходы). Насколько известно на сегодня, ни одна из машин оборудованных Автопилотом пока не сбила и не убила пешехода или велосипедиста. Потому компания Тесла по сути сравнивает два разных набора данных. В 2014 году 4 586 мотоциклистов и 5 813 пешеходов/велосипедистов погибли в результате ДТП в США.
Это оставляет 22 276 участников движения в автомобилях (водителей и пассажиров), которые погибли. Это число и следует, скорее всего, сравнивать с цифрой 1 смерть на 130 млн миль. В таком случае выходит одна смерть на 135,8 млн миль при управлении транспортным средством человеком. И по этой статистике живые водители водят лучше, чем компьютеры. Однако даже это, скорее всего, также не самое корректное сравнение. Каждая смерть — трагическая потеря, сегодняшние данные в 1 смерти на более чем 90 млн. миль фактически очень малая величина. Набор данных «всего одна смерть» недостаточен для статистически корректного суждения.
Эти 130 млн. миль звучат как огромное число в отрыве от реальности и в 87 раз больше, чем наезд тестового флота компании Google в Кремниевой долине и Остине, Техас. Однако это всего лишь 0,0043% от всего расстояния, что проехали транспортные средства в 2014 году. До появления большого числа данных (я не хочу, чтобы погибло больше людей, хотя это неизбежно на определенном суммарном числе поездок) слишком рано для каких-либо суждений о том, есть ли какой-то прогресс в вопросах безопасности.
Точно известно следующее — Тесла не сообщила о том, если ли у них данные о том, как часто водители вели себя не как Браун и обращали внимание на то, что Автопилот некорректно работал и не видел того, что должен был, и брали управление на себя. Если бы большинство водителей вели себя, как Джошуа Браун, считая машину полностью автономной, число жертв могло бы быть выше сейчас. Или нет. Для такого вывода просто недостаточно данных.
Я верю, что автоматические технологии вождения улучшатся со временем и уменьшат число аварий, травм, смертей и сопутствующих расходов. Я просто не убежден, что у нас есть такие данные сегодня, для подтверждения или опровержения этой информации.
Я также не убежден, что следует использовать людей как подопытных мышей, поскольку я не уверен, что их можно обеспечить адекватной информацией и обеспечить реальное информированное согласие от них. Даже если эти участники были проинформированы как следует, миллионы других людей на дорогах не давали согласие на то, чтобы быть частью эксперимента, а их жизни так же ценны для общества, как и жизни водителей автомобилей Тесла. Тот факт, что жизнь мистера Брауна была единственной утраченной в том инциденте являлось всего лишь случайным совпадением.
Автор является старшим аналитиком команды Transportation Efficiencies в Navigant Research.