О роботах-убийцах
Дискуссия про автоматический транспорт напомнила мне одну вещь…
В двух (или больше, но я не помню) моих сеттингах был один и тот же ответ на вопрос «почему на войне не используются роботы-убийцы». Первым была «Солнечная война», вторым — полусекретная «Галактика Света, Галактика Тьмы».
Так вот…
Проблема, вставшая перед программистами пси-киберпанка и фэнтези-космооперы, была одной и той же.
Если программа робота предельно проста: «стреляй во всё, что не отвечает на сигнал FoF», то он не будет различать врагов и мирных жителей. В том числе мирных жителей собственной страны. А если её сколько-либо усложнить, в ней появятся баги, которые будут эксплойтить. Робот стреляет во всё, что не попадает под определение «своего» и вооружено? Враги будут прятать или маскировать оружие. Робот стреляет во всё, что не попадает под определение «своего» и держит предмет, похожий на оружие? Он будет стрелять и по безоружным в том числе. Ну и так далее. Если же у робота есть полноценный ИИ, но он ограничен Первым законом Азимова, применяемым только к «своим», то тут возникает простор для rules-lawyering'а (и logic bombing'а). А если у робота есть ИИ, и нет никаких ограничений, он, с высокой вероятностью, рано или поздно возомнит себя сайлоном.
То есть на самом деле в этих сеттингах боевых роботов используют. Но с максимально простой программой и только тогда, когда либо мирного населения в зоне использования нет, либо потери среди мирного населения абсолютно не волнуют использующего.
В двух (или больше, но я не помню) моих сеттингах был один и тот же ответ на вопрос «почему на войне не используются роботы-убийцы». Первым была «Солнечная война», вторым — полусекретная «Галактика Света, Галактика Тьмы».
Так вот…
Проблема, вставшая перед программистами пси-киберпанка и фэнтези-космооперы, была одной и той же.
Если программа робота предельно проста: «стреляй во всё, что не отвечает на сигнал FoF», то он не будет различать врагов и мирных жителей. В том числе мирных жителей собственной страны. А если её сколько-либо усложнить, в ней появятся баги, которые будут эксплойтить. Робот стреляет во всё, что не попадает под определение «своего» и вооружено? Враги будут прятать или маскировать оружие. Робот стреляет во всё, что не попадает под определение «своего» и держит предмет, похожий на оружие? Он будет стрелять и по безоружным в том числе. Ну и так далее. Если же у робота есть полноценный ИИ, но он ограничен Первым законом Азимова, применяемым только к «своим», то тут возникает простор для rules-lawyering'а (и logic bombing'а). А если у робота есть ИИ, и нет никаких ограничений, он, с высокой вероятностью, рано или поздно возомнит себя сайлоном.
То есть на самом деле в этих сеттингах боевых роботов используют. Но с максимально простой программой и только тогда, когда либо мирного населения в зоне использования нет, либо потери среди мирного населения абсолютно не волнуют использующего.
11 комментариев
Мне всегда хочется спросить: по-вашему солдаты не стреляют в гражданских, оказавшихся в зоне боевых действий/делающих что-то непонятное, но явно угрожающее? Если не стреляют — то долго не проживут, потому что у солдат-то «система распознавания свой-чужой» — это его гребаные глаза. А гражданские — не всегда такие уж гражданские.
Просто же случай когда боевые действия ведутся на своей территории — тоже нормальная ситуация. Войны между государствами ведуться не за людей, а за государственные интересы. Накрыть огнем свой город занятый противником — за это конечно можно потом поплатиться. Но для этого сначала нужно выиграть войну, а то «потом» не будет.
обезьяны с гранатойживого солдата, а потому что в развитых странах очень боятся роботов-убийц и всякого рода псевдогуманисты будут настаивать чтобы в мясорубку посылали живых людей (войну в целом они запретить государству не могут, что характерно).Кроме того у офигенно развитых Соединенных Штатов как раз с гуманизмом все очень неоднозначно. Когда кто-то из чинов бывает публично уличен в военном преступлении или нарушении свобод, свое место он обычно сохраняет, а того кто уличил обвиняют в разглашении гос. тайны и гоняют по всему земному шару.