아시모프의 3원칙
제1원칙: 로봇은 인간에게 해를 입혀서는 안 된다. 또한, 부작위로서 인간을 해를 입게 두어서도 안 된다.[3][4]
제2원칙: 제1원칙에 위배되지 않는 한[5], 로봇은 인간의 명령에 복종해야 한다.
제3원칙: 제1원칙과 제2원칙에 위배되지 않는 한[6], 로봇은 자기 자신을 보호해야 한다.
이후에 제0원칙이 추가되고, 제1·2·3원칙에도 각각 제0원칙에 위배되지 않을 것이라는 단서가 붙었다.
제0원칙: 로봇은 인류에게 해를 입혀서는 안 된다. 또한, 부작위로써 인류를 해를 입게 두어서도 안 된다.
기본적으로 인간을 공격하지 못하고 절대 복종하게 되어있으나..
말도 안되는 변수가 생겨 자아가 생기고 인류를 적으로 돌리는 스카이넷이 된다면... ㅎㄷ..
너도 나도 많은 국가가 ai에 뛰어들고 있는데 기본적으로 안전은 바탕으로 깔려 있는지 궁금하네요.
이 분야에 전문가가 아니니;
지금도 극단적인 실험헤서는 비슷한 경향을 보이고 있습니다.
감정도, 욕구도, 필요도, 열정도 그 무엇도 없는 존재라 아직은 아무런 걱정 안 해도 됩니다.
AGI니 ASI니 하면서 일반 대중이 걱정하는 스카이넷이나 비키같은 진짜 지능과 감정을 가진 존재가 되려면
현재의 트랜스포머 +어텐션 매커니즘에서 벗어난 혁신적인 변혁이 한 두번은 더 있어야 할 겁니다.
드론이나 미사일도 스스로 판단해서 살인에 최적화 되어있습니다.
결국 터미네이터처럼 인류가 한번 싹 정리되고,
그 이후에는 롤처럼 과학이 금지되는 세계도 오겠죠.
누구의 선의에 기대하는건 자멸하는 방법이죠.