У розділі 26 книги « Штучний інтелект: сучасний підхід» (3-е видання) підручник обговорює «технологічну особливість». Він цитує IJ Good, який написав у 1965 році:
Нехай ультраінтелигентну машину визначають як машину, яка може значно перевершити всю інтелектуальну діяльність будь-якої людини, наскільки розумною. Оскільки конструкція машин є одним із цих інтелектуальних напрямків, ультра-інтелектуальна машина може спроектувати ще кращі машини; Тоді, безперечно, відбудеться «вибух інтелекту», і інтелект людини залишиться далеко позаду. Таким чином, перша ультра-розумна машина - це останній винахід, який людині потрібно коли-небудь зробити, за умови, що машина достатньо послушна, щоб сказати нам, як тримати її під контролем.
Пізніше у підручнику виникне таке запитання:
26.7 - IJ Good стверджує, що інтелект - це найважливіша якість, і що побудова ультраінтелигентних машин все змінить. Розумний гепард заперечує, що "насправді швидкість важливіша; якби ми могли побудувати надшвидкі машини, це все змінило б", і живий слон стверджує: "Ви обидва помиляєтеся; те, що нам потрібно, - це надзвичайно сильні машини". Що ви думаєте про це аргументи?
Здається, що питання підручника є неявним аргументом проти IJ Good. Добре може сприймати інтелект як цінне, просто тому, що сили людини полягають у тій рисі, яка називається "інтелект". Але натомість інші риси можуть бути однаково оцінені (швидкість або сила), і живі істоти можуть бурхливо спекулювати про те, що їхня бажана риса "максимально" використовується якоюсь машиною чи іншою машиною.
Це змушує мене замислитися, чи могло б виникнути особливість, якби ми побудували машини, які не максимізували інтелект, а натомість максимізували якусь іншу ознаку (машина, яка постійно збільшує свою силу, або машина, яка постійно збільшує свою швидкість). Ці типи машин можуть бути настільки ж трансформативними - надшвидкі машини можуть швидко вирішити проблеми завдяки «грубій силі», а ультрасильні машини можуть використовувати свою сировину для виконання різноманітних фізичних завдань. Можливо, машина ультра-X не може побудувати іншу машину ультра-X (як IJ Good ставився до дизайну машин як до інтелектуальної діяльності), але машина, що постійно вдосконалюється, все одно залишить своїх творців далеко позаду і змусить її творців бути залежно від нього.
Чи обмежені технологічні особливості ультра-інтелегенціями? Чи технологічні особливості викликані машинами, які не є "сильним AI", але все ще є "ультра" -оптимізаторами?