Blog

Аналогія з шаховим Ело: прогрес ШІ виглядає повільним, поки раптом не перестає

Є один графік, до якого я постійно повертаюся, коли думаю про прогрес ШІ. Він не про ШІ. Він про шахи.

Приблизно сорок років найкращі шахові рушії додавали десь по 40 пунктів Ело на рік, а найкращі люди — близько 2. AI Impacts проаналізували рейтинг-лист SSDF за 1984–2018 роки й побачили звичайний лінійний тренд, без стрибків більших за кілька років. Пряма лінія.

Але ефект від цієї лінії був зовсім не прямим.

У 1997-му Deep Blue переміг Каспарова, і люди ще сперечалися, чи не були умови матчу вигіднішими для машини. У 2002 і 2003 роках три матчі людина–комп'ютер закінчилися внічию. Люди ще могли боротися. А в 2005-му Hydra розгромила Майкла Адамса, сьомого у світі: п'ять перемог і одна нічия в шести партіях. У 2006-му Deep Fritz переміг чемпіона світу Крамника 4–2. Це був останній великий матч людини проти комп'ютера. Відтоді рушії на звичайному залізі, включно з телефонами, б'ють навіть найсильніших гравців. Топові рушії мають рейтинг понад 3000 Ело; людський рекорд досі нижчий за 2900.

Отже, приблизно десять років: від «люди іноді виграють» до «а навіщо взагалі грати». Крива рушіїв так і не зігнулася. Результат перевернувся, бо пряма лінія перетнула людський діапазон.

Я думаю, що економічний вплив ШІ може працювати так само. Прогрес виглядає приблизно лінійним, а світ — приблизно нормальним. Не тому, що технологія застрягла, а тому, що моделі ще піднімаються через людський діапазон. Коли вони перетнуть його в якійсь сфері, результат буде не «трохи краще, ніж торік». Буде «люди перестають змагатися».

Два застереження, які я не можу відкинути. Крива може вирівнятися прямо перед перетином, і в деяких сферах ми, можливо, вже близько до цієї точки. І аналогія найкраще працює для цілей, які можна записати: знизити loss, пройти бенчмарк. Відкрита робота, де ніхто не може сформулювати ціль, може мати зовсім іншу криву.

Я постійно думаю про проміжок 2003–2006. Три роки «це нічия» — і все закінчилося. Якби ви у 2003-му ставили на шахи як на людське вміння, пряма лінія була прямо там, на графіку. Просто тоді вона ще не здавалася попередженням.

Джерела