Это эссе было написано совместно с Баратом Рагхаваном и первоначально опубликовано в The Guardian.Основные бенчмарки измеряют, что ИИ может делать. Ни один не измеряет, делает ли он то, что вы имеете в виду: расстояние между тем, что вы просите ИИ сделать, и невысказанными предположениями о том, как вы хотите, чтобы ИИ это сделал. Мы предлагаем новую метрику: коэффициент Джинна.Часто существует разрыв между просьбой одного человека и пониманием другого. В большинстве случаев мы преодолеваем его, используя общие знания. Например, если вы попросите друга принести вам кофе, он нальет чашку из кофейника или купит ее в кофейне. Он не принесет вам мешок сырых зерен и не выхватит чашку у незнакомца и не отдаст ее вам. Вы никогда этого не уточняли. Вам никогда не приходилось...