GPT-4o攻破ARC-AGI无法被挑战的神话!71%准确率成新SOTA
【新智元导读】号称不可能轻易被击败的AGI基准ARC-AGI被GPT-4o撼动,GPT-4o以在公共测试集50%、在训练集71%的准确率成为了新的SOTA!ARC-AGI是唯一可以用来衡量通用人工智能进展的基准,创造者FrançoisChollets曾经掷下豪言——「它不可能轻易被击败!」为了测试这一点,他于2020年在Kaggle上主办了首届ARC-AGI竞赛。获胜团队icecuber在测试集上仅取得了21%的成功率,这个成绩强有力地证明了François的断言是正确的。「我的观点并不是说GPT-4o相对于人类来说是聪明的,但我确实认为它是具有『智能』的。