AI 능력의 진짜 기준선은 가장 높은 성능이 아니라 변화의 속도다

François Chollet · Keras 창시자, ARC-AGI 벤치마크 설계자 — 추론은 패턴 매칭만으로는 불가능하다고 주장 · 2026.07.05 ~ 07.26 큐레이션

Keras 창시자이자 ARC-AGI 벤치마크 설계자인 François Chollet은 AI 산업이 성능을 포장하는 방식에 꾸준히 의문을 던져왔어요. 최근 2주간 그의 트윗을 보면 두 가지 흐름이 뚜렷하게 보여요. 하나는 AI 능력에 대한 과장된 인식을 걷어내는 것, 다른 하나는 지금의 기술 트리 자체를 다시 써야 한다는 주장이에요.

AI 성능, 최고점이 아니라 평균을 봐야 해요

AI competence has always been very spiky, superhuman in some narrow domains and largely useless in others. The fundamental marketing trick of the AI industry is to make you believe the tallest spike is a floor.

^[1]

AI는 특정 좁은 영역에서는 인간을 뛰어넘지만, 그 외 영역에서는 여전히 크게 제한적이에요. Chollet은 AI 산업이 가장 높은 성능을 마치 평균 수준인 것처럼 보이게 만드는 것이 핵심 마케팅 전략이라고 지적해요. 이어 “현재 지표값보다 변화의 속도가 더 중요하다”는 말도 남겼는데^[3] 현재 숫자에 압도되지 말고 방향과 기울기를 보라는 뜻이에요.

실제로 그는 Anthropic의 Opus 5가 ARC-AGI-3에서 30%를 달성하며 새로운 최고 기록을 세웠다고 언급했어요.^[4]

지금의 기술 트리를 넘어서는 패러다임이 온다

Most people are conditioned to expect that all known problems already have canonical solutions, that these solutions are the best that can be achieved, and that attempting to reinvent them would be a pointless, quixotic effort. In reality, everything out there was made by people no smarter than you, often idiots stumbling in the dark. Not only can new solutions be found, but entirely new paradigms are absolutely possible, including ones that completely bypass the current tech tree.

^[2]

기존 해법이 최선이라는 믿음 자체가 새로운 가능성을 가로막는다는 얘기예요. Chollet은 현재의 AI 기술 스택도 마찬가지로, 훈련과 추론 비용이 극도로 저렴해지는 미래에는 지금의 논쟁 대부분이 전제 자체를 잃게 될 거라고 봐요.^[5] 모델 버전 번호가 요란하게 발표되는 시대도 2년 안에 끝나고, AI는 조용히 지속 업데이트되는 방식으로 바뀔 거라는 전망도 덧붙였어요.^[6]

Chollet의 시선은 일관되게 현재의 과장을 걷어내고 구조적 변화를 읽는 데 맞춰져 있어요. 숫자보다 방향, 마케팅보다 실제 능력의 분포를 보라는 메시지가 이번 2주간 트윗 전반에 흐르고 있답니다.

📚 출처 (Sources)

1. [1]@fchollet on 𝕏 · 2026-07-20 — “AI competence has always been very spiky, superhuman in some narrow domains and largely us…”
2. [2]@fchollet on 𝕏 · 2026-07-26 — “Most people are conditioned to expect that all known problems already have canonical solut…”
3. [3]@fchollet on 𝕏 · 2026-07-20 — “Always keep in mind that the rate of change matters more than the current metric value”
4. [4]@fchollet on 𝕏 · 2026-07-24 — “Opus 5 sets a new state-of-the-art on ARC-AGI-3, at 30%.

   ARC-AGI-3 measures solving probl…”

5. [5]@fchollet on 𝕏 · 2026-07-19 — “All current debates about AI are predicated on the assumption that frontier AI training wi…”
6. [6]@fchollet on 𝕏 · 2026-07-25 — “The era of new model launches as big milestones will eventually come to an end — at some …”

본 글은 François Chollet(@fchollet)이(가) 지난 14일간 X(트위터)에 올린 게시물 중 6건을 인용해
Claude(Anthropic)가 한국어로 큐레이션·해설한 것입니다. 원문 저작권은 작성자에게 있으며,
출처 목록의 [n] 번호 또는 본문 내 [n] 표시를 누르면 원문 트윗으로 이동합니다.