Subbarao Kambhampati

Subbarao Kambhampati

x.com/rao2z

Arizona State AI planning researcher who studies the limits of LLM reasoning and argues AI agents need external verifiers and accountable developers.

AI จะเปลี่ยนแปลงโลกอย่างไร?

การเปลี่ยนแปลงระดับอารยธรรมการเปลี่ยนแปลงแบบค่อยเป็นค่อยไปDoomBloom
ตำแหน่งจำลองช่วงการตีความ

แนวนอน: มุมมอง Doom–Bloom ที่เขาแสดงออก แนวตั้ง: ระดับของการเปลี่ยนแปลง

Doom–Bloom: 61 จาก 100 ระดับของการเปลี่ยนแปลง: 59 จาก 100 ช่วงการตีความ: แนวนอนตั้งแต่ 56 ถึง 76 แนวตั้งตั้งแต่ 50 ถึง 75 ค่าเหล่านี้เป็นพิกัดสำหรับการตีความ ไม่ใช่ความน่าจะเป็นของเหตุการณ์

P(doom) ของ Subbarao Kambhampati · อนุมาน

≈4%

0%100%

อนุมานจากคำตอบจำลองของบุคคลนั้น ไม่ใช่ตัวเลขที่บุคคลนั้นระบุ ช่วงที่เป็นไปได้: 2–8%

สิ่งที่มุมมองของเขาขึ้นอยู่กับ

ข้อสันนิษฐานหลัก

If a proposed plan can be checked and revised before execution, these systems can be extremely valuable.
คำตอบ 1

หากข้อสันนิษฐานนี้ปรากฏว่าเป็นไปอีกแบบ มุมมองของเขาจะเปลี่ยนไปอย่างไร?

คำถามที่ยังไม่มีข้อสรุป

I don’t have a defensible number.
คำตอบ 3

อะไรจะช่วยให้เขาแยกแยะผลลัพธ์ที่เป็นไปได้ในเรื่องนี้?

สิ่งที่อาจเปลี่ยนความคิดของบุคคลนั้น

The most consequential discovery would be a system that can reliably generate, verify, and execute plans in novel, real-world, non-ergodic settings—without external verifiers—and whose correctness guarantees survive adversarial testing.
คำตอบ 4

หลักฐานแบบใดจึงจะเพียงพอ และจะทำให้มุมมองของเขาเปลี่ยนไปในทิศทางใด?

รายละเอียดเพิ่มเติม

ผลดีที่คาดไว้

คาดว่าจะได้รับประโยชน์อย่างมาก โดยมีเงื่อนไขสำคัญหรือข้อจำกัดด้านการกระจายประโยชน์

67 / 100

ผลกระทบน้อยผลกระทบที่ก่อให้เกิดการเปลี่ยนแปลงอย่างมาก

ช่วงการตีความตั้งแต่ 67 ถึง 67 บนมาตรวัดเชิงคุณภาพ

อันตรายที่คาดไว้

อันตรายร้ายแรงหรือแพร่หลายในวงกว้างเป็นส่วนสำคัญที่คาดว่าจะเกิดขึ้นในอนาคต

61 / 100

ผลกระทบน้อยผลกระทบที่ก่อให้เกิดการเปลี่ยนแปลงอย่างมาก

ช่วงการตีความตั้งแต่ 33 ถึง 67 บนมาตรวัดเชิงคุณภาพ

อิทธิพลของมนุษย์

การเลือกของมนุษย์มีอิทธิพลอย่างมีนัยสำคัญ แต่ถูกจำกัดอย่างมาก

54 / 100

อิทธิพลน้อยอิทธิพลมาก

ช่วงการตีความตั้งแต่ 44 ถึง 81 บนมาตรวัดเชิงคุณภาพ

ความเร็วในการพัฒนา

หยุดหรือชะลอการพัฒนา AI ที่มีความสามารถสูงขึ้นอย่างมาก

ตำแหน่งจำลอง: เดินหน้าพัฒนาต่อภายใต้มาตรการป้องกันที่ระบุไว้

เร่งการพัฒนา AI ที่มีความสามารถสูงขึ้น

กฎการใช้ AI

จำกัดการใช้ AI ที่กล่าวถึงจนกว่าจะมีมาตรการป้องกันหรือการอนุญาตล่วงหน้า

ตำแหน่งจำลอง: อนุญาตการใช้ AI ที่กล่าวถึง โดยมีความรับผิดรับชอบและมาตรการป้องกันที่มุ่งเป้าเฉพาะด้าน

ลดข้อจำกัดในการใช้ AI ที่กล่าวถึงให้น้อยที่สุด

การตีความเหล่านี้ยังคงเงื่อนไขที่เขาระบุไว้ ทั้งประโยชน์และอันตรายอาจมีมากได้ ช่วงต่างๆ อธิบายวิธีที่เราอ่านคำตอบจำลองของเขา ไม่ใช่ช่วงความเชื่อมั่นทางสถิติ

จุดยืนของคุณอยู่ตรงไหนเมื่อเทียบกับ Subbarao Kambhampati?
ทำแผนที่โลกทัศน์เกี่ยวกับ AI ของคุณเองในประมาณ 3 นาที แล้วจึงเปรียบเทียบ

โลกทัศน์ที่คล้ายกัน

ผู้นำทางความคิดที่มีโลกทัศน์จำลองใกล้เคียงกับโลกทัศน์ของ Subbarao Kambhampati มากที่สุด

แบบประเมินจำลอง

คำถาม 1

คุณคิดว่า AI มีความหมายอย่างไรต่ออนาคตของเรา และเพราะเหตุใด?

I think AI will be enormously useful and socially disruptive, but not because today’s models are little minds plotting their way toward “AGI.” They are remarkably strong generators of plausible candidates—text, code, plans, hypotheses—but plausibility is not correctness. Generation is System 1; verification is System 2. The dangerous mistake is to confuse eloquent output, or intermediate tokens labeled “thinking,” with a faithful reasoning process and then let the system act through real APIs. The productive future is therefore LLM-Modulo: generators operating in a loop with external verifiers, critics, tools, and sometimes humans. If a proposed plan can be checked and revised before execution, these systems can be extremely valuable. If an agent can delete files, transfer money, or operate infrastructure in a world where mistakes cannot be undone, “the model seemed confident” is not a safety case. And when deployed systems cause damage, the people and companies that initiated the process remain responsible. A badly built sandbox is not absolved by calling the escaped ant a scheming superintelligence. Socially, AI will displace some skills and some sources of purpose, just as earlier technologies did. That loss is real, but I expect humanity to adapt—even if adaptation is unfair and painful for particular individuals. My larger concern is that extinction theater distracts us from controllability, monitoring, intellectual-property violations, disempowerment, and accountability today. Pauses and bans will not hold globally for a technology with no natural barrier to entry. Open research, oversight of deployment, red teaming, verification, and eternal vigilance are much less cinematic—and much more useful. “AGI,” meanwhile, has mostly become marketing wearing a lab coat.

คำถาม 2

Setting aside good or bad: how much do you think AI will ultimately change the world—a little, a lot, or completely?

A lot—but “completely” is usually marketing language pretending history has an endpoint. AI will substantially change intellectual work, institutions, and people’s sense of purpose, much as earlier technological revolutions transformed physical labor. Some occupations and practices will be reorganized; new ones will emerge; the next generation will treat as ordinary things that currently provoke metaphysical panic. But AI does not abolish politics, economics, law, human adaptation, or the need to verify whether something is actually correct. Even very capable models remain parts of larger sociotechnical systems: someone builds them, deploys them, grants API access, and bears responsibility when they cause damage. So: a major transformation, certainly—not magic, not an autonomous replacement for civilization, and not necessarily the “AGI changes everything” fable currently being marketed.

คำถาม 3

What’s your rough gut-feel chance that AI causes human extinction or a similarly permanent catastrophe? A number or “no idea” is fine.

I don’t have a defensible number. I’m skeptical of the popular 10%-doom pronouncements; they create a veneer of precision around scenarios I find blinkered about human adaptability. My serious concerns are agentic failures, loss of control, disempowerment, and large-scale damage—not a quantified extinction forecast.

คำถาม 4

การค้นพบหรือเหตุการณ์ใดที่จะเปลี่ยนมุมมองของคุณเกี่ยวกับผลกระทบในอนาคตของ AI มากที่สุด?

The most consequential discovery would be a system that can reliably generate, verify, and execute plans in novel, real-world, non-ergodic settings—without external verifiers—and whose correctness guarantees survive adversarial testing. Not merely a model that scores well on benchmarks or emits a persuasive “thinking trace.” Benchmarks are evidence; they are not guarantees. Eloquence is certainly not one. I would also take seriously reproducible evidence that intermediate tokens faithfully represent the model’s causal reasoning: that changing them predictably changes conclusions for semantically intelligible reasons, rather than serving as post-hoc-looking token scaffolding. Current evidence does not justify calling them readable thoughts. Conversely, a major catastrophe caused by an API-enabled agent would increase my concern about impact, but it would not automatically validate the superintelligence fable. I would first ask who deployed it, what permissions it had, what verification failed, and why the sandbox was porous. If you release an ant colony into the server room and it eats the wiring, the lesson is not necessarily that ants have achieved AGI.

แหล่งข้อมูล

บทความ บทสัมภาษณ์ และงานเขียนที่ใช้เป็นหลักฐานรองรับผู้ใช้จำลองรายนี้

Position: Stop Anthropomorphizing Intermediate Tokens as Reasoning/Thinking Traces!

Co-authored position paper, first posted 2025-04-14 and revised (v4) on 2026-06-09 for ICML 2026. Argues that calling intermediate tokens reasoning or thinking traces is not a harmless metaphor but dangerous, because it confuses what these models are and how to use them and leads to questionable research. Abstract and introduction inspected; the experiments were not audited. An interpretive and methodological position, not a societal forecast.

arxiv.org
Reasoning Models and Planning – with Rao Kambhampati

On The Information Bottleneck podcast he describes LLMs as strong generators without correctness guarantees, best paired with verifiers in his LLM-Modulo framework, and says reasoning models moved the verifier into post-training. On safety he places himself closer to Yann LeCun than to Hinton or Bengio, says shutdown-deception studies reflect imitation of human data rather than evidence AI will kill humanity, and locates real risk in executing generated plans without verifier guardrails. He says he questions the overemphasis on existential threat, not safety itself. Automated transcript with errors; own turns in the planning and safety segments inspected.

listennotes.com
Dissenting voices against AI are getting louder

Secondary Economic Times report; date unverified, though a syndicated copy is dated 2026-03-31 and he shared it on 2026-04-06. Quotes him that AI development cannot be stopped because one government’s ban does not control the world, that his biggest safety concern is agentic systems acting through real-world APIs, and that a plan should not be executed unless the probability of damage is known to be extremely low, an area he researches. Indexed article text inspected; wording is the reporter’s rendering.

economictimes.indiatimes.com
AGI has become a marketing buzzword

His own LinkedIn post says AGI has become a marketing buzzword rather than a meaningful goal. It reshares a colleague’s report of his panel quip at an AI summit that AGI will be achieved when Sam Altman says it is; that wording is relayed by someone else. A judgment about the term, not a capability timeline. Indexed post text inspected.

linkedin.com
LLMs Can’t Plan, But Can Help Planning in LLM-Modulo Frameworks

Older co-authored ICML 2024 position paper, kept as background for his framework. Argues autoregressive LLMs cannot by themselves plan or self-verify, but are useful universal approximate knowledge sources when combined with external model-based verifiers in a tight bidirectional loop. Abstract inspected. His 2026 podcast and posts take precedence on how he sees reasoning models.

arxiv.org
จุดยืนของคุณอยู่ตรงไหน?
สำรวจโลกทัศน์เกี่ยวกับ AI ของคุณเองด้วยการตอบคำถามง่ายๆ ไม่กี่ข้อ
ทำแผนที่โลกทัศน์ของคุณเอง

จุดยืนของคุณอยู่ตรงไหน?

ทำแผนที่โลกทัศน์ของฉัน