Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Can LLMs Uncover Hidden Physical Laws through Free Exploration?

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

61 RADAR
Research Autonomous Scientific Discovery · 1 nguồn đối chiếu · 2026-10-27 17:57:00 +0000 UTC

Can LLMs Uncover Hidden Physical Laws through Free Exploration?

Nguồn: arXiv AI
↗

Nghiên cứu giới thiệu LongChang, một khung thử nghiệm tự động đánh giá khả năng tự do khám phá và phát hiện các định luật vật lý bị biến đổi của LLM trong thế giới mô phỏng. Kết quả thử nghiệm trên 12 mô hình cho thấy chỉ có GPT-6-Astra đạt tỷ lệ phát hiện 16,7%, trong khi 11 mô hình còn lại đạt 0%, phản ánh hạn chế lớn của LLM hiện nay trong việc phát hiện dị thường và tự rút ra quy luật mới mà không có sự định hướng từ con người.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Công trình chỉ ra ranh giới thực tế của AI for Science hiện nay: các mô hình ngôn ngữ lớn vẫn chưa đủ năng lực tự chủ hình thành câu hỏi nghiên cứu và phát hiện tri thức mới từ dữ liệu quan sát nếu thiếu sự dẫn dắt của con người, đặt ra bài toán cốt lõi cần giải quyết cho thế hệ AI tiếp theo.

Developer 57
Business 44
Novelty 85
Actionable 40

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Scientific discovery often begins with an unexpected observation that prompts a new research question. In a world with altered physical laws, can large language models (LLMs) notice unexpected behavior, such as heavier objects falling more slowly, and discover the law through experiments without being told what to investigate? To evaluate this ability, we introduce LongChang, an automated framework that creates simulated worlds with altered physics, where one or more laws differ from ordinary physics. The evaluated LLMs act as explorers, manipulating objects and building tools to investigate their own questions without research tasks or hints about these laws. Separate LLM agents generate and review scenes, review tool designs, and evaluate reports for correctness and experimental support using the altered physical laws and exploration records. These records guide scene evolution for further exploration, allowing the full cycle to run without human intervention. Among 12 LLMs, GPT-6-Astra achieves a discovery rate of 16.7%, while the other 11 score 0%. The exploration records reveal uninvestigated anomalies and only partial identification of the altered physical laws.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-10-28 09:48:30 +0000 UTC
{"tags": ["Scientific Discovery", "AI Agents", "Simulation", "Physics", "Benchmark", "Autonomous Exploration"], "risks": ["Năng lực tự khám phá khoa học của LLM hiện tại còn rất yếu (đa số đạt 0%), không thể tin cậy để tự tiến hành nghiên cứu độc lập.", "Nguy cơ mô hình bị thiên kiến bởi tri thức vật lý sẵn có trong dữ liệu huấn luyện thay vì tin vào dữ liệu thực nghiệm quan sát được.", "Chi phí suy luận và độ phức tạp cao khi vận hành toàn bộ chu trình multi-agent mô phỏng liên tục."], "category": "Research", "entities": ["LongChang", "GPT-6-Astra", "LLM"], "summary_vi": "Nghiên cứu giới thiệu LongChang, một khung thử nghiệm tự động đánh giá khả năng tự do khám phá và phát hiện các định luật vật lý bị biến đổi của LLM trong thế giới mô phỏng. Kết quả thử nghiệm trên 12 mô hình cho thấy chỉ có GPT-6-Astra đạt tỷ lệ phát hiện 16,7%, trong khi 11 mô hình còn lại đạt 0%, phản ánh hạn chế lớn của LLM hiện nay trong việc phát hiện dị thường và tự rút ra quy luật mới mà không có sự định hướng từ con người.", "key_changes": ["Giới thiệu LongChang: khung tự động hóa đánh giá khả năng khám phá định luật vật lý bị biến đổi trong môi trường mô phỏng của LLM mà không cần nhiệm vụ hay gợi ý trước.", "Cơ chế khép kín hoàn toàn bằng multi-agent: các tác nhân LLM độc lập tạo/duyệt bối cảnh, thẩm định thiết kế công cụ và chấm điểm báo cáo thực nghiệm.", "Kết quả thử nghiệm trên 12 LLM: GPT-6-Astra đạt tỷ lệ phát hiện 16,7%, trong khi 11 mô hình còn lại đạt 0%.", "Dữ liệu thăm dò chỉ ra LLM thường bỏ sót các hiện tượng dị thường và chỉ nhận diện được một phần các quy luật bị thay đổi."], "sub_category": "Autonomous Scientific Discovery", "novelty_score": 85, "business_score": 35, "research_score": 95, "why_it_matters": "Công trình chỉ ra ranh giới thực tế của AI for Science hiện nay: các mô hình ngôn ngữ lớn vẫn chưa đủ năng lực tự chủ hình thành câu hỏi nghiên cứu và phát hiện tri thức mới từ dữ liệu quan sát nếu thiếu sự dẫn dắt của con người, đặt ra bài toán cốt lõi cần giải quyết cho thế hệ AI tiếp theo.", "developer_score": 55, "importance_score": 75, "possible_use_cases": ["Đánh giá chuẩn năng lực tự khám phá giả thuyết và tư duy khoa học của các hệ thống AI Agent thế hệ mới.", "Ứng dụng mô phỏng multi-agent tự động để kiểm thử và khám phá trong các bài toán AI for Science.", "Huấn luyện và tối ưu khả năng phát hiện dị thường (anomaly detection) cùng kỹ năng thiết kế thí nghiệm tự động của AI trong R&D."], "actionability_score": 40}
← Trang trước Trang 1