Radar Live
✦ Ask AI
AI INTELLIGENCE & SIGNALS

Satisficing as competitive Bayesian weighting: a minimal model of goal-directed choice under an unattained target

Phân tích đã xử lý trước và các nguồn liên quan.

Tín hiệu Radar

61 RADAR
Research Decision Theory & Bandit Algorithms · 1 nguồn đối chiếu · 2026-11-05 00:45:40 +0000 UTC

Satisficing as competitive Bayesian weighting: a minimal model of goal-directed choice under an unattained target

Nguồn: arXiv AI
↗

Nghiên cứu đề xuất mô hình Attention Competitive Bayes (ACB) nhằm diễn giải lại quy tắc học Risk-sensitive Satisficing (RS) dưới góc nhìn Bayes. Trong ACB, mức kỳ vọng (aspiration level) đóng vai trò là kỳ vọng tiên nghiệm và ngân sách số lần thử nghiệm giới hạn sức ảnh hưởng của dữ liệu quan sát. Mô hình tạo ra hiệu ứng 'pseudo-forgetting', trong đó các lựa chọn bị bỏ rơi sẽ tự động quay về mức kỳ vọng mà không cần loại bỏ dữ liệu quá khứ. Khi mục tiêu không thể đạt được, việc cập nhật linh hoạt mức kỳ vọng giúp tác tử duy trì khả năng khám phá hợp lý và giảm thiểu regret trong bài toán Bernoulli bandit.

✦ TÁC ĐỘNG & GIÁ TRỊ THỰC TIỄN

Nghiên cứu tạo cầu nối toán học chặt chẽ giữa hiện tượng học nhận thức (satisficing, hành vi hướng đích) và học máy thống kê (Bayesian bandit learning). Cơ chế ACB cung cấp giải pháp tự nhiên cho bài toán tái đánh giá các lựa chọn đã bỏ rơi mà không cần tham số quên tùy tiện, mở ra hướng đi mới cho các thuật toán tìm kiếm và cân bằng exploration-exploitation trong AI.

Developer 60
Business 50
Novelty 78
Actionable 62

Nội dung thu thập đã chuẩn hóa

Collected Evidence

Nội dung văn bản được dùng làm dữ liệu đối chứng cho mô hình AI, không phải chỉ thị hệ thống.

Animals and humans often do not maximize; they act relative to goals (aspiration levels) that are frequently not yet met. How can a goal that is not (yet) realized organize choice? Deacon (2012) calls such absence-referenced organization \emph{ententional}, and García-Valdecasas and Deacon (2024) argue that ends are best understood as constraints rather than as particular states. We examine this idea in a minimal formal setting: Risk-sensitive Satisficing (RS), a bandit learning rule that values each action by its share of past trials multiplied by its surplus or shortfall relative to an aspiration level. We show that RS can be rewritten as a Bayesian-like estimator, Attention Competitive Bayes (ACB), in which the aspiration level is the prior mean of every action and the finite budget of trials sets how strongly evidence can override it. Two consequences follow. First, actions that are no longer sampled are partially overridden by the goal rather than by past observations: their estimates relax toward the aspiration level without any data being discarded. This ``pseudo-forgetting'' distinguishes ACB from models with an explicit forgetting rate. Second, when the aspiration is unattainable, exploration does not settle; in Bernoulli bandit simulations, adjusting the aspiration level from evidence reduced regret (expected loss). ACB offers an analyzable model in which an unattained goal and a limited attentional resource jointly constrain behavior, and it yields testable predictions about how organisms revalue options they have abandoned.

Các nguồn đối chiếu cho sự kiện này

1 nguồn
Thông tin phân tích AI & Model Details ▾
Provider: openai-compatible · Model: gemini-3.8-flash-high · Version: analysis-v1 · Time: 2026-11-06 09:57:05 +0000 UTC
{"tags": ["Satisficing", "Bayesian Inference", "Multi-Armed Bandits", "Reinforcement Learning", "Cognitive Science", "Exploration-Exploitation"], "risks": ["Nếu mục tiêu bất khả thi nhưng mức kỳ vọng không được điều chỉnh thích ứng, tác tử sẽ khám phá liên tục không dừng, dẫn đến lãng phí tài nguyên tính toán và chi phí thử nghiệm.", "Mới chỉ được kiểm nghiệm trên mô phỏng cơ bản (Bernoulli bandit), khả năng mở rộng lên không gian hành động lớn hoặc deep RL phức tạp vẫn chưa được chứng minh.", "Hiện tượng 'pseudo-forgetting' có thể khiến hệ thống tái kích hoạt các hành động kém hiệu quả trong môi trường tĩnh có độ trễ lớn."], "category": "Research", "entities": ["Attention Competitive Bayes (ACB)", "Risk-sensitive Satisficing (RS)", "Terrence Deacon", "García-Valdecasas", "Bernoulli Bandit"], "summary_vi": "Nghiên cứu đề xuất mô hình Attention Competitive Bayes (ACB) nhằm diễn giải lại quy tắc học Risk-sensitive Satisficing (RS) dưới góc nhìn Bayes. Trong ACB, mức kỳ vọng (aspiration level) đóng vai trò là kỳ vọng tiên nghiệm và ngân sách số lần thử nghiệm giới hạn sức ảnh hưởng của dữ liệu quan sát. Mô hình tạo ra hiệu ứng 'pseudo-forgetting', trong đó các lựa chọn bị bỏ rơi sẽ tự động quay về mức kỳ vọng mà không cần loại bỏ dữ liệu quá khứ. Khi mục tiêu không thể đạt được, việc cập nhật linh hoạt mức kỳ vọng giúp tác tử duy trì khả năng khám phá hợp lý và giảm thiểu regret trong bài toán Bernoulli bandit.", "key_changes": ["Quy đổi quy tắc học Risk-sensitive Satisficing (RS) thành bộ ước lượng tương đương Attention Competitive Bayes (ACB) dựa trên nguyên lý suy diễn Bayes.", "Mô hình hóa mức kỳ vọng (aspiration level) như giá trị tiên nghiệm (prior mean) chung cho mọi hành động, bị ràng buộc bởi ngân sách chú ý/thử nghiệm hữu hạn.", "Phát hiện cơ chế 'pseudo-forgetting': các lựa chọn không còn được thử nghiệm sẽ tự động trôi về mức kỳ vọng ban đầu mà không cần xóa dữ liệu lịch sử hay đặt tỷ lệ quên tường minh.", "Chứng minh trên mô phỏng Bernoulli bandit rằng việc tự động điều chỉnh mức kỳ vọng theo dữ liệu thực tế giúp giảm đáng kể tổn thất kỳ vọng (regret) khi mục tiêu ban đầu bất khả thi."], "sub_category": "Decision Theory & Bandit Algorithms", "novelty_score": 78, "business_score": 45, "research_score": 85, "why_it_matters": "Nghiên cứu tạo cầu nối toán học chặt chẽ giữa hiện tượng học nhận thức (satisficing, hành vi hướng đích) và học máy thống kê (Bayesian bandit learning). Cơ chế ACB cung cấp giải pháp tự nhiên cho bài toán tái đánh giá các lựa chọn đã bỏ rơi mà không cần tham số quên tùy tiện, mở ra hướng đi mới cho các thuật toán tìm kiếm và cân bằng exploration-exploitation trong AI.", "developer_score": 60, "importance_score": 72, "possible_use_cases": ["Cải tiến thuật toán Multi-Armed Bandit trong hệ thống gợi ý sản phẩm hoặc phân phối quảng cáo khi cần tái khám phá các mục đã lâu không hiển thị.", "Thiết kế cơ chế ra quyết định dựa trên mức thỏa mãn (satisficing) cho tác tử AI tự hành hoạt động trong môi trường có mục tiêu động hoặc chưa thể đạt được ngay.", "Mô hình hóa và kiểm chứng giả thuyết hành vi đưa ra quyết định của con người trong kinh tế học hành vi và khoa học nhận thức."], "actionability_score": 62}