情報収集は無限に広がるタスク 確率的に報酬が与えられるので過大評価しがち 間欠強化 内部探検と外部探検 どこを探検すべきか考えないまま外をさまよい歩いても非効率 街灯の下で鍵を探す まず内部探検することが重要 無目的な散策も娯楽として有用だが、有用な情報収集をやってる気持ちになってはいけない これは「自戒をこめて」です 最近やっぱり僕もOpenAIの動きとかを見てソワソワしてしまいがち 落ち着きが必要 ソワソワと無目的な情報収集をしても安心とか自信とか落ち着きは得られない 初出 /villagepump/2023/11/13