this is a test for a new file 科研写作评估 idea生成 科研图表解读/生成 科研结论生成 2026 Xiaoyu Xiong, Yuqi Ren, and Deyi Xiong. 2026. EvoSci: A Bio-Inspired Multi-Agent Framework for the Evolution of Scientific Discovery. In Proceedings of the 64th Annual Meeting of the Association for Computational Linguistics (Volume 1: Long Papers), …

阅读CEAES: Bidirectional Reinforcement Learning Optimization for Consistent and Explainable Essay Assessment的补充 之前在吴恩达机器学习网课中学习的应该是基于价值的（Value-Based）的强化学习方法，即DQN。它是通过学习价值函数V（s）来间接地获得策略。 而基于策略（Policy-Based）的方法则直接参数化并优化策略本身。为此设计了一个用参数$\theta$控制的函数函数$\pi_{\theta}(a|s)$。目的是找到最优的参数$\theta^$，使策略$\pi_{\theta^}$积累的回报最大化。