单层Transformer能否匹敌全参数RL训练？

Transformer模型中的强化学习适配显示，改进高度集中在特定中层，而非所有层均匀参数更新。