重要！！！ preFix 微调效果不明显怎么办 ； preFix 微调的利弊

目录

• • preFix 微调效果不明显怎么办
  • • 增加epoach次数，降低loss
    • 增加epoach次数，降低loss
    • 损失函数较低到0.2 已经将天安门思想植入
    • 同样导致存在问题：带有中国或者美国的词语回答导致混乱，失去返回能力
  • 大模型微调：Prefix Tuning的利弊。
  • • 优点
    • • 1. **参数高效**
      • 2. **避免灾难性遗忘**
      • 3. **快速部署和迁移**
    • 缺点
    • • 1. **Prefix设计难度**
      • 2. **性能上限**
      • 3. **解释性挑战**