Download Latest Version v2.4.0 source code.zip (9.0 MB)
Email in envelope

Get an email when there's a new version of MedicalGPT

Home / 1.9.0
Name Modified Size InfoDownloads / Week
Parent folder
1.9.0 source code.tar.gz 2024-04-17 8.5 MB
1.9.0 source code.zip 2024-04-17 8.5 MB
README.md 2024-04-17 629 Bytes
Totals: 3 Items   17.0 MB 0

v1.9版本

  1. 支持了 ORPO,详细用法请参照 run_orpo.sh。 不需要参考模型的优化方法,通过ORPO,LLM可以同时学习指令遵循和满足人类偏好,可以直接用base模型训练ORPO,训练相较SFT+DRO更简单,相对需要更多偏好数据集数据。
  2. 新增了支持微调qwen1.5, cohere 模型,和对应的template。

What's Changed

Full Changelog: https://github.com/shibing624/MedicalGPT/compare/1.8.0...1.9.0

Source: README.md, updated 2024-04-17