No ReadMe - guess it should be the same as openbuddy-falcon-7b-v5-fp16
#1
by
maddes8cht
- opened
This Model does not have a readme.
I guess this is just Version 6 of https://huggingface.co/OpenBuddy/openbuddy-falcon-7b-v5-fp16, which then is V5, and it should have the same readme.
Yes, you are right!
接下来还会有小参数中文falcon的续作吗🤩
可以关注一下我们的 mistral-7b，会比falcon-7b强，而且最近我们可能会重新微调一个mistral的版本。
是有可能利用像Zephyr-beta提到的一些如DPO方法改善openbuddy-mistral的对话能力嘛？看上去很像是一个热点，而且两小时前CausalLM也发布了一个亮眼的DPO尝试
https://huggingface.co/CausalLM/14B-DPO-alpha
这似乎对于提升中文或英文对话能力都有所裨益
重新调的版本应该是在zephyr-7b的基础上，增加多语言的支持