Create README.md
Browse files
README.md
ADDED
@@ -0,0 +1,62 @@
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
1 |
+
---
|
2 |
+
|
3 |
+
license: gpl-3.0
|
4 |
+
language:
|
5 |
+
|
6 |
+
- en
|
7 |
+
- zh
|
8 |
+
tags:
|
9 |
+
- Text Generation
|
10 |
+
|
11 |
+
---
|
12 |
+
|
13 |
+
|
14 |
+
# ChatLaw-13B
|
15 |
+
|
16 |
+
- Github: [ChatLaw](https://github.com/PKU-YuanGroup/ChatLaw)
|
17 |
+
|
18 |
+
此版本为学术demo版,基于姜子牙[Ziya-LLaMA-13B-v1](https://huggingface.co/IDEA-CCNL/Ziya-LLaMA-13B-v1)训练而来(LLaMA权重的许可证限制,我们无法直接发布完整的模型权重,用户需自行合并)
|
19 |
+
|
20 |
+
|
21 |
+
# ChatLaw系列模型
|
22 |
+
|
23 |
+
- [ChatLaw-33B](https://huggingface.co/JessyTsu1/ChatLaw-33B)
|
24 |
+
- [Law Text2Vec](https://huggingface.co/chestnutlzj/law-sentence-similarity-roberta-base)
|
25 |
+
|
26 |
+
|
27 |
+
## 简介 Brief Introduction
|
28 |
+
|
29 |
+
ChatLaw法律大模型目前开源的仅供学术参考的版本为姜子牙-13B版本、Anima-33B版本,我们使用大量法律新闻、法律论坛、法条、司法解释、法律咨询、法考题、判决文书等原始文本来构造对话数据。
|
30 |
+
|
31 |
+
基于姜子牙-13B的模型是第一版模型,得益于姜子牙的优秀中文能力和我们对数据清洗、数据增强过程的严格要求,我们在逻辑简单的法律任务上表现优异,但涉及到复杂逻辑的法律推理任务时往往表现不佳。
|
32 |
+
|
33 |
+
随后基于[Anima-33B](https://github.com/lyogavin/Anima),我们增加了训练数据,做成了ChatLaw-33B,发现逻辑推理能力大幅提升,由此可见,大参数的中文LLM是至关重要的。
|
34 |
+
|
35 |
+
基于可商用的模型训练而成的版本会作为我们产品[ChatLaw](http://www.chatlaw.cloud/)内部接入的版本,对外不开源。
|
36 |
+
|
37 |
+
|
38 |
+
## 效果 Results
|
39 |
+
|
40 |
+
![](https://raw.githubusercontent.com/JessyTsu1/ChatLaw/master/demo/demo_3.jpg)
|
41 |
+
|
42 |
+
![](https://raw.githubusercontent.com/JessyTsu1/ChatLaw/master/demo/demo_1.jpg)![](https://raw.githubusercontent.com/JessyTsu1/ChatLaw/master/demo/demo_2.jpg)
|
43 |
+
|
44 |
+
|
45 |
+
## 使用 Usage
|
46 |
+
|
47 |
+
由于LLaMA权重的许可限制,该模型不能用于商业用途,请严格遵守LLaMA的使用政策。考虑到LLaMA权重的许可证限制,我们无法直接发布完整的模型权重。、
|
48 |
+
|
49 |
+
|
50 |
+
欢迎引用我们的[网站](https://github.com/PKU-YuanGroup/ChatLaw):
|
51 |
+
|
52 |
+
```
|
53 |
+
@misc{ChatLaw,
|
54 |
+
author={Jiaxi Cui and Zongjian Li and Yang Yan and Bohua Chen and Li Yuan},
|
55 |
+
title={ChatLaw},
|
56 |
+
year={2023},
|
57 |
+
publisher={GitHub},
|
58 |
+
journal={GitHub repository},
|
59 |
+
howpublished={\url{https://github.com/PKU-YuanGroup/ChatLaw}},
|
60 |
+
}
|
61 |
+
```
|
62 |
+
|