File size: 1,476 Bytes
7645842
 
 
 
 
 
 
 
ebd9044
7645842
ebd9044
7645842
 
 
 
 
 
 
 
 
 
 
46e72ed
ebd9044
 
 
 
 
 
 
46e72ed
 
 
 
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
---
base_model: llm-jp/llm-jp-3-13b
tags:
- text-generation-inference
- transformers
- unsloth
- llama
- trl
license: cc-by-nc-sa-2.0
language:
- ja
---

# Uploaded  model

- **Developed by:** MMMio
- **License:** apache-2.0
- **Finetuned from model :** llm-jp/llm-jp-3-13b

This llama model was trained 2x faster with [Unsloth](https://github.com/unslothai/unsloth) and Huggingface's TRL library.

[<img src="https://raw.githubusercontent.com/unslothai/unsloth/main/images/unsloth%20made%20with%20love.png" width="200"/>](https://github.com/unslothai/unsloth)

# README
## モデル概要
本モデルは、日本語事前学習済みモデル [llm-jp/llm-jp-3-13b](https://huggingface.co/llm-jp/llm-jp-3-13b)に、[ichikara-instruction: LLMのための日本語インストラクションデータ](https://liat-aip.sakura.ne.jp/wp/llm%E3%81%AE%E3%81%9F%E3%82%81%E3%81%AE%E6%97%A5%E6%9C%AC%E8%AA%9E%E3%82%A4%E3%83%B3%E3%82%B9%E3%83%88%E3%83%A9%E3%82%AF%E3%82%B7%E3%83%A7%E3%83%B3%E3%83%87%E3%83%BC%E3%82%BF%E4%BD%9C%E6%88%90/)を用いて Fine-Tuning したモデルである。

## ライセンス
本モデルは、[CC-BY-NC-SA](https://creativecommons.org/licenses/by-nc-sa/4.0/) ライセンスの下で公開されています。

# LLMでの出力方法
## 1. 学習方法
サンプルコードを使用してFine-Tuningをおこなった。学習データも同様
## 2. 推論方法
T4 GPU環境で、同じくサンプルコード (unsloth) を使用して推論。