HayatoF-1015
commited on
Commit
•
3f13e96
1
Parent(s):
dd623b1
Update README.md
Browse files
README.md
CHANGED
@@ -24,6 +24,42 @@ This llama model was trained 2x faster with [Unsloth](https://github.com/unsloth
|
|
24 |
|
25 |
# elyza-tasks-100-TV_0.jsonlの解答出力の仕方
|
26 |
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
27 |
```python
|
28 |
# 必要なライブラリを読み込み
|
29 |
from unsloth import FastLanguageModel
|
|
|
24 |
|
25 |
# elyza-tasks-100-TV_0.jsonlの解答出力の仕方
|
26 |
|
27 |
+
Omnicampusの環境などでの環境構築の場合
|
28 |
+
```
|
29 |
+
# conda環境の構築
|
30 |
+
wget "https://github.com/conda-forge/miniforge/releases/latest/download/Miniforge3-$(uname)-$(uname -m).sh"
|
31 |
+
|
32 |
+
# このコマンドではいくつか質問があるので答えて下さい。おそらくインストール先のデフォルトは/root/miniforge3かと思います
|
33 |
+
bash Miniforge3-$(uname)-$(uname -m).sh
|
34 |
+
|
35 |
+
# 以下、インストール先が/root/miniforge3であることを前提とします
|
36 |
+
export PATH=/root/miniforge3/bin:$PATH
|
37 |
+
conda init
|
38 |
+
|
39 |
+
# ここで一度、terminalを立ち上げ直す必要があります。
|
40 |
+
# 以下のリンク先に従い環境を作ります。
|
41 |
+
# https://docs.unsloth.ai/get-started/installation/conda-install
|
42 |
+
conda create --name unsloth_env python=3.10 pytorch-cuda=12.1 pytorch cudatoolkit xformers -c pytorch -c nvidia -c xformers -y
|
43 |
+
conda activate unsloth_env
|
44 |
+
pip install "unsloth[colab-new] @ git+https://github.com/unslothai/unsloth.git"
|
45 |
+
pip install --no-deps "trl<0.9.0" peft accelerate bitsandbytes
|
46 |
+
|
47 |
+
# jupyter notebook用のセットアップ。
|
48 |
+
conda install -c conda-forge ipykernel
|
49 |
+
python -m ipykernel install --user --name=unsloth_env --display-name "Python (unsloth_env)"
|
50 |
+
```
|
51 |
+
|
52 |
+
Google colabでの環境構築の部分
|
53 |
+
```
|
54 |
+
%%capture
|
55 |
+
!pip uninstall unsloth -y
|
56 |
+
!pip install --upgrade --no-cache-dir "unsloth[colab-new] @ git+https://github.com/unslothai/unsloth.git"
|
57 |
+
!pip install --upgrade torch
|
58 |
+
!pip install --upgrade xformers
|
59 |
+
!pip install ipywidgets --upgrade
|
60 |
+
```
|
61 |
+
|
62 |
+
|
63 |
```python
|
64 |
# 必要なライブラリを読み込み
|
65 |
from unsloth import FastLanguageModel
|