Tutorograd commited on
Commit
dff698f
1 Parent(s): 18e63ea

Create dancing-workflow.md

Browse files
Files changed (1) hide show
  1. dancing-workflow.md +63 -0
dancing-workflow.md ADDED
@@ -0,0 +1,63 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ # Автор: Altaiir123
2
+
3
+ # Workflow and Settings
4
+
5
+ ## Positive Prompts
6
+
7
+ - (masterpiece)
8
+ - (best quality:1.3)
9
+ - 8k wallpaper
10
+ - smooth gradients
11
+ - soft shadows
12
+ - 1girl
13
+ - clean background
14
+ - detailed face
15
+ - brown eyes
16
+ - realistic eyes
17
+ - smile
18
+
19
+ ## Negative Prompts
20
+
21
+ - (worst quality, low quality, normal quality:1.8)
22
+ - nude
23
+ - nsfw
24
+ - animals
25
+ - [add your favourite negative prompts]
26
+
27
+ ## Settings
28
+
29
+ - Steps: 20
30
+ - Sampler: Euler a
31
+ - CFG scale: 7
32
+ - Denoising strength: 0.4
33
+ - Clip skip: 2
34
+ - ControlNet: softedge_hed weight: 1.5
35
+ - My prompt is more important
36
+ - Temporalnet, preprocesor: none, weight: 0.7
37
+ - My prompt is more important
38
+ - [Loopback]
39
+
40
+ ## Workflow
41
+
42
+ Сначала измените размер и обрежьте видео до желаемого размера, учитывая, что SD лучше всего работает с квадратными изображениями. Затем извлеките из видео отдельные кадры, для медленно движущихся видео достаточно 18 кадров в секунду, а для динамичных - 30 кадров в секунду.
43
+
44
+ Затем я взял один кадр и начал создавать прототипы промптов и настроек в Img2Img, вот несколько полезных наблюдений: как правило, при работе с Img2Img большая степень устранения шумов означает больше изменений и больше мерцания. Чтобы уменьшить это, нужно балансировать denoising и CFG-scale. От выбора Sampler и ControlNet тоже многое зависит, лучшие результаты я получил с Euler a и Softedge_head.
45
+
46
+ Когда я достигаю нужного стиля, наступает время для пакетного создания изображений. Это долгий процесс, который займет несколько часов. Вы можете подглядывать, идет ли процесс успешно, и в случае каких-либо проблем прервать создание изображений.
47
+
48
+ После завершения создания изображений приходит время для рендеринга видео. Я не буду вдаваться в подробности использования программы для редактирования видео, но могу дать несколько важных заметок: используйте устранение мерцания (De-flicker), даже несколько раз, если это необходимо. Для последовательностей изображений с низким количеством кадров в секунду (менее 30 кадров в секунду) используйте методы интерполяции кадров, такие как optical flow.
49
+
50
+ Последний этап - улучшение видео в Topaz Video Ai. Это очень прстаоя в использовании программа, просто измените частоту кадров на 60 и увеличьте разрешение до желаемого. Поздравляю, теперь у вас есть замечательное видео с танцующей аниме-вайфу!
51
+
52
+
53
+ ## Workflow [ENG]
54
+
55
+ First resize and crop the video to desired size, keep in mind the SD works better with square images. Next extract video to images, 18fps is enough for slow moving videos 30fps is good for dynamic.
56
+
57
+ After that I took one frame and began prototyping prompts and settings in Img2Img, here are some useful observations: Generally, with Img2Img, higher denoising means more changes and more flickering. To reduce it, balance denoising and CFG scale. Sampler and ControlNet also matters, I got best results with Euler a and Softedge_head.
58
+
59
+ When I achieve style I'm looking for, it's time for batch generation. This is long process and will take few hours. You can sneak peak if generation is going well and if something went wrong interrupt generation.
60
+
61
+ After generation complete, it's time to render the video. I won't go into the details how to use video editing software, but I can give some important notes: Use deflickering, even few times if needed. For low fps image sequences (under 30fps) use frame interpolation methods like optical flow.
62
+
63
+ The last step is enhancing video in Topaz Video Ai. This is very simple program to use, just change framerate to 60 and upscale to desired resolution. Congratulations, now you have nice anime dancing girl video!