Update README.md

README.md

@@ -16,18 +16,19 @@ datasets:
 library_name: diffusers
 ---
 # 更新履歴
-- 2023年8月7日
 
-nijijourneyの画像4500枚ぐらいでフルファインチューニングしました。fp16で壊れないVAEに取り替えました。
+- 2023年8月11日
+前回のnijijourneyの画像を混ぜて12000枚で学習しました。
 
-以下フルファインチューニングのハイパーパラメータですが学習率が低すぎたようで絵があまり変化しませんでした。次回は学習率を上げようと思います。
+以下、最後に行ったフルファインチューニング時のパラメータですが、そこに至るまでいろいろ試しているため以下のパラメータでやると失敗するかもしれません。
+学習率は4e-7(constant)から4e-06(cosine)の間あたりが良いのかなと思います。
 
 | ハイパーパラメータ       | 値                                   |
 |-----------------------|-------------------------------------|
 | GPU                   | RTX3090 24GB                        |
 | optimizer_type        | Lion                                |
 | optimizer_args        | weight_decay=0.015, betas=.9,.999   |
-| learning_rate         | 1e-7                                |
+| learning_rate         | 4e-6                                |
 | lr_scheduler          | cosine                              |
 | gradient_checkpointing|                                     |
 | mixed_precision       | bf16                                |
@@ -35,11 +36,18 @@ nijijourneyの画像4500枚ぐらいでフルファインチューニングし
 | max_token_length      | 225                                 |
 | min_snr_gamma         | 5                                   |
 | noise_offset          | 0.0357                              |
-| max_train_epochs      | 5                                   |
+| max_train_epochs      | 3                                   |
 | batch_size            | 10                                  |
 | enable_bucket         | true                                |
 | resolution            | [1024,1024]                         |
 
+
+- 2023年8月7日
+
+nijijourneyの画像4500枚ぐらいでフルファインチューニングしました。fp16で壊れないVAEに取り替えました。
+
+学習率1e-07が低すぎたようで絵があまり変化しませんでした。次回は学習率を上げようと思います。
+
 - 2023年8月1日
 
 nijijourneyの画像100枚ぐらいでLoRAファインチューニングなどをしました。
@@ -55,7 +63,7 @@ nijijourneyの画像100枚ぐらいでLoRAファインチューニングなど
 
 Prompt: 
 ```
-1girl
+1girl, town
 ```
 Negative prompt: 
 ```