主要是要記錄一下一些實驗性的東西,失敗的過程也是過程,雖然沒辦法完全理解,但是總是可以大概知道這些東西是怎麼組成的。前些日子跟一樣是在玩 Stable Diffusion 的朋友聊,其實市面上不管是模型也好,理論也好,背後都是靠超多錢(一大堆 A100 運算好幾千個小時)堆出來的成果。
Lora Block Weight, Block?
我上次的訓練文章 有提到這個東西,後來在 Facebook 社團有人分享了他的訓練記錄,
使用 kohya_ss 訓練 LoRA 時的一些技巧與想法, Jason Kuan
中間也提到了關於
Kohya 原本是一套在 CLI 底下的訓練工具,後來有人把他做成 GUI,然後又有人把他 Docker 化,對我來說其實在 CLI 底下也沒有不方便。不過,既然有提供 Docker 化的 GUI 介面,那麼用這個來做設定也是挺方便的。
由於個人對於作業系統某種程度上的潔癖,所以對於這樣的東西把他放在 Docker 裡面也是挺合理的。雖然說,這兩個都有人把他做到 Docker 裡面去,但是實際上在跑起來的時候,問題還是挺多的。
市面上的 Stable Diffusion, Lora 的相關影片相當多,如果有興趣的人可以去找影片看看,我這邊僅只是記錄一些實驗性的東西。