StarRing2022 commited on
Commit
2ab190d
1 Parent(s): 3b48323

Update README.md

Browse files
Files changed (1) hide show
  1. README.md +6 -0
README.md CHANGED
@@ -1,3 +1,9 @@
1
  ---
2
  license: lgpl-3.0
3
  ---
 
 
 
 
 
 
 
1
  ---
2
  license: lgpl-3.0
3
  ---
4
+ 一种基于Clip改进的,通用HF格式的冻结LLM语言模型进行图文对齐训练的方案,以RWKV-4-World-0.4B为例,Cifar10为数据集
5
+
6
+ 共创合作:受到visualrwkv冻结LLM模型启发(https://github.com/howard-hou/VisualRWKV)
7
+
8
+ RWKV-4-World-0.4B模型及训练30个epoch后的checkpoint文件:
9
+ GIT开源地址:https://github.com/StarRing2022/Dlip-RWKV/