如何設計更加穩健的編輯方法,在確保編輯有效性的同時,也能夠避免模型崩潰的問題?
為了設計更加穩健的編輯方法，研究者可以採用統一鍵的策略，即在編輯過程中始終使用帶前綴的鍵，並在測試階段也使用帶前綴的鍵。這樣可以確保編輯過程中的一致性，從而避免因鍵的不同而導致的模型崩潰。此外，在測試階段，對於首個詞彙的情況，可以隨機添加前綴文本，以確保模型在編輯後的有效性和穩定性。這種方法不僅能夠防止模型崩潰，還能保持編輯的有效性，從而提高模型的整體性能。實驗結果顯示，這種方法在多個大型語言模型上均能有效防止崩潰，同時保持編輯的成功率。