Skip to content

tie_word_embeddings为true的模型,LoRA 微调,additional_target只学习 embed_tokens 时,推理时能够输出新添加的特殊 Token,但同时学习 embed_tokens 和 lm_head 后则不会 #1899

tie_word_embeddings为true的模型,LoRA 微调,additional_target只学习 embed_tokens 时,推理时能够输出新添加的特殊 Token,但同时学习 embed_tokens 和 lm_head 后则不会

tie_word_embeddings为true的模型,LoRA 微调,additional_target只学习 embed_tokens 时,推理时能够输出新添加的特殊 Token,但同时学习 embed_tokens 和 lm_head 后则不会 #1899

Triggered via issue December 25, 2024 09:38
Status Success
Total duration 11s
Artifacts

label_issue.yml

on: issues
label_issue
3s
label_issue
Fit to window
Zoom out
Zoom in

Annotations

1 warning
label_issue
ubuntu-latest pipelines will use ubuntu-24.04 soon. For more details, see https://github.com/actions/runner-images/issues/10636