home/categories/machine-learning/ecnu-icalk-autoskill-skillbank-convskill-chinese-gpt4-8-glm4-7-pytorch动态多损失平衡与可学习参数控制-skill-md
machine-learningdata-ai

pytorch

针对PyTorch中多任务学习或知识蒸馏场景,使用可学习参数(nn.Parameter)动态调整多个损失函数权重比例的技能。涵盖参数定义、优化器配置、数值稳定性处理(如对数空间转换)以及GradNorm算法的实现逻辑。

ECNU-ICALK
maintainer
ECNU-ICALK
Обновлено 13.03.2026
Звёзды
304
Форки
34
quick start

Installation and usage

针对PyTorch中多任务学习或知识蒸馏场景,使用可学习参数(nn.Parameter)动态调整多个损失函数权重比例的技能。涵盖参数定义、优化器配置、数值稳定性处理(如对数空间转换)以及GradNorm算法的实现逻辑。

Установка
$ install --globalskills.sh
Использование

После установки вы можете использовать этот skill, выполнив следующую команду в терминале:

skills use pytorch