当前位置:   article > 正文

[论文笔记] Gradient Surgery for Multi-Task Learning_gradient surgery for multi task

gradient surgery for multi task

【强化学习 137】PCGrad - 知乎

多任务学习(multi task):任务权重、loss均衡、梯度下降那点事 - 知乎

        ICLR 2020 rejected submission:Yu T, Kumar S, Gupta A, et al. Gradient surgery for multi-task learning[J]. arXiv preprint arXiv:2001.06782, 2020.

        multi-task RL 里面面临比较麻烦的优化问题,因为各个任务之间是很不相似的,会相互影响。本文从梯度冲突的角度,解决 multi-task 中的优化问题。

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/小小林熬夜学编程/article/detail/508344
推荐阅读
相关标签
  

闽ICP备14008679号