最大化互信息(MIM)与最小化交叉熵(cross-entropy)的联系与区别?

在自监督学习中,有时会用最大化互信息作为优化的目标,由于MIM难以求得,一般会将其转化为InfoNCE的形式 [图片] 当Y(波浪线)=Y时,则类似于…
关注者
5
被浏览
472
暂时还没有回答,开始