Ira Shavitt, Eran Segal Weizmann Institute of Science 这篇文章提出针对每个权重都施加不同的正则系数，这样可以通过更充分的利用更相关的输入，进而可以提升深度神经网络的性能。直接这样操作会使得超参数难以处理，这篇文章提出一种正则学习网络，通过引入一种高效的超参数调优策略，具体而言即为最小化反事实误差，来克服超参数难以处理的问题。RLN在表格型数据集上效果明显优于深度神经网络，并且取得的结果跟梯度提升树相当。将梯度提升树根RLN结合起来可以取得很好的效果。RLN能够生…
Gamaleldin F. Elsayed, Dilip Krishnan, Hossein Mobahi, Kevin Regan , Samy Bengio Google Research 这篇论文提出利用深度学习来产生大间隔分类器。间隔，即最小化决策边界的最小距离，可以成功用于分类和回归任务中。但是，大部分大间隔算法适用于特征表示事先设计好的浅层模型，传统的神经网络中的间隔方法只能使得输出层的间隔较大。因此，这些方法不适合深层网络。 这篇文章提出一种新的损失函数，这种损失函数可以作…
