5
Помилка перехресної ентропії в нейронних мережах
У програмі MNIST for ML початківці визначають перехресну ентропію як Ну'( у) : = - ∑iу'iжурнал( уi)Ну'(у): =-∑iуi'журнал(уi)H_{y'} (y) := - \sum_{i} y_{i}' \log (y_i) уiуiy_i - передбачуване значення ймовірності для класу а - справжня ймовірність для цього класу.iiiу'iуi'y_i' питання 1 Хіба це не проблема, що (у ) може бути …