Οι τυπικοί αλγόριθμοι βελτιστοποίησης στη μηχανική μάθηση — Adam, L-BFGS και παραλλαγές τους — αντιμετωπίζουν τον χώρο παραμέτρων ενός νευρωνικού δικτύου ως επίπεδη Ευκλείδεια πολλαπλότητα, ακολουθώντας την αντίθετη ...