Твердження про те, що глибоке навчання — це «просто купа множень матриць», приблизно так само інформативно, як і твердження, що комп'ютери — це «просто купа транзисторів» або що бібліотека — це «просто багато паперу та чорнила». Це правда, але підкладка для кодування тут є найменш важливою частиною. Цікавими і корисними є програми, що кодуються: що вони вміють, що не можуть, наскільки добре узагальнюють, наскільки ефективно їх можна вивчити і т.д.