Die Nordic Teile sind eher in Richtung Low Power und drahtlose Anwendungen optimiert. Das der langsamer ist, als andere M4 Implementierungen, ist schon wahrscheinlich.

Die verlinkte Audio Lib verwendet Fixpunktarithmetik und SIMD-Anweisungen dafür. Beides geht erst ab M4 aufwärts. Von DMA habe ich da bisher nichts gelesen.