Рискну предположить, что это может быть связано с доступом
отладчика к периферии "на лету", т.е. и программа исполняется и в
отладчике показывается значение регистров периферии. В какой-то
момент доступ к периферии со стороны отладчика и ядра как-то не
удачно накладываются друг на друга и происходит сбой.