Hab das gerade noch mal getestet, aber eigentlich ganz klar.
Du drückst die Taste, wird erkannt, LED geht aus, delay läuft. Jetzt kommt es darauf an wann du die Taste auslässt.
Lässt du sie unmittelbar vor dem Ablauf des delay los, hast du keine Verzögerung mehr.
Es ist also Glückssache wie lange die LED noch aus bleibt.
So wie du es willst, müsste das delay nach dem loslassen der Taste beginnen.