hi

die 4,25 V sind aber zu wenig. der 5V-Regler heißt ja so, weil er ja 5Volt liefern soll . die eingangsspannung sollte mindestens 2volt höher sein als die ausgangsspannung (also mindestens 7 Volt an den Eingang. [EDIT: ah, in deinem schaltplan steht 12Volt - das müsste der reler doch gut schaffen])
dreh' mal die eingangsspannung auf - dann müsste er wirklich auf 5v regeln.
ansonsten stimmt was nicht mit deinem messgerät (mal batterie wechseln?)

zu den elkos und kondensatoren - ein bild sagt mehr als 1000 worte:
http://bwir.de/images/schaltungen/sr_s.gif

mfg
BMS