Über ISP musst du auch Reset und SCK an den Seriellen Port ziehen, beide von PC Richtung µC.

Schau mal da:

http://s-huehn.de/elektronik/avr-prog/avr-prog.htm