Kann es sein, dass Dein INT1 Pin floated also in der Luft hängt?
Oder ihn irgendetwas anderes auslöst?
Du solltest unbedingt auch die INT1 ISR einbinden, auch wenn die nichts macht, sonst verabschiedet sich bei unbeabsichtigter Auslösung Dein µC ins Nirvana
Gruß