Ja das ist richtig, der Quarz ist eben nur ein Rückkoppelelement um im Endeffekt den Takt für den Controller zu erzeugen. Hier ist diese Seite auch sehr gut:
http://sprut.de/electronic/pic/osc/index.htm

Ist zwar für PIC nicht AVR aber prinzipiell funktioniert das bei beiden gleich.