Das kann nicht nur gut sein, sondern das ist immer so - und zwar je nach Umgebung ein paar hundert mal in der Sekunde.
Ohne PullUp/-Down fängt der halt jede noch so kleine Schwankung auf. Mit der Hand in die Nähe -> GND - mit ner Spannung in die Nähe -> High-Pegel.