Poste dein Testprogramm! Nimm erst mal alle PCF´s raus! Und teste dann den Pegel. Pullups brauchst du wie gesagt nicht, solange nicht noch mehrere externe I2C Bausteine dran hängen.
Wenn du Ports richtig ein und ausschaltest dann ist das natürlich nix mit dem Pegel den du da beschreibst, deutet dann auf defekten Baustein hin. Daher erst mal aus IC-Fassung ziehen und dann Stück für Stück vorgehen.