also vielleicht liegt es daran, das weißes licht alle wellenlängen beinhaltet. also wird es auch von jeder farbe gleich gut reflektiert.
Um wirklich herauszufinden welche Farbe dein Papier hat, würde ich dieses mit zwei verschiedenen LEDs beleuchten (zB.: rot und grün) und an den beiden messwerten kannst du dann ablesen um welche farbe es handelt.

Beispiel:
Rotes licht wird auf einem roten Untergrund um einiges besser reflektiert als grünes. auf schwarzem untergrund werden beide gleich schlecht reflektiert und auf weißen beide gleich gut.

jede farbe wird ihre besonderen merkmale bei der messung haben (so war es auf jeden fall bei mir) und somit kann man mit bisschen programmiergeschick auch eine gute funktion schreiben die dir die farbe ausgibt.