Die Wärmestrahlung von Objekten nahe Raumtemperatur ist im wesentlichen bei längeren Wellenlängen > 5 µm, also nicht passend für eine SI Fotodioden - die gehen für Wellenlängen unter 1 µm. Ab etwa 200 C reicht dann ggf. auch eine Si Fotodiode.

Für passiv IR nimmt man eher einen Sensor wie diesen:
http://www.reichelt.de/Fotodioden-et...=0&OFFSET=500&