Eric Stewart erklärte seiner Frau, die Worte 'Ich liebe dich’ würden irgendwann nichts mehr bedeuten, wenn er sie immer wieder zu ihr sagt. Daraus entsprang die Idee zu I’m Not In Love.

Von den Bandmitgliedern Kevin Godley und Lol Creme wurde der Song, der von Stewart als Bossa Nova konzipiert worden war, verworfen. Erst Studiomusiker, die das Lied wiederholt vor sich hin sagen, veranlassten den Rest der Band, eine neue Version zu erarbeiten

Die Textpassage "Be quiet, big boys don't cry" flüsterte Kathy Redfern, die Sekretärin der Strawberry Studios, wo I’m Not In Love aufgenommen wurde.