Né dans une famille bourgeoise de Cahors, Olivier De Magny (1529 - 1561) y fit ses études avant de se rendre à Paris, en 1547. Il y attire l'attention de Hugues Salel, poète de la cour de François Ier, qui en fait son secrétaire.

Pendant un voyage qui le conduit à Rome il rencontre Louise Labée, à Lyon, dont il deviendra amoureux. Ses rapports avec Louise Labée sont bien réels mais énigmatiques : celle-ci ne dit pas un mot à son sujet (rien ne prouve qu'il soit l'amant qu'elle chante dans ses textes), tandis que lui s'exprime à son propos ou en rapport avec elle dans plusieurs de ses recueils.

Son séjour en Italie durera trois ans. Il y fera la connaissance de Joachim Du Bellay. A son retour en France il est nommé secrétaire du roi, fonction qu'il exercera jusqu'à sa mort.