历史上没有记载司马相如有娶过妾室，倒是他与妻子卓文君感情深厚，两人的爱情故事广为流传。

司马相如是西汉辞赋家，后人称之为赋圣和“辞宗”，因为写《子虚赋》得到汉武帝刘彻的赏识，又写《上林赋》被封为郎。两千多年来他在文学史上一直享有声望，并对中国文学产生了深远的影响。

卓文君是西汉著名的才女，蜀郡巨商卓王孙的女儿，姿容美丽，擅长音律和文章。卓文君仰慕相如的文采，在司马相如来家里做客的时候，透过屏风窥视相如，司马相如便趁机弹了一曲《凤求凰》，表达爱慕。宴会之后，卓文君与司马相如互相表达了爱意，就乘夜私奔了。

此后两人为了生计，变卖所有东西开了家酒铺，文君当垆卖酒，相如打杂，以维持生计。后来司马相如因为文采被汉武帝赏识，得到授官。

传闻司马相如终于被举荐做官后，久居京城，春风得意，赏尽风尘美女，加上官场得意，就产生了弃妻纳妾的心思，正巧遇到茂陵女子貌美如花，想纳为己有，就给妻子写了一封十三字的信：“一二三四五六七八九十百千万”。卓文君读后，看到数字中少了一个“亿”，“无亿”等于“无忆”，卓文君泪流满面，倍感伤怀，感到丈夫要抛弃自己。

卓文君回了一首《怨郎诗》给丈夫：“一别之后，二地相悬。只道是三四月，又谁知五六年。七弦琴无心弹，八行书无可传，九连环从中折断，十里长亭望眼欲穿。百思想，千系念，万般无奈把郎怨。”司马相如读后，惊叹妻子的才华，又回忆起昔日的夫妻恩爱，惭愧不已，从此不再提纳妾之事，两人得以白首偕老。