既然提到杜陵和少陵，不得不提一提陵墓主人汉宣帝刘询（原名刘病已）与其皇后许平君之间感人的爱情故事。汉武帝死后，霍去病的同父异母弟弟大将军霍光执掌朝政，辅佐即位的汉昭帝刘弗陵。昭帝才年过二十就驾鹤西归，身后无子，霍光拥立武帝之孙昌邑王刘贺为帝。结果这位新皇帝一步登天之后生活放荡不堪，整天寻欢作乐不务正业，望之不似人君。为国家前途忧心忡忡的霍光在二十七天之后废掉刘贺，这个废诚然是很正确的，可是就反映出一个月前立得实在太不谨慎。霍光听说武帝的曾孙刘病已贤明，就立他为帝，是为汉宣帝。刘病已既贤且长，可见霍光立他并非为了自己的权欲，而是为了江山社稷，所以后世把霍光与曾经放逐又复立商王太甲的名相伊尹并称为“伊霍”。霍光独揽大权期间，采取休养生息的国策，奖励农桑、多次大赦，使得文景之治后被武帝穷兵黩武政策所耗空的国力得到一定的恢复，这段时期加上后来的宣帝一朝，史称“昭宣中兴”。再后来，那些出于个人野心擅行废立皇帝之事的权奸都号称自己在仿效伊霍，则完全是挂羊头卖狗肉了。
宣帝看了刘贺的前车之鉴，知道自己的生死存废完全决定于权势熏天的霍光，内心很是害怕。他即位后乘坐马车去谒见祖庙，霍光近在咫尺地坐在一侧陪侍，面容严峻忧国忧民，宣帝只感到浑身不舒服，好像有芒刺在背上那样难受。这个就是成语“芒刺在背”的出处。
刘病已的爷爷即是在“巫蛊之祸”中冤死的卫太子刘据（刘病已继位后，追谥为“戾”，以表其冤屈，故又称戾太子），刘据的母亲是大名鼎鼎的卫子夫卫皇后，舅舅是名气更大的“不败由天幸”名将卫青。刘病已刚刚出生数月即逢巫蛊之祸，汉武帝宠臣江充陷害卫太子，刘据起兵失败，与皇后卫子夫相继自杀。刘据的三子一女皆死，唯独襁褓中的刘病已逃过此劫。刘病已长大成人后，娶了许平君为妻。许平君温柔贤惠，在刘病已最困难的日子里与他患难与共、相依为命，让这位落魄皇孙感受到了家庭的温暖，并在婚后一年为他生下了后来成为汉元帝的儿子刘奭（其妻王政君是中国历史上寿命最长的皇后之一），同年刘病已被霍光拥立为帝。当时几乎所有大臣都在霍光家族的威逼下要求让霍光的女儿霍成君当皇后，上官太皇太后（昭帝的皇后、霍光的外孙女，中国历史上最年轻的皇后、皇太后、太皇太后）也对宣帝施加了强大的压力。就在这样的重压之下，宣帝下了一道诏书说：“朕在贫微之时曾有一把旧剑，现在朕非常怀念它，众位爱卿能否帮朕将它找回来呢？”腿脚快的大臣们赶快去找剑了，脑子快的大臣们则很快品出了这道史上最浪漫诏书的真意：“皇上连贫寒时用过的一把旧剑都念念不忘，这样恋旧之人又怎么会将曾经与自己相濡以沫的妻子抛弃呢？”于是赶快迎合上意，联名奏请立许平君为后，宣帝自然御准。这个典故就叫作“故剑情深”。
但霍光夫人一心想让女儿坐上皇后的宝座。当许皇后再度怀孕生下一个女儿之后，霍夫人命御医在滋补汤药中下毒，许皇后服用后即毒发逝世。宣帝非常悲痛，将她葬于杜陵南园，称为“少陵”。这个典故被称为“南园遗爱”。白富美霍成君如愿以偿登上皇后宝座，飞扬跋扈挥金如土，令宣帝心中十分厌恶。但宣帝此时展现了成熟政治家的手腕，装作对霍成君及霍家百依百顺信任有加，而霍皇后也没有为宣帝诞下子嗣，不知道是否与《甄嬛传》中的华妃没有子嗣原因相同。熬到霍光去世后次年，宣帝开始动手为许平君昭雪冤情，先为许父封侯，并立许平君的儿子刘奭为太子。政治敏感度很高的霍光夫人对此非常恼怒，吃不下饭反而吐血，授意霍成君毒杀太子，但太子的老师总是先试菜验毒，所以几次下手均未成功。又过了一年，再也忍不住的霍家发动政变想让江山改姓霍，未遂而招致族灭，终于等到这一天的宣帝废掉了霍皇后。至此，宣帝终于为结发妻子许平君报了仇。霍成君在多年后自杀。与见异思迁的曾祖父武帝刘彻相比，宣帝与许平君的故事是汉代历史中难得的一丝温暖，在中国整个帝王婚恋史中也是黑暗中少有的一抹亮色。
