关于李陵以后所发生的事情卫青是不知道的，他只知道此时对李广的后人多加照顾。其实卫青自己也是一个明白人，他与自己的外甥同被封侯后，虽然在宫内有卫子夫与王夫人可为他们做内援，使其地位十分的牢固，但宫里的宠幸往往变化很快的。汉武帝生性好色，又喜新厌旧。尽管卫子夫竭尽全力讨得他的欢心，但卫子夫自从生下三女一子之后，也逃不开岁月无情的吞噬，渐渐的她年老色弛，那悦耳动听，声音圆润的歌喉也已经变得有些沙哑，使得汉武帝对她的宠爱逐渐消散，卫子夫也开始慢慢的失宠。卫青刻间结交的王夫人虽然还很年轻，深受武帝的宠爱。但自从她生下一个儿子之后，不久就染病身亡。王夫人英年早逝，汉武帝很是伤心。于是平阳公主又为武帝留心查访。终于被她发现宫里的乐师李延年有一个妹妹十分的美貌，能歌善舞。便将李延年的妹妹送进宫中。汉武帝见到之后，果然很是满意，自此李夫人专宠后宫多年，李夫人为其生下了一个儿子，被封为昌邑王。这不是挺好的吗，可是谁知道这李夫人也是福寿短暂，没有多久的时间也是一病不起。
有一天李夫人对着镜子看到自己病后枯槁的面容之时，十分的感伤，不愿让武帝看到她的病容，当武帝前来看她的时候，她就把头转向里床，任武帝怎么哀求她，李夫人始终就是不肯回头。当武帝走了之后，众姐妹问李夫人道：“贵人您为何如此狠心，陛下如此痴心想见贵人一面，您为何如此吝啬一见呢？”李夫人见众姐妹们抱怨她，便挣扎着病体坐起来，痛苦的说道：“难道你们以为我就这么狠心吗？其实咱们姐们都知道，咱们宫里的嫔妃们以色事人，色衰则爱纪。今我行将病死，容貌已经再非旧时模样，如果陛下这个时候看到我的容貌的话，必会非常失望，也不会再追念于我。”几句话把众姐妹们说得如梦方苏。这件事没有过去多久，李夫人便香销玉陨。李夫人去后，武帝异常伤心，每日里都在朝思暮想着李夫人的容貌，为了牢记李夫人的容貌，武帝还特地让人绘制成像，悬挂在自己住的甘泉宫，每天都欣赏。
正当武帝对李夫人朝思暮想的时候，有一个名小李少翁的方士毛遂自荐，声称自己自己可以让武帝再见到李夫人。武帝思妻的心切，便让李少翁试一试。于是李少翁在宫里吩咐张灯结彩，摆设帷帐，桌案上陈放着酒肉等食物，让武帝在另一间帷帐中远远的观看。这一切准备好之后，又等了一会儿的光景，李少翁行法已毕，只见从李少翁作法的帷帐里飘出袅袅香烟，香烟散去之后，武帝果然看到一位美女的影子，形象和李夫人一模一样。武帝失声叫道：“李卿，是你吗？”那李夫人柔声说道：“陛下，正是妾身。
”武帝颤抖着站起身来想要向那边去，可是想起李少翁所说的话，又没敢，这种远观而不可近见的痛苦不是能言语所能形容的。武帝此时眼泪纵横道：“李卿，自从你走之后，朕每日里茶不思，饭不享，夜夜孤枕难眠，甚至朕都想随你而去呀。”那李夫人也痛哭失声道：“陛下，臣妾有何德何能，值得陛下如此牵挂于心间，此次臣妾蒙李少翁作法，向冥王借得片刻之景特来偿陛下思念之恩，自此以后，陛下再也不会见到臣妾的身影了，请陛下最好能忘记妾身，使臣妾也能瞑目于九泉之下。”那边的武帝再也忍不住了，冲出了帷帐向李夫人所在的帷帐冲了过去，可是等他到了近前的时候，只发现帷帐里香烟缥缈，里面只有一个李少翁，哪里有李夫人的一点儿踪影啊。
武帝见了李夫人的影子一回，苦于不能近身观看，只能远处观瞧，思念之情不但没有消退，反而越来越沉重了。自此之后，武帝常常在梦中见到李夫人的身影，因而天长日久之后武帝日渐憔悴，嫔妃们见到武帝这个样子都很担心。武帝也害怕自己的身体会支持不住，也因为太过思念李夫人，所以又叫来了李少翁，对他说道：“朕很思念李夫人，还能见到她吗？”李少翁说道：“可以从远处看到，但不能在同一帷帐中相见。臣听说在深海中有潜英石，青色，轻如羽毛，特别寒冷的时候，石头就会变得温暖；暑热的时候，石头则会变得寒冷。
若将这种石头刻成人像，神韵风姿跟真人没有什么两样。如果能得到这种石头，那么您就能见到李夫人。不但如此，而且这种石头还能翻译人所说的话，说话时，只听见声音，看不到它呼气，所以人们才知道它的奇异。”武帝听了之后迫不及待的说道：“那么，这种石头能找得到吗？”李少翁说道：“臣愿亲驾楼船，带一千名擅长游泳爬树的大力士前往，这些人都要懂得道术，带上不死之药。”武帝听了之后连连点头说道：“好，只要能给朕找到这种石头，那你所需要的一切，朕全都满足你。”之后武帝下了诏令，选拔会道术的一些大力士，又搜巡了一些所谓的不死之药，都交由李少翁带领。
于是李少翁便带人驾船前往深海取潜英石，经历了十年才回到岸上。昔日一同前往的人，能回来的根本就没有多少，武帝见到一千人剩下了没有多少就问李少翁，李少翁就说有的人已经成了仙不能回返，他们是历尽了千辛万苦才得到了这种石头。武帝便让李少翁马上把潜英石刻成李夫人的形象。李少翁马上让工匠依照李夫人生前的画像雕刻成李夫人的形状。雕刻成了以后，放在轻纱幕当中，远远望去，就仿佛李夫人真的活过来了一样。武帝看到了之后高兴万分，便问李少翁道：“能不能再近一些呢？”李少翁摇头说道：“如果半夜做梦，梦见是白昼，才可以靠近一些观看。这种石头毒性很大，只宜从远处看，不能近看。您不要以一国之君的身份，冒这种风险。”