薛怀义，原名冯小宝，本是个市井卖药郎，身材魁梧，能说会道。据《旧唐书·薛怀义传》载：他先是与高宗的幺女千金公主勾搭成奸，后被武则天横刀夺爱。武则天从冯小宝身上尝到了未曾有过的闺房欢乐，脸上重现光泽，焕发出清新的朝气，整个人充满生气活力，连宫女们都能感受到她那久违的令人轻松的温和及体贴。
当时宫中经常举行佛事活动，为了掩人耳目，让冯小宝方便出入宫中，武则天命他剃度为僧，任命为白马寺主，并改名换姓，“令与太平公主婿薛绍合族，令绍以季父事之”，让薛绍称其为叔父，冒充大族，朝廷上下则呼为“薛师”。薛怀义仗着武则天的宠幸，无法无天，大行不法之事，曾因武则天宠幸御医沈南璆，他便气急败坏地将明堂一把火焚毁。
武则天明知是薛怀义干的，但也自觉难堪，没有追究，反而命薛怀义主持重修明堂，薛越发骄纵嚣张，树敌益多。一天，薛怀义擅自闯入只有宰相可以出入的南衙，宰相苏良嗣瞧不惯他的嚣张气焰，喝令左右结结实实地搧了他几十个耳光。薛怀义捧着红肿的脸向武则天哭诉，不料武则天反而告诫他：“这老儿，朕也怕他，阿师以后当于北门出入，南衙乃宰相往来之路，不可去侵犯他。”
为了这事，武则天的女儿太平公主曾当面说过她母亲：“为什么不选择姿禀秾粹的人来帮助游赏圣情，排遣烦虑，何必去宠幸那些市井无赖之徒，为千秋万世所讥笑呢?”武则天颇为感慨地答道：“你讲的确实不错，前些时候苏丞相打薛怀义的嘴巴，就是欺侮他是市井小人啊!假如是公卿子弟通晓文墨的，南衙又岂敢随便侮辱他!”
于是太平公主就趁机把自己的情人、太宗时凤阁侍郎(相当于宰相)张九成的儿子张昌宗推荐给武则天，先是夸赞张年近弱冠，玉貌雪肤，眉目如画，身体是通体雪艳，瘦不露骨，丰不垂腴，接着悄悄地描述床笫之间的旖旎风光：那味道就像南海的鲜荔枝，入口光嫩异常，婉转如人意，使人神飞魄荡。说得武则天心花怒放，便把被人称为“面如莲花”的张昌宗纳为男侍。张昌宗又引进其兄张易之，一同入宫侍奉武则天。张氏兄弟“俱侍宫中，皆傅粉施朱，衣锦绣服，俱承辟阳之宠……每因宴集，则令潮戏公卿以为笑乐。若内殿曲宴，则二张诸武侍坐，樗蒲笑谑，赐与无算”。
这就是骆宾王檄文中所指的“洎乎晚节，秽乱春宫”之事，这在《旧唐书·外篇列传》中也有记述，当时武则天已经是70多岁的老太婆了。武则天不光自己与张氏兄弟昏天黑地胡搞，还替二张的母亲牵线搭桥找情人。而此时的薛怀义，因到处张扬武则天的私事，在武则天授意下，终被太平公主率人缢杀。