裴昙的父亲裴廷贤是一位忠臣，是太子崇恺和齐王都信任的人。裴廷贤早年隐居在建业城外的小苍山下，躬耕自养，不曾出仕，被征召出仕之后，屡次弥合哀太子与齐王的关系，最终为保护齐王而死。齐王登基后，追谥裴昙的父亲，赐裴廷贤谥号“悫”。
齐王登基后，也为裴昙的祖父赐了谥号。裴昙的祖父裴弥纶谥“忠”，被陛下尊称为“裴忠侯”。
江表一等门阀共有四家：宣城崔家，当涂裴家，毗陵周家，庐江卢家。许朝统一南北后，江表门阀北上，高宗重视江表门阀，以礼对待南朝旧臣，极力促成南北的和平与安定。高宗的弟弟、后来的庄宗令长男崇恺拜当涂裴家的裴弥纶为老师，令次男崇煦拜庐江卢家的卢鸿烈为老师，以此表示对南方文士的认同。
庄宗朝隆正十九年，寿安皇太女意外去世，淮王崇恺成为了太子。裴弥纶作为太子崇恺的老师，备受太子崇恺的信任，当涂裴家打破了江表一等门阀之间微妙的平衡，一骑绝尘，贵极一时。
崇恺十九岁时与裴弥纶相识，三十六岁成为太子，四十五岁去世。自崇恺十九岁起，裴弥纶就一直陪在崇恺身边，在崇恺去世的那一天，裴弥纶依旧陪在崇恺身边，他没有选择离开长安，他陪伴自己的学生崇恺走完了最后的路程：
幸存的宫人复述了乾佑九年三月二十八日发生的事情。
三月二十六日，太极宫被攻破。
三月二十八日，太子崇恺命禁军在太极宫內烧起一场大火，自己亲自点燃了含元殿。
崇恺袖手站在火里，头发被烈焰炙烤得卷曲。
裴弥纶与崇恺隔着火海对望。
一位失败的太子和一位不合格的太子老师隔着火海对望。
崇恺一言不发，最后一次拜向自己的老师。
须发尽白的裴弥纶不顾地面被火烧得滚烫灼热，长跪在地，回拜太子。
裴弥纶说：“殿下，初相见时，臣向殿下许诺，定当忠心于殿下、尽心辅佐。如今山河破碎，错在罪臣，一切是臣之过，罪臣没能尽心辅佐殿下，罪臣未能对国尽忠，最终使得社稷倾覆。殿下，错在罪臣！”
太子崇恺说：“老师，起来吧，我师生何必假惺惺的，既是罪人，本该殉国，又何必做出忠勇就义之态。我师生……谁能无过呢。”