陈平的关系一直不好。
听到樊哙说要讨伐匈奴，陈平担心周勃的兵权会被樊哙夺去，就让季布出面，对吕太后说：“高皇帝曾经率领三十二万大军御驾亲征，却导致了白登之围，如今樊哙要征讨匈奴，如果败了，就会让汉家蒙受损失；胜了，就会证明樊哙比高皇帝还厉害，这怎么能行呢？”
吕太后担心高皇帝的名誉受损，也觉得当时的汉室还没有力量打败匈奴，就拒绝了樊哙的提议。
而季布是楚地人，与悼惠王的私交很好；在此事之后，季布又和陈平、周勃二人逐渐交好，就经常在二人面前说悼惠王的好话。
这就是悼惠王世家和陈平、周勃二人逐渐交好的开始。
孝惠六年，悼惠王在临淄死去，死前对王太子刘襄说：“我是高皇帝的长子，本应该得到皇位，却因为吕后的缘故，才成为了齐王。我死了之后，你要小心看顾齐国，如果有机会，就把本来属于我们家的皇位抢回来。”
悼惠王死去时，王太子刘襄才十九岁，悼惠王又让驷钧教导刘襄，就让刘襄逐渐把抢回皇位，当成了自己毕生的志向。
两年之后，孝惠皇帝驾崩，刘襄就招来丞相驷钧，问道：“父王临死前，交代我要把皇位夺回来，现在孝惠皇帝死了，丞相觉得时机成熟了吗？”
驷钧是个欺软怕硬的人，在悼惠王小的时候，曾随悼惠王一起受吕太后的教导，对吕太后十分恐惧，就对刘襄说：“孝惠皇帝虽然死了，但权力一直掌握在吕太后手上；等吕太后死去，才是大王抢回皇位的良机。”
四年之后，孝怀皇帝因为愧疚而死去，刘襄再次问驷钧，得到了同样的答复：只有吕太后死去，才有机会抢到皇位。
孝怀皇帝死去之后，常山王刘义继承皇帝位，改名为弘。
吕太后同情营陵侯刘泽，就把齐国的琅琊郡分了出来，给刘泽做封土，让刘泽成为了琅琊王；为了补偿齐王一家，吕太后又封了刘襄的两个弟弟为侯，刘章为朱虚侯，刘兴居为东牟侯，还将刘兴居留在了长安，担任皇宫的禁卫。
刘襄却不因兄弟得到补偿而满足，只觉得吕太后抢走了自己的国土，就开始用巫蛊之术，诅咒吕太后早日死去。
吕太后在驾崩前的一个月，曾看见一条黑狗向自己跑来，撞向了自己的腋下，随后消失不见，吕太后从此得了腋下疼痛的疾病；在弥留之际，吕太后曾对左右的人说：“这是齐王在诅咒我，才让我痛苦死去啊···”