卫青是汉武帝时期最著名的将领之一，他的家族也是西汉当时最具权威、最具威望的一个家族。其鼎盛时期朝廷的皇后、太子、大将军、骠骑将军、丞相都出自卫家。

如此繁盛的卫家也为大汗天下立下汗马功劳，可卫青死后没过多久汉武帝便将卫家大部分人杀掉，这究竟是为什么呢？

首先从史书里我们可以了解到汉武帝算得上是最独裁专治、最有权力欲望的古代帝王之一。他忌惮于卫氏家族手里掌握的大权，感觉自己的皇位受到了威胁，皇位岌岌可危，残害卫氏家族大部分成员，从而达到能够削弱对方权力和威望的目的，以此来巩固自己的皇权，坐稳他的皇位。

再加上汉代从建国时起便有外戚干政的传统，吕后、窦太后等都采取垂帘听政的方式来干预几乎所有的朝政事物，完全不输后世的武则天、慈禧。汉代皇太后掌管的权力可以说是与皇帝平起平坐，甚至还可能大于皇帝的政权。

换言之，外戚干政的后果，便是皇帝成为傀儡。汉武帝抱有雄才大略，自然不愿让历史重演。在即位初期，他便与窦太后针锋相对，毫不退让。那段时间也让汉武帝明白：“外戚并不可信，江山只有把控在刘家人手中，才得以永固。”

所以随着卫氏家族的势力越来越大，汉武帝也已经意识到了问题的严重性，并开始限制其手中权力。比如：设立大司马官职，将卫青与霍去病皆加于此官，二人权力相等。

可以说，汉武帝利用分权手段，对卫青明升暗贬，对霍去病则提拔重用。目的就是为了掣肘卫青。

公元前105年，卫青因病去世。卫青去世后，卫氏家族在朝廷的权势并没有减弱。而汉武帝对外戚权势过重是非常忌讳的，他知道外戚兴盛后会对皇权构成威胁，他也渐渐对卫家不满了起来。

公元前91年，“巫蛊之祸”爆发。公孙敬声被人告发跟阳石公主私通，并用巫蛊诅咒汉武帝，公孙贺父子因此被杀，卫青的儿子卫伉也受牵连被诛杀。

一件事情的发生，彻底压倒了卫家的最后一根稻草，那就是汉武帝病倒了，经常出现幻觉，这时，有人上报皇帝的病跟巫术有关，得知消息的汉武帝十分生气，下令彻查此事，

抓住这次机会的一些卫家仇人，设计陷害了太子刘据想要造反的事情，这让汉武帝十分震怒，于是乎，卫家一夜之间受到牵连，遭了大祸，死的死，逃的逃，顷刻间，曾拥有巨大权势的家族就这么消失了。

卫青身为大司马大将军，位极人臣，卫青却从不养士。卫青的一生共七次率兵出击匈奴，他喜士退让，能与士卒同甘共苦，作战骁勇，深受将士爱戴。其中淮南王刘安的谋士伍被对卫青的评价尤其之高，称其“才干绝人，众将皆为其所用”。

元封五年（前106年），卫青去世，谥号烈侯，取《谥法》“有功安民曰烈”之意。 汉武帝命人在自己的茂陵东为卫青修建了一座庐山形状（匈奴境内的一座山）的墓冢，以象征卫青一生的赫赫战功。

然而卫青在世之时也从未有大臣敢构陷卫家和太子刘据，《资治通鉴》记载，直到卫青死后，大臣以卫太子再无外家依靠，开始构陷太子的逐渐多了起来。

卫青死后15年（前91年），巫蛊之祸爆发，卫青的长子卫伉受到公孙敬声一案的牵连被杀，卫皇后和卫太子随后受到江充、苏文等人诬陷被迫起兵，被刘屈牦镇压打败后先后自尽，卫氏集团的政治影响力悉灭。直到汉宣帝元康四年（前62年），卫青第三子卫登之子得诏复家，赐钱五十万。