在汉武帝时期，大将军卫青无疑是最璀璨的政治明星之一。但卫青的家世却很寒微，这要从他的母亲卫媪说起。“媪”在古文中指老妇，“卫媪”就是卫家老太太的意思。她是平阳侯府的仆人，姓名在史书中未有记载，因为嫁了个不知名的卫姓男子，所以被称为卫媪，就象今天称呼王姓夫人为李(夫姓)家老太一样。
卫媪和不知名的卫姓男子生了一男三女，即长子卫长君，长女卫君孺、次女卫少儿、三女卫子夫。后来，这位卫姓丈夫年纪不大就死了，她继续在平阳侯家中作帮佣，为了生活，她与同在平阳侯家中做事的县吏郑季私通，生了西汉名将卫青，后来又生了另两个儿子卫步和卫广，卫青和卫步、卫广皆属冒卫氏之姓。
由此可见，卫青和兄弟姐妹之间的关系还是比较复杂的，下面就简要介绍一下这七个人不同经历和命运。
卫长君为卫家长子，大约生于汉文帝末年。后来因为妹妹卫子夫被武帝看中，嫁入宫中，怀孕之后，卫长君被武帝封为侍中。据说，在此期间的数日之内，武帝赐给卫家的赏金累计就达到千金之多。但过了几年，到了元光年间，这位卫家的长子就英年早逝，未能见证到卫氏一族后来的荣耀。
卫君孺是卫家的长女(老二)，其出生时间不详，大约是在汉文帝末年或汉景帝年间。在卫子夫受宠后，武帝特赐婚使卫君孺嫁给当时的太仆公孙贺为妻，后来公孙贺做了丞相，卒年亦不详。
卫少儿是卫家的次女(老三)，卫少儿可能比较早熟，她随母亲在平阳公主府做女奴时，竟和平阳县小吏霍仲儒私通，生下儿子霍去病，却被霍仲孺抛弃不认这个儿子。后来，卫少儿又与詹士陈掌结合，卫子夫受宠后，武帝特召来陈掌给其富贵，当了没有实权但年薪高的官职。据说，这陈掌是当年的宰相陈平的曾孙，但却是陈家的庶子，没有什么地位，但估计长得不错。卫少儿因为生了大名鼎鼎的霍去病，所以，其后来的生活应该过得不错，但儿子过早死亡，估计对她的打击一定很大。
卫子夫是卫家的三女(老四)，也是卫家除了卫青之外最出名一个。可以说，卫家之所以能飞黄腾达，完全得益于卫子夫受宠于汉武帝，并为汉武帝生了儿子，进而被封为皇后。但正所谓“三十年河东三十年河西”，汉武帝对女人从来都是“喜新厌旧”的，在征和二年(前91年)发生的巫蛊之祸中，卫子夫眼看着自己的儿子刘据被小人冤枉，却不能到武帝面前辩白而寒心自杀。可怜一生恭谨克己，尽心尽力执掌宫掖数十载的一代贤后，就这样委屈而死，随之卫子夫的亲属也受到牵连。
卫青是假托卫家的次子(老五)，也是卫家最有本领的人，是西汉时期最著名的军事统帅之一，官至大司马大将军，封长平侯。卫青首次出征是奇袭龙城，自此揭开了汉匈战争中汉朝反败为胜的序幕，曾七战七胜，收复了河朔、河套地区，击破单于，为北部疆域的开拓做出重大贡献。卫青善于以战养战，用兵敢于深入，为将号令严明，对将士爱护有恩，对同僚大度有礼，位极人臣而不立私威，元封五年卫青逝世。卫青虽然战功卓著、位高权重，但却从不结党，亦无人构陷。因此，卫青在世的时候，从无人敢构陷卫家和太子。
卫步和卫广(老六、老七)也是假托卫家的儿子，还有说法认为这俩名字是一个人。这两人在历史上只是借了姐姐和哥哥的光得以记下名字，但并无事迹流传，所以关于他们的事史籍中也没有什么记载。
卫青家族，准确的是应该是卫子夫的家族，为汉武帝为西汉王朝做出了极大的功绩，正因为有了卫子夫的入宫受宠，才使得她的弟弟卫青和外甥霍去病得以施展卓越的军事才能，为西汉在反击匈奴的战争中贡献了不可磨灭的军功。因此，从客观上说，卫子夫及其家族对汉朝是有功劳的，其家族的影响也是不能抹杀的。