一年他到下都城游玩，不料被无数艳丽女子争相围观，使他一连几天无法好好休息。
关于卫玠之死有两种说法：
卫玠1、看杀卫玠
卫玠从豫章郡到京都时，人们早已听到他的名声，出来看他的人围得像一堵墙。卫玠本来就有虚弱的病，身体受不了这种劳累，终于形成重病而死。当时的人说是看死了卫玠。此即成语“看杀卫玠”的典故。
2、清谈而死
卫玠避乱渡江之初，去拜见大将军王敦。由于夜坐清谈，大将军便邀来谢幼舆。卫玠见到谢幼舆，非常喜欢他，再也不理会王敦，两人便一直清谈到第二天早晨，王敦整夜也插不上嘴。卫玠向来体质虚弱，常常被他母亲管束住，不让他多谈论；这一夜突然感到疲乏，从此病情加重，终于去世。