在岳飞无辜被害后，对岳飞一贯敬慕的狱卒隗顺正冒着生命危险将遗体连夜背出郊外，偷埋在九曲丛祠旁。《朝野遗纪》记载为“狱卒隗顺负其尸出，逾城，至九曲丛祠中。故至今九曲王显庙尚灵。顺葬之北山之誑”。为了日后辩识，隗顺又把岳飞身上佩带过的玉环系在其遗体腰下，还在坟前栽了两棵桔树。隗顺临死时对他的儿子说：“今后朝廷给岳大人平反后，假如找不到他的遗骨，必定会赏格来寻找，到时候你通知官府：岳大人的棺材上有一个铅筒，上面有大理寺的勒字，那是我埋葬时所作的符号”。
岳飞遇害后大家一向请求为他平反昭雪，但宋高宗一直置之不理。到了宋孝宗即位，为了给太上皇保存体面，假称“仰承”高宗“圣意”，给岳飞康复官爵与名誉，此刻距岳飞遇害已21年了。隗顺的儿子把其父藏尸的真相告知官府，岳飞的遗骨才得以迁葬杭州西子湖畔栖霞岭，让后世之人得以凭吊。 在民间传说中，杭州众安桥下也曾被认为是岳飞遗骨所葬的当地。此地是南宋临安城中对比富贵的当地，紧靠御街。清朝道光十三年(1833年)，杭州府司狱吴廷康，正式断定此地为岳飞葬地。且筹集很多银两，营建岳飞墓、岳飞庙，又刊印了《岳忠武王初瘗》，在其时影响颇大。可是，宋代众安桥一带南有北瓦，东有御街，北面则面临着钱塘路，都是富贵的街市，而且在众安桥西不远的当地，有戎行驻扎，假如有人在这儿埋葬、栽树、立碑，守军不可能不知道。
再者，宋时的临安城远比如今的杭州城小，依据史料记载，隗顺背着岳飞的尸身“越城”而走，众安桥在城内，假如真是初葬在这儿，就不存在越城的说法。因而，岳飞的遗骨埋葬在杭州西子湖畔栖霞岭依据更为足够，也更为遍及被公民承受。岳飞墓几经修葺，如今的岳飞墓阙是1979年整修时按南宋建筑风格规划的，墓道两旁陈列的石虎、石羊、石马和石翁仲，是明代的遗物。墓阙下有四个铁铸人像，反剪双手，面墓而跪，即栽赃岳飞的泰桧、王氏、张俊、万俟呙四人。跪像背面墓阙上有楹云：“青山有幸埋忠骨，白铁无辜铸佞臣。”
在秦桧和他老婆的跪像前边，还有这么一副对联，是用秦桧夫妇相互抱怨、对骂的口气写的，很有意思： 唉!仆本丧心，有贤妻何至如果? 啐!妇虽长舌，非老贼不到今朝! 上联是秦桧的口气，意思是：“唉!我正本即是个没人心的东西，可身边要是有个好媳妇，也许也不至于没完没了的老在这儿跪着吧?” 下联是用秦桧老婆的口气回答说：“呸!虽然我是个长舌头女人，可要不是由于你这个老贼，我怎么会老陪你跪着挨人咒骂!”
除了岳墓，大家还在各地建立了岳王庙来留念民族英雄岳飞，其间最有名的是杭州的岳王庙。岳飞死时只三十九岁，这是我国历史上最沉痛的冤狱之一。