在民間傳說中，杭州眾安橋下也曾被認為是岳飛遺骨所葬之處。此地是南宋臨安城中比較繁華的地方，緊靠御街。清朝道光十三年(1833年)，杭州府司獄吳廷康，正式確定此地為岳飛葬地。關于岳飛的墓的位置也是迷霧團團，那么真相是什么?

1140年，岳飛率軍北伐，與金軍將領完顏兀術率領的重兵在郾城(河南郾城)相遇，岳飛大破完顏兀術的“拐子馬”軍陣，完顏兀術感嘆說：“自從故鄉起兵，靠此制勝，今竟如此。”金軍退守開封后，岳飛率兵追擊至離開封四十里的朱仙鎮。此時北方各地人民，紛紛起義，切斷金軍糧道，準備迎接南宋部隊。完顏兀術束手無策，打算放棄黃河以南地區，退守燕京(北京)。

此時的皇帝趙構害怕在岳飛的壓力下前皇帝被釋放回國，從而影響自己的皇帝寶座，再加上大臣秦檜在皇帝的指使下，正與金朝談判。于是，宋高宗下令岳飛率軍撤退，在一天之內，宋高宗連續頒發了十二道命令，每道命令都用“金字牌”送達(金字牌送達的命令，驛馬每天飛奔二百公里)，用以造成嚴重壓力，使岳飛不能反抗。岳飛在接到第十二個金字牌時，他不能不退，否則就是叛變。他向攔在馬前懇求不要撤退的民眾垂淚說：“十年準備反攻，嘔盡心血。而今一天之內，化為烏有。”

回到開封后，宋高宗想起岳飛要接前皇帝回國的話語后，仍感后怕，于是先任命岳飛為樞密副使，剝奪了岳飛的軍權，接著又指使秦檜誣陷岳飛謀反，逮捕岳飛下獄。南宋將領韓世忠質問秦檜岳飛是不是真的謀反時，秦檜回答說：“莫須有。”韓世忠嘆息：“莫須有三個字，怎么能服天下人心?”但是岳飛還有他的兒子岳云及他的幾位部將仍被處死。

岳飛在獄中被處死后，張憲和岳云被綁赴臨安城的鬧市眾安橋處死。張憲和岳云被害以后，后人在眾安橋西的資福弄、棗木巷建有忠烈祠以祀二人。紹興二十年，殿前司后軍小校施全激于義憤，刺殺秦檜，可惜未成功，被分尸于眾安橋。當地百姓懷念施全慘死，在眾安橋上修有施將軍廟。岳飛和張憲的家屬則被流放到嶺南和福建，宋高宗親自下旨規定，“多差得力人兵，防送前去，不得一并上路”，他們的“家業籍沒入官”。

在岳飛無辜被害后，對岳飛一向仰慕的獄卒隗順正冒著生命危險將遺體連夜背出城外，偷埋在九曲叢祠旁。《朝野遺紀》記載為“獄卒隗順負其尸出，逾城，至九曲叢祠中。

故至今九曲王顯廟尚靈。順葬之北山之誑”。為了日后辯識，隗順又把岳飛身上佩帶過的玉環系在其遺體腰下，還在墳前栽了兩棵桔樹。隗順臨死時對他的兒子說：“以后朝廷給岳大人平反后，如果找不到他的遺骨，必定會懸賞來尋找，到時候你告訴官府：岳大人的棺材上有一個鉛筒，上面有大理寺的勒字，那是我埋葬時所作的標記”。岳飛遇害后人們一直要求為他平反昭雪，但宋高宗始終置之不理。到了宋孝宗即位，為了給太上皇保留體面，假稱“仰承”高宗“圣意”，給岳飛恢復官爵與名譽，此時距岳飛遇害已21年了。隗順的兒子把其父藏尸的真相告知官府，岳飛的遺骨才得以遷葬杭州西子湖畔棲霞嶺，讓后世之人得以憑吊。

歷史上，籌集大量銀兩，營建岳飛墓、岳飛廟，又刊印了《岳忠武王初瘞》，在當時影響頗大。但是，宋代眾安橋一帶南有北瓦，東有御街，北面則面臨著錢塘路，都是繁華的街市，而且在眾安橋西不遠的地方，有軍隊駐守，如果有人在這里掩埋、植樹、立碑，守軍不可能不知道。

再者，宋時的臨安城遠比現在的杭州城小，根據史料記載，隗順背著岳飛的尸體“越城”而走，眾安橋在城內，如果真是初葬在這里，就不存在越城的說法。因此，岳飛的遺骨埋葬在杭州西子湖畔棲霞嶺證據更為充足，也更為普遍被人民接受。

岳飛墓幾經修葺，現在的岳飛墓闕是1979年整修時按南宋建筑風格設計的，墓道兩旁陳列的石虎、石羊、石馬和石翁仲，是明代的遺物。墓闕下有四個鐵鑄人像，反剪雙手，面墓而跪，即陷害岳飛的泰檜、王氏、張俊、萬俟咼四人。跪像背后墓闕上有楹云：“青山有幸埋忠骨，白鐵無辜鑄佞臣。”

在秦檜和他老婆的跪像前邊，還有這么一副對聯，是用秦檜夫婦互相埋怨、對罵的口氣寫的，很有意思：

唉!仆本喪心，有賢妻何至若是?

啐!婦雖長舌，非老賊不到今朝!

上聯是秦檜的口氣，意思是：“唉!我本來就是個沒人心的東西，可身邊要是有個好媳婦，興許也不至于沒完沒了的老在這兒跪著吧?” 下聯是用秦檜老婆的口氣回答說：“呸!雖說我是個長舌頭女人，可要不是因為你這個老賊，我怎么會老陪你跪著挨人唾罵!”

除了岳墓，人們還在各地建立了岳王廟來紀念民族英雄岳飛，其中最有名的是杭州的岳王廟。岳飛死時只三十九歲，這是中國歷史上最悲痛的冤獄之一。