隆山塔是瑞安一号地标建筑，始建于宋大观元年1107年，距今有900多年的历史。

当时的邑令名叫吕勤，他笃信风水，说县城的东南面“势弱”，如果在东南方建塔便能“壮势”，能保佑瑞安百姓安居乐业。再加上自古就有“塔在巽峰则文运盛”的风水理论，把塔建在山上，能庇护瑞安多出人才，这是建塔的由来。
隆山的地理位置离海很近，于是出海打渔的渔船将隆山塔看作进港的一座自然航标。久而久之，沿海渔民在塔的旁边建起了庙宇，祭祀海神，每年农历五月廿四在这里演戏酬神、举行比武大赛等民间庙会活动。
抗战时期，塔遭到破坏轰炸，破损严重，险遭拆除。
1988年，瑞安市政府斥资修复。