绵虒原本是川西茶马古道上历代官府一个重要驿站，古称寒水驿。古城规模不大，只有一条半街，始建于1512年，扩建于1763年，至1953年一直是汶川县治所在地。当时这里的县令是七品正堂，而涂禹山瓦寺土司是二品，汶川的七品官管二品土司，故有“瓦寺土司的顶子酥油做”一说。

　　“一城如斗拱万山，城外萧然，城内幽然，风景绝清闲。断井颓垣，疏疏落落几家院，行过泮宫前，衙门对面，绝不闻人语声喧，多应是讼庭草满。由来此地出名员，甲榜先生多部选。尽可学鸣琴子贱，潘孟阳饮酒游山。真消遣，且偷安，纵教选个庞士元，百里才也无从施展。街道匆匆游览遍……”这是董湘琴在《松游小唱》中对绵虒的描写，董湘琴所见之斗城，就是1763年扩筑之城，城内衙门、禹王宫、文庙、学堂占地八、九，故董湘琴称之“城内幽然”

　　绵虒的文星阁，当地人称天台，四重檐歇山顶的阁楼式建筑，建于1807年，坐北朝南，西侧紧邻文庙。

　　绵虒文庙建筑群。

　　绵虒文庙中的棂星门，象征祭孔如同尊天。

　　绵虒有城垣，志有明文，始于明正德七年﹙公元1512年﹚，时名为寒水驿，旋作今镇名。倡筑者，乃知县李明。石城周长142丈，二门，各有楼。清康熙四十七年大水，城坏，乾隆二十八年重修，知县李天骏将周长扩大为280丈，均高1．8丈，底宽0．9丈，顶宽0．6丈，垛口523个，上下二门，南名“永丰”；北名“宁远” 。