许显谟祠为裔孙奉檄而建，主祀宋柱国显谟阁学士许德之。许德之为北宋年间进士，因进言徽宗而获擢升，又因反对“花石纲”而被贬，晚年归隐无锡。许祠观音兜山墙式的门楼及两侧宽敞的游廊为古镇少见，现辟有无锡市非物质文化遗产泥人展。