铁琴铜剑楼在海内外闻名已久，其所藏旧抄善本达十余万卷，与聊城杨氏“海源阁”、归安陆氏“皕宋楼”、钱塘丁氏“八千卷楼”齐名，并称清代藏书四大家。藏书楼建于清乾隆年间，已经有二百多年的历史。从创始人瞿绍基起，瞿氏五代藏书楼主都淡泊名利，以藏书、读书为乐。瞿氏第二代、绍基之子瞿镛，对鼎彝古印兼收并蓄，尤为珍爱一台铁琴和一把铜剑，铁琴铜剑楼由此得名。该楼该楼现存二进二层楼，第三、四两进即今仅存之楼，是“铁琴铜剑楼”所在。古楼坐北朝南，三楹回式楼房，中有小天井相隔，每进二层，下檐施撑拱，雕有精巧的夔龙纹，装饰显示了苏南一带的建筑风格。此楼在当时，第三与第四进楼上供藏书之用，第三进楼下则为读书处，第四进楼下为家祠，同时收藏古物、石刻。藏书除部分遭劫外，绝大部分于建国初由瞿氏后人捐赠北京图书馆、上海图书馆、常熟图书馆等。