缘缘堂究竟如何被焚，何时所焚，现在都不得确知。但据丰子恺的堂侄女丰桂回忆，丰子恺一家11月21日离开南圣浜后仅两天，缘缘堂就烧掉了。只因当时战乱阻隔，消息传递迟缓，到次年1月才在上海的报纸上登出。如果这一说是正确的话，重建后的缘缘堂墙上的说明文里所说的毁于1938年1月，应作1937年11月。
　　被焚后，据说缘缘堂的烟囱有一时还未倒下。这在丰子恺于1938年7月所写的《佛无灵》一文中提到过：“我的老姑母……有信来，末了说：缘缘堂虽已全毁，但烟囱尚完好，矗立于瓦砾场中。……”