在村子外的莊園裡，住著一對姐妹：姐姐康斯坦絲過分敏感，整日擔驚受怕，不能出門; 妹妹瑪麗凱特則是一個任性、精力充沛的女孩，她相信自己會巫術，平時負責去村裡採買。 除此之外，還有身體虛弱、精神恍惚的朱利安叔叔，他終日忙於起草書稿，試圖以此來理解六年前的那一場悲劇：一頓晚餐之後，所有其他家庭成員都死了。 兇手被認為是做飯的康斯坦絲，但她卻被判了無罪。

不斷有好奇的村民來到莊園裡做客，來到「兇案現場」、見到「兇手」讓他們感到害怕又刺激。 而當堂哥查理斯意外到來時，三人原本的平靜生活被徹底打破了......

《我們一直住在城堡裡》是雪麗·傑克遜創作的最後一部長篇小說。 1965年她死於心臟衰竭，年僅四十八歲。