并非所有有祠堂的都是大户人家。虽然祠堂在中国传统文化中是传承家族文化和祖先思想的重要场所，但它的存在也与地域、文化、历史等多种因素有关。

一些小镇和村庄也会有祠堂，这是因为当地人重视家族文化，而且很多农民也有自己的祖先祠堂。此外，一些富裕的商人或民间教会也有自己的祠堂。因此，虽然大部分有祠堂的家庭通常都是大户人家，但这并不是百分百的确凿证据。