崇拜祖先并立庙祭祀的现象，在原始社会后期即已存在。明世宗采纳大学士夏言的建议，正式允许民间皆得联宗立庙，从此宗祠遍立，祠宇建筑到处可见。宗祠原为“追远、报本”的目的而兴建，所以在建筑规制上要体现出礼尊而貌严。自南宋到明初，一般的祠堂都是家祠。特别是自明清以来，祠堂成了宗族祭祀先祖、举办宗族事务、修编宗谱、议决重大事务的重要场所。
俗话说，树大分杈。随着生命的传递、繁衍，家族也会不断扩大，扩大的结果是一些家族从祖居地迁居他处，另开基业，形成新的分支和新的宗族，自然也有不少家族远赴重洋，在海外定居，这些新形成的宗族和分支，往往又会建立新的祠堂，来供奉亲近的祖先。于是，由一个祠堂又会派生出许多新的祠堂来。
祠堂，旧时又称为“祠庙”或“家庙”，多建于墓所，故把祠堂称为“祠室”。按《礼记》规定，只有帝王、诸侯、大夫才能自设宗庙祭祖。直到明朝，朝廷才开始允许老百姓建“家庙”。后来，祠堂多建于家族的聚居地或其附近。早由于家族尚不多，便置祠与宅中，随着族丁的繁衍，便开始建起宗祠乃至支祠。
