衙前围普遍村民的「祖屋」思想薄弱。吴志荣认为只有祖父辈的原居民才有较强的「祖屋」观念，例如吴润初、吴渭池等，父辈年代已有不少外姓人入村买屋，他感觉上收租的外姓人，甚至比吴氏的宗亲更多。父辈很少用「祖屋」的字眼，父亲原来有一间屋，后来他替人担保借债，债务人没有还钱，最终要卖屋代还。吴志荣小时候在村内居无定所，已没有自己的家，更谈不上「祖屋」。