吴耀辉在围村长大，10多岁才迁出，保留了较多传统观念。他认为现时祠堂犹存，自己属於吴氏这条血脉，太公终归是太公，他希望氏族一直延续下去，在他这一代(即廿八世孙)失传会很可惜，不过廿九世的後人已不感兴趣。他小时对祖宗的事有兴趣，可惜每次向父亲提问都被责怪多事。年轻时对承传祖先的想法没有浓厚兴趣，自从家人移民加拿大後，独留他一家在香港，才逐渐产生承传祖先的想法。他希望下一代有相似的想法，不过他不会刻意向後人灌输，只带儿子出席族中活动，希望有潜移默化的作用。