1960年代李富搬离衙前围村，全家入住公务员宿舍。当年母亲和弟弟仍在衙前围居住，直至1980年代才出售住屋。迁离后李富和妻儿仍每天在村食晚饭，下午妻子携儿子放学回村，帮忙做家务和煮食，晚饭后才回宿命入睡。1980年李富一家迁离公务员宿舍，搬入现时的彩云邨单位。李富离开乡村多年，居住环境不断改善，完全没有适应问题。衙前围的屋没有厕所，要用痰罐如厕，每日清早倒夜香；宿舍和屋邨有厕所，卫生条件大为改善。早年衙前围居民每天到水井担水冲凉，附近七层大厦落成后，改用大厦水喉水，然后煲水冲凉，李富搬至宿舍和屋邨后，改为使用石油气和煤气炉，热水供应更方便。