顾嘉辉虽然作品不计其数，但他因长期从事幕后工作，收入还不如香港一般歌手，一家人住的是普通住宅，开的车也很普通。他后来为了儿子的学业，于1990年代初举家移民加拿大。
在担任钢琴伴奏期间，顾嘉辉自学乐理知识。1950年代末，还与几位志同道合的朋友成立了顾嘉辉大乐队，他与乐队成员一起登台唱歌。1961年，顾嘉辉在夜总会唱歌时，恰好美国伯克利音乐学院的校长在现场看演出。对方觉得顾嘉辉是可塑之才，答应为他申请一笔奖学金，让他去学院深造。即便这样，顾嘉辉买不起机票，也无法负担在美国的生活费。顾媚根本没能力负担弟弟的留学费用，于是找好朋友方逸华帮忙想办法。
顾淡明是画家，据报道，他抗战时期担任汪伪政府的广东省宣传处长，抗战胜利后被指认为汉奸，为了保命抛下妻子和儿女，一个人跑到香港，于是顾妻带着儿女在广州生活。
顾志和也提到父亲近两三年都喜欢画画，歌反而只会听，没有再作曲。
青少年时期的顾嘉辉受父亲顾淡明的牵连，一直背负“汉奸儿子”的骂名，饱受歧视和白眼。顾母也总是叮咛他们要听话，不要惹事，顾嘉辉觉得生活是如此残酷，也变得格外自卑。
顾妻没有工作，一家人生活陷入困顿。一年多后，顾嘉辉和姐姐去香港找父亲。几经周折，姐弟俩终于找到父亲的住处，但父亲这时娶了小老婆，躲着不与他们见面。姐弟俩在门口一直坐到黄昏，结果父亲的小老婆从门缝里递出两碗白米饭，姐弟俩含泪吃下后，更含泪返回广州。
1月4日晚无线节目《东张西望》回顾顾嘉辉的辉煌成就外，还通过电话访问他的儿子顾志和。顾志和说父亲之前身体非常健康，头脑清晰，虽然曾感染冠病，但离世前两三天前已呈阴性，不过冠病会引发其他问题，加上父亲年纪大，最终病情急速恶化。他透露父亲的后事会在温哥华举办，并以家人为主。
1948年，顾嘉辉跟着姐姐到香港，住在九龙的木屋区。这时顾淡明迷上吸食违禁物品，消沉颓废，根本没有能力管他们姐弟俩。顾媚为了养活自己和弟弟，去歌厅唱歌，不久顾嘉辉也在姐姐的介绍下去歌厅担任钢琴伴奏。两人在香港站稳脚跟后，便将母亲和弟弟顾嘉铿从广州接了过来。
受父亲牵连背负“汉奸儿子”骂名
（香港讯）香港殿堂级作曲、编曲及指挥家顾嘉辉（也做顾嘉煇，煇为辉的异体字）1月3日在加拿大温哥华逝世，享寿92岁，其胞姐顾媚（原名顾嘉弥）接受Now新闻台访问时指弟弟近日确诊，离开得很安详，人陪伴在侧，“他在医院住了一周，有（感染）冠病，加上几天没进食。我和他有通过手机视频见面。”
方逸华当年是香港知名歌手，也是邵氏电影公司创办人邵逸夫的红颜知己。她与邵逸夫说了此事，邵逸夫看在她的面子上为顾嘉辉支付了两年的留学费用。留学两年后，顾嘉辉回港发展。1962年，邵逸夫的电影公司拍摄《不了情》，公开征求主题歌，结果顾嘉辉创作的《梦》被选中，从此正式走上音乐之路。
