乐城，也是乐会县文化发祥地。土生土长的乐城人梅文海告诉记者：“明代万历41年，知县刘叔鳌与诸生捐资创建书院于文庙之东，榜曰：‘安乐会馆’。公暇之余，聚诸生讲学其中。” 　　清代光绪年间，乐城东门外三圣庙旧址，建起乐会县官立高等小学堂，为全县小学教育之始。 　　据乐城村村委会主任王春冠说，清末乐城有一董姓大富户，此公无嗣，将大部分家产变卖，捐建了一幢2层高，拥有4间教室，2间办公室的教学大楼。民国时期，这幢教学大楼成为乐会县立初级中学之所，后来又改名为乐会县立简易师范。 　　当时的乐师，是全县唯一的最高学府，它是培养小学师资的摇篮，对全县文化教育事业有举足轻重的作用。乐会县的小学教师，大多出自这所学校。 　　“乐师还为各行各业，输送了大量优秀人才。原中国人民解放军防空部队司令员，1955年被授予上将军衔的周士第，少年时代就曾在乐会县立高等小学读书。”王春冠告诉记者。 　　20世纪30年代，旅居新加坡的南阳巨商王绍经长子王先树，在乐城捐建了一座图书馆，供乐城学子到馆中借书阅读。 　　乐城岛上，还有一块“捐置义田碑”，记载了清朝雍正年间，知县何齐圣捐款14两7钱，带动乡绅捐款49两3钱，购置田产出租，收取租金，供学子上省赴京应考，开创了奖学激励之风。 　　清同治己已年，乐城城脚村的林魁抡考中岁进士后任县训导之职。如今，林的后裔林英振家屋厅堂上，挂着一个进士匾。字曰：“钦命宗人府府丞提督广东学政胡瑞澜为岁进士岁贡生魁抡立。”林家有良好的家教，其后代读书人颇多，也大都有所成就。 　　“在乐城岛上，还有一处颇不平常的人家，一家三杰，纷纷获取博士学位。”记者随梅文海走访了上东坡村的余家，这家的主人余有芳，1980年代毕业于日本国广岛大学，获得博士学位。他的两个女儿余蔚和余滨也都在日本求学，双双获得博士学位。 　　古城小岛出了3位留洋博士，令人慨叹。