和其舅孔鲜负责，家中则是孔苗平日念叨。

在这些儒学大家的熏陶下，杨愔熟读经典，博学多文采，十三岁时便写出士林传颂的“襄阳赋”，被人誉为不输其父。杨愔表现得宽宏大气，为人和善友爱，深为儒士所喜，学宫中的才学之士都喜爱与他交游。

杨翼仅比杨愔小一个月，因为习武的原因，杨翼个头反比杨愔高，十五岁的少年郎快与杨安玄齐肩，身材挺拔，英武过人，除了上午到学宫外，平时