此人祖籍庐陵,后移居修武,并不是修武世家,打小家境贫寒,为叶畅所收容。天宝十二载自旅顺书院结业之后,这个卓舜辅便跟随在叶畅身边,他的学业并不出众,能够被选为亲卫,是因为他技击出色——旅顺学堂所开设的课程里,除了语文、算学、自然和德育之外,还有就是技击,由善直的棍僧师兄弟任教授。