而除了整治军备之外，岳飞在鄂州另一件事情便是广邀各处有谋之士充作自己幕僚。观宋一代，崇文轻武，在文人眼中，武将皆被视为粗人，少有能深识义理者。而岳飞的出现，却是极大地颠覆了文人的这种观念，他在军务之暇，峨冠褒衣，扮作儒生于各处行走，常出入于各处酒楼书馆，听文人针砭时政，并且常常与之辩论，一旦发现看重的人才，便招揽入府，一时间使得其府上“食客所至常满，商论古今”。
宋时入各军任幕僚者常被人嗤之以鼻，号称“从军”，于是有“士大夫多耻从军”，“好士人岂肯从军”之说。但在岳飞麾下，因受其感召，却有不少爱国士人，以中兴大业为重，毅然带笔从于岳飞麾下。这其中大多是因岳飞对待文人的谦恭礼遇，使得这群文人大为感动，于是一时名人皆萃于幕府。而且岳飞看人极准，那些圆滑而看风使舵的角色皆被逐之不用，留于其帐下的皆有骨气，有棱角，坚持抗金的志士。