对于庾翼和桓温，司马岳确实是十分信任的。
桓温且不说，在统军作战上，庾翼也表现得格外的出色。
庾翼外表风仪秀伟，年轻时便有经世大略。
苏峻之乱时庾翼以白衣身份守备石头城，又随庾亮逃奔温峤。
事后，受太尉陶侃征辟，历任参军、从事中郎，后任振威将军、鄱阳太守，转任建威将军、西阳太守。庾亮准备北伐时，任命庾翼为南蛮校尉、南郡太守等职，镇守江陵，以协助保卫石城之功，封都亭侯。
庾亮逝世后，朝廷任命庾翼为都督江、荆、司、雍、梁、益六州诸军事，安西将军、荆州刺史，假节，接替庾亮镇守武昌。
当时人怀疑庾翼年轻，不能继承他兄长庾亮的业绩。
但庾翼尽心治理，军务和政务都很严明，数年之间，官府和私人资用充实，众人都称赞他的才能。后赵黄河以南领地的人民都有归附之心。