桓温神武慷慨
桓温出生没多久，名士温峤见到他后赞叹道：“真是个英物啊！”桓温的父亲见温峤这么赏识自己的儿子，于是就为他取名温。温峤说：“以后恐怕人们都要改我的姓了。”桓温少年时就豪迈过人，相貌雄伟。名士刘惔说：“桓温眼睛像紫石棱，胡子像刺猬毛，是孙权和司马懿那样的人啊！”
桓温15岁那年，父亲被苏峻的部将韩晃杀害，江播也参与了此事。桓温悲愤万分，哭得流出了血液，发誓以后一定要报仇。可他18岁的时候江播居然死了，江播的三个儿子在哭丧的时候还准备好了武器，预防桓温来报仇。桓温假装以吊唁的宾客混进了他们家，然后杀死了那三兄弟。当时能够为父报仇是一种美德，人们不但不怪罪他杀人，反而认为他胆识过人，很有英雄气概，很佩服他，官府也没有来找他麻烦。
后来他娶了南康公主，被拜为驸马都尉。桓温和当时的权臣庾翼关系不错，曾在他面前表现出北伐的大志。庾翼就向朝廷推荐了他，说：“桓温虽然年轻，但有雄才大略，不要把他当普通人看待，应该为他多储备些人才，慢慢委以重任，以后一定能成就大业。”庾翼死后，朝廷就开始培养桓温，逐渐加重了他的权力。