柴绍矫捷有勇力尚武任侠闻于关中高祖龙潜时妻之次女即平阳公主也。初太宗见隋大乱阴怀济天下之心以绍亲戚有武用告其志事绍遂间行出河东与隐太子建成会既知起义兵建成谋于绍曰：追书甚急恐已起事隋郡县连城相接千有余里中间偷路势必不全今欲。且投小贼权以自济绍曰：不可追书既急宜其速去虽稍辛苦终当获全。若投小盗知君唐公之子执以为功徒然死耳建成从之遂相与走太原入雀鼠谷已知起义于是相贺以绍之计为得太宗拜右军大都督以绍为长史加银青光禄大夫及破霍邑下临汾平绛郡并先登陷阵既入关平阳公主以司竹之军来会命绍及马三宝分统其众（时隋将桑显和来击孙华率精骑渡河以援之绍引军直掩其背与史大柰合势击之显和大败因与诸将进下京城）高祖受禅拜左卫大将军从太宗平薛举破宋金刚于雀鼠谷攻王世充于雒阳平窦建德于武牢并有战功。