正史記柴紹,起筆便是他顯赫的身世。祖父柴烈是周朝驃騎大將軍兼刺史,父親柴慎乃隋太子近身侍衛(wèi),至柴紹一輩,更是從隋太子禁衛(wèi)武官一路成長為初唐的大將軍。祖孫三代,在三個不同的朝代,皆是位列公侯的權(quán)貴重臣。晉州柴氏一族,是名副其實(shí)的將門世家,更因出了柴紹這位凌煙閣功臣而享譽(yù)千載。隋末,自負(fù)王氣的唐國公李淵,重天下大義,重萬民福祉,對待子女同樣愛重,特別是他們的終身大事。李家的兒媳皆是名門望族的窈窕淑女,嫡長子李建成迎娶滎陽的鄭觀音,次子李世民迎娶洛陽的長孫氏,三子李元吉迎娶華陰的楊