李道玄在很小的時候，曾跟著竇夫人一起生活。李建成年紀(jì)太大，又常年不在家，故而和他接觸不多。所以他經(jīng)常見的人，也就是李世民、李玄霸、李元吉和李智云等兄弟。其中又以李世民年紀(jì)最長，對他多有照顧。加之李世民平素很重儀表，舉止間總流露出大家之態(tài)。