出生于官宦之家，是開隋名將韓擒虎的外甥。其祖父李崇義曾任殷州刺史，受封永康公；父親名叫李詮，大業(yè)初年官至趙郡太守，也算得上是當(dāng)時頗受看重的官宦家庭。李靖出生在這樣一個官宦世家，少而聰慧。每與其舅父韓擒虎談?wù)摫?，韓擒虎都會無比的贊嘆。