李广是陇西成纪人，他的先祖李信是秦朝名将，曾率军击败燕太子丹。李广老家在槐里，后迁徙到成纪。李广家世代熟习射箭。
公元前166年（汉文帝十四年），匈奴大举入侵萧关，李广以良家子弟的身份从军抗击匈奴，因为精通骑马射箭，斩杀匈奴首级很多，被任为汉中郎。李广曾经数次随从皇帝狩猎，格杀猛兽，汉文帝说：“可惜你生不逢时，假如让你生在高祖帝代，做个万户侯又算得了什么！”[4] 李广侧身像
汉景帝即位后，李广任陇西都尉，又改任骑郎将。[5]
吴楚七国之乱时，李广任骁骑都尉，跟随太尉周亚夫反击吴楚叛军。在昌邑城下，夺取叛军军旗，立了大功，以此名声显扬。但因梁王刘武授给他将军印，还师后，朝廷没有给予封赏。李广调为上谷太守，天天与匈奴交战。典属国公孙昆邪哭着对汉景帝说：“李广的才气，天下无双，他又自恃能力高强。屡次与匈奴较量，这样下去恐怕要失去这位将领。”于是朝廷调李广为上郡太守。后来历任陇西、北地、雁门、代郡、云中太守，都因奋力作战而出名。[6]
匈奴大举入侵上郡时，天子派亲近的宦官跟随李广整训士兵，抗击匈奴。一次，这位宦官带了几十名骑兵，纵马驰骋，遇到三个匈奴人，与他们交战。那三个人转身射箭，伤了宦官，那几十名骑兵也被射杀将尽。宦官跑到李广跟前，李广说：“这一定是匈奴的射雕手。”李广于是带一百名骑兵，急追这三个人。那三个人没有马，徒步行走，走了几十里。李广命令骑兵散开，从左右两面包抄，并亲自射击那三人，结果射死二人，活捉一人，果然是匈奴射雕的人。待捆绑好俘虏上马，望见匈奴有数千骑兵。他们看见李广，以为是诱敌的骑兵，都吃一惊，上山布阵。李广的一百骑兵也非常恐慌，想奔驰转回。
李广说：“我们离大军几十里，现在以一百骑兵这样逃跑，匈奴一追赶射击马上就全完了。现在我们若留下，匈奴一定以为我们是为大军来诱敌，必然不敢来袭击我们。”李广命令骑兵说：“前进！”进到约离匈奴阵地二里许停了下来，又下令说：“都下马解鞍！”他的骑兵说：“敌人多而且离得近，如果有紧急情况，怎么办？”李广说：“那些敌人以为我们会走，现在都解鞍就表示不走，可以使敌人更加坚持认为我们是来诱敌的错误判断。”于是匈奴骑兵就没敢袭击。有个骑白马的匈奴将军出阵监护他的兵卒，李广上马与十几名骑兵奔驰前去射杀了这个匈奴白马将军，然后又返回到他的骑兵中间，解下马鞍，命令士兵把马放开，随便躺卧。这时刚好天黑，匈奴兵始终觉得很奇怪，不敢出击。夜半时，匈奴兵还以为汉军有伏兵在旁边准备夜间袭击他们，而全部撤走了。天亮，李广回到大军驻地。大军不知李广在哪里，所以没有派兵去接应。[7]