婚後五年生女平陽，又四年後生子伯禽，許氏卒於公元737年底。公元738年夏，李白在剡越結識一劉姓美女，二人開始同居，並且舉家遷安徽南陵定居，劉氏天寶元年（742年）與李白分手，李白進京求官。公元745年春李白辭官離開長安，在山東任城結識魯地一女子並結婚，生子頗黎，李白在山東兗州置下了大批田產，在此後他雲遊在外的生活中，這些田產就交給了妻子。可惜的是這個妻子在他們結婚五年後，不幸亡故。公元750年李白路過宋城梁園時，和杜甫、高適飲酒賦詩。李白酒醉後即興賦詩，揮筆在粉牆上寫下了那首千古名作《梁園吟》。三位詩人走後，一位年輕貌美的白衣女子帶著丫鬟來到這裡。白衣女子云髻高聳，裙裾飄飄，站在壁前反覆吟誦那氣勢磅礴的詩篇，如醉如痴，連僧人過來都未能覺察。僧人看到粉白的牆壁被塗得黑乎乎一片，心生怨氣，舉布欲擦，卻被這位姑娘攔住。經過一番交涉，她取出千兩銀子，買下此壁，保住了牆上的詩句。不久，李白聽說此事，深受感動，便託杜甫和高適作媒，娶這位宗氏才女為妻。宗氏是故宰相宗楚客的孫女，而宗楚客的母親是武則天的叔伯姐姐，因此李白和武則天是親戚，算起來李白應該叫武則天“太姨奶奶”。但是宗家經韋后之變後家道大不�