1917年冬，晏陽初當選耶魯大學華人協會會長，同時是男青年會會員。他在此期間有幸認識了女青年會會員許雅麗——當時哥倫比亞大學師範學院體育係的高材生，曾獲中國留美同學會東部分會主辦的女子遊泳比賽冠軍。兩人在多次集會活動中相遇，最終成為好友、交往密切。

1920年8月，他回到上海，見到了許雅麗，當時許雅麗已經和二三好友創辦了女子體育師範學校，兩人重逢甚是喜悅，不久成為戀人。

1921年9月23日，兩人結為伉儷。從此後，兩人並肩攜手，誌同道合，同甘共苦，共寫人生輝煌。

定縣實驗之初，許雅麗就支持丈夫，並帶上兒女定居到定縣，還辦起景慧學校，解決同仁們兒女上學的問題。

戰亂時，“平教總會”南遷長沙，西移四川，許雅麗都帶著孩子，與丈夫同行。重慶私立鄉村建設學院開學時，日軍空襲、物資匱乏、醫藥不足，100多個學生、教員和家屬都將許雅麗當做學院的精神支柱；遇到空襲她先督促師生家眷隱蔽，但她總是最後一個離開。可以說，她將全部的精力和時間都花在了學院裏。

1950年，許雅麗領上兩個女兒，與丈夫定居美國。丈夫不停地把平民教育運動推向世界，飛往各地奔忙，她就承擔起所有的家務，讓丈夫沒有一絲後顧之憂。

1980年8月18日，85歲的許雅麗，突發心髒病，醫治無效，在美國逝世。

晏陽初曾這樣描述妻子：“那美好的仗，她打過了，並始終持守自己的信仰。她留給人們的是一種祝福，她的一生，對很多人來說就是一種激勵。”

夫妻倆共生育了5個孩子，兩個女兒，三個兒子。1949年，他與妻子離開中國的時候，三個兒子堅持要留下來建設新中國。他就帶著妻子和女兒，經台灣去了美國。

三個兒子與自己的姐妹約定：“新中國”一周年時，寄一張照片到紐約。如果三人都坐著，表明他們生活得不錯；如果有人站著，則表明那個人的處境危險，如果這樣姊妹就都不要再回中國來了。

一年以後，照片寄到紐約，姐妹打開來一看。兄弟三人全都站著。後來，大兒子曾任定州鄉村建設學院名譽院長，其他兩兒子都死於“文革”，最年輕的那個還是自殺身亡。

晏陽初晚年仍堅持推廣平民教育，於1990年1月17日病逝於美國。

1993年，他的長女遵照遺囑，把他的一部分骨灰送回巴中安葬，後來他的陵墓建在巴中東郊的塔子山上。