李登輝與妻子曾文惠,育有一子兩女,長女叫李安娜,次女李安妮,惟獨子李憲文在1982年因癌病去逝,身後留下一女李坤儀(巧巧)。李登輝自26歲從台大農經系畢業並留校擔任助教時,在父親主動提親下,與小他三歲的富家女曾文惠結婚,這段姻緣維繫超過一甲子,夫妻非常恩愛。
「如果有一天我要走了,我一定要在走之前,緊握妳的手,謝謝你一輩子的照顧,我會好好的走,因為在你的扶持和陪伴下,我已經非常滿足,沒有遺憾。」李登輝曾經用這段話,說出他對夫人曾文惠的愛意。李登輝與曾文惠小時候就認識,曾文惠的祖父是三芝鄉鄉長,也是三芝大地主,家產可觀。李父李金龍出身警察,比起曾家的豪門大戶,還是有些落差。對於豪門千金愛上佃農之子這段姻緣,李憲文生前曾在一篇散文中提到,「母親之所以嫁給這個佃農之子,是看他愛讀書,常流鼻涕、很可愛」。曾文惠也回憶說:「這大概就是緣份吧!」