直到1785年初，纳尔逊在西印度群岛的尼维斯岛逗留期间，认识了一位守寡的年轻女子弗朗西斯“芬尼”尼斯贝(17665438+5月0-18365438+5月6 0)。弗朗西斯的真名叫弗朗西斯·伍沃德，他的父亲威廉·伍沃德是尼维斯的一名法官。弗朗西斯于1779年与医生约书亚·尼斯贝结婚，他们有一个儿子，名叫约书亚。然而，弗朗西斯的丈夫在1781访问伦敦时突然去世，弗朗西斯成了寡妇，住在亲戚在尼维斯的大农场里。
纳尔逊认识弗朗西斯后，他们很快就结婚了，并于3月1787+01日在尼维斯岛结婚，由纳尔逊的好朋友威廉姆·亨利王子担任伴郎。纳尔逊和弗朗西斯结婚后回到英国生活。起初，他们因在公共场合相爱而出名。此外，当纳尔逊在国外时，这对夫妇经常写信给对方。然而，结婚多年后，他们还是很虚弱。1797年，纳尔逊被封为爵士，弗朗西斯成为了纳尔逊夫人。后来，1798和1801年，纳尔逊被封为爵士，并被封为纳尔逊男爵夫人和纳尔逊子爵。
由于长期分居，纳尔逊与妻子的关系变得不稳定。比如1794年底，纳尔逊在驻来亨时养了一个小三，甚至带她出海执行任务。纳尔逊在1793年访问那不勒斯时，遇到了英国驻那不勒斯大使威廉·哈密顿爵士和汉密尔顿爵士的妻子艾玛(1761年-1815年-15天)。纳尔逊不仅和汉密尔顿爵士成了朋友，甚至还和他的妻子艾玛发生了关系。汉密尔顿夫人，本名艾玛·里昂，早年有过几次恋情，并在1782为他人生下一个私生女。艾玛后来改名为艾玛·哈特。几年后，她在1793年32岁时嫁给了62岁的汉密尔顿爵士，从而成为汉密尔顿夫人。
尼尔森和艾玛真正的感情关系是从1798年底尼尔森和汉密尔顿夫妇同居开始的。截至65438年2月，纳尔逊协助那不勒斯王室乘船撤离至西西里。然而，船队在途中遇到了风暴，在危险的航行中，每个人都得到了艾玛的悉心照顾，这更加激起了纳尔逊对她的敬佩。之后，纳尔逊退休到西西里，和汉密尔顿夫妇住在一起。那时，筋疲力尽的纳尔逊从艾玛那里得到了安慰，他们相爱了。到1799年2月，双方的关系甚至超出了好朋友的关系。不久之后，又有传言称纳尔逊在西西里沉迷于艾玛的美色而不理会军务，最终促使纳尔逊在1800年被召回国。在回国的路上，纳尔逊和汉密尔顿夫妇一起穿越欧洲大陆，所到之处都成为当地舆论的焦点，而他们三人之间复杂的关系也引来了不少流言蜚语，损害了他的声誉。其中，曾在来亨见过他们的陆军军官约翰·摩尔(john moore)指出，纳尔逊与艾玛的亲密场景“相当令人难过”。至于回国后的纳尔逊，虽然受到了国王乔治三世的接见，但乔治三世一直标榜自己重视婚姻和家庭，所以对有婚外情的纳尔逊十分冷淡。许多上层贵族和士绅纷纷效仿，对纳尔逊采取了回避的态度。
纳尔逊在1800年回到英国后，与艾玛的恋情不可避免地导致了他与第一任妻子弗朗西斯关系的破裂。虽然弗朗西斯并没有正式与尼尔森离婚，并多次提出复合的希望，但尼尔森不为所动。至于尼尔森的亲戚，大部分也支持他和艾玛的关系。其中，只有尼尔森的老父亲还在支持弗朗西斯。然而，当纳尔逊的老父亲在1802年去世后，弗朗西斯的地位变得更加孤立。另外，艾玛在180165438+10月29日成功为尼尔森生下双胞胎，但最后只有一个女孩存活，私生女是霍雷西娅·尼尔森(180165438+10月29日-10)。艾玛生下尼尔森私生女的事情极其隐秘，他们没有公开是为了避免引来更多人的议论。后来在1803和1804之交，她为尼尔森生下了一个私生女，取名“小艾玛”，但女婴出生后不久就夭折了。尼尔森在哥本哈根之战1801的表现，一扫早前与汉密尔顿夫人的绯闻。然而，海军部的圣文森特伯爵和托马斯·特罗布里奇爵士等人担心纳尔逊会再次对她过于沉迷，只好匆匆安排他出海。艾玛和纳尔逊也明白了海军部的意图，最终断绝了纳尔逊与圣文森特的关系，结束了他与特罗布里奇的友谊。1802年9月，艾玛为尼尔森买下了萨里郡的默顿庄园，与丈夫汉密尔顿爵士一起生活。虽然艾玛和纳尔逊是夫妻，但同居的汉密尔顿爵士从未过问此事，也没有严厉谴责艾玛与纳尔逊的婚外情。1803年4月6日，72岁的汉密尔顿终于在伦敦宫去世时，艾玛和纳尔逊都在场。虽然纳尔逊在哥本哈根之战后恢复了名誉，但纳尔逊和爱玛的爱情生活，纳尔逊是如何被爱玛迷住的，纳尔逊、爱玛和汉密尔顿爵士之间的复杂关系，仍然成为公众八卦的焦点。然而，汉密尔顿爵士仍然对朋友与第一任妻子的婚外情视而不见，甚至被讽刺漫画嘲讽。