严嵩的妻子名叫欧阳淑端，和严嵩是同乡，都是分宜人，不过村庄不同。两个家族在当地都算得上是名门望族，所以门当户对地给他俩借了娃娃亲。因此，严嵩和欧阳淑端是从小青梅竹马长大，这也是之后两人感情深厚持久的基础。据说，欧阳淑端长得并不好看，据说脸上因为小时侯的天花一直留着小麻点。

欧阳淑端比严嵩年长一岁，严嵩19岁时与她成婚，而同年他考上了举人，具体哪个事情在前就不得而知。成婚后，夫妻两人一直恩爱，相敬如宾。在严嵩亲人离世、仕途不顺、家境清贫的时候，妻子一直陪伴在他身边，鼓励严嵩努力学习，他们的家谱上评价她说“助公食贫力学”。

等到严嵩位高权重，欧阳淑端也随他来到北京，也被封为了一品诰命夫人。在明朝，官员三妻四妾是十分正常的时期，一定地位的大官不纳几个小妾，反而会显得与官场格格不入。但是严嵩即使坐上了内阁首辅之位，也依然没有纳妾，与妻子恩爱如旧。

严嵩夫妻俩可以说是白头偕老，欧阳淑端死时已有83岁高龄，比严嵩早去世5年，也正是那一年严嵩被弹劾倒台。因为只有一个妻子，严嵩一生也只有三个孩子，两个女儿和独子严世蕃，爱屋及乌对孩子十分宠爱。