嘉靖四十年(1561)，嚴(yán)嵩的妻子歐陽(yáng)氏去世，嚴(yán)世蕃按舊時(shí)禮制應(yīng)回鄉(xiāng)守制三年，雖然皇帝應(yīng)嚴(yán)嵩的奏請(qǐng)，準(zhǔn)許嚴(yán)世蕃留京，但他在居喪期間已不能代父入值票擬。嚴(yán)嵩此時(shí)已有八十余歲，老朽昏聵，他所作的票擬往往言語(yǔ)不清，前后矛盾，他所進(jìn)獻(xiàn)的青詞也都是別人代寫(xiě)，這些多不稱(chēng)世宗的心意，遂對(duì)嚴(yán)嵩漸漸心生不滿(mǎn)，后來(lái)又聽(tīng)說(shuō)嚴(yán)世蕃貪*縱，對(duì)其父子更感厭惡。