台州市图书馆

嘉靖十八年（１５３９）春，朝廷册立皇太子，是普天同庆大事，并按藩部邻国体系，派出钦使通告各国。时值安南（越南）内乱，廷议讨伐，黄绾说：“安南亦朝贡之国，不可以迩年叛服，故不使与闻。”②请皇帝“择大臣有学识者”为使者赴安南，可使臣服。嘉靖帝升黄绾为礼部尚书，为正使，翰林学士张治为副使， 去安南宣告皇太子册立一事，并相机调解内乱。
  此时，安南遣使上表，并籍其土地、户口，共有５３府、４９州１７６县，臣服天朝听候处分。嘉靖帝交礼部、兵部协议，并催促黄绾、张治早行。到了同年七月，黄绾仍未启程，上疏自己有病而失期，请改派两广、云贵重臣和给事中、御史或吏礼兵三部郎中为正副使，前往安南。嘉靖帝无奈同意。
  不久，黄绾上疏为其父黄俌及母鲍氏追赠给诰为礼部尚书和二品夫人。
  嘉靖帝正恼怒黄绾不赴安南一事无法处分，借此机会削除礼部尚书之职，以礼部侍郎之职闲住。此时，黄绾想起早年恩师王守仁写给他的信中说： 世风日偷，素所目为善类者，亦皆雷同附和，以学为讳。仕途如烂泥坑，勿入其中，鲜易复出。吾人便是失脚样子，不可不鉴也。① 这段话是王守仁入仕后７次升职，又６次提出辞官的深切感受。官场倾轧仕途险恶，劝黄绾及早抽身离职，去研究哲学思想。
  黄绾自正德六年（１５１１）祖荫入仕以来，３０多年从七品升至二品，其间４次离任，或称病归，或罢黜归，或母忧归，或避祸归。恰如王守仁所说“仕途如烂泥坑”，对自己喜爱的哲学荒废有时，既然仕途已经到顶，不如归去。于是第五次上疏辞官，准奏后一身轻松回黄岩新宅村翠屏山下再办石龙书院，重新讲学授徒，传授自己哲学思想，并伏案著述。

②《明史》卷１９７《黄绾传》。 ① 《王阳明全集》文录一。