书请求任用邹元标、赵南星等东林党人。不过后来其上书推荐属吏时却被时任吏部尚书的赵南星检举过失不用，高与东林党人结下梁子，称病回乡。

天启四年的时候，东林、齐、楚、宣、浙数党互相诋诽，时为司礼秉笔的魏忠贤急于根除党争，便召高弘图出来担任原职。进京之后的高大力攻击赵南星，却对魏忠贤所用的崔呈秀等人语刺，惹得魏忠贤不快，原拟其为顺天巡按不用，让其闲住。

崇祯即位后，拟用高弘图，其却称