明正统三年(1438)乡荐，次年赐进士第三名，授编修。景泰年间(1450—1456)以在文华殿受命赋诗，受到景泰帝赞赏，并得到提拔，曾出使朝鲜。天顺初年(1457)，任为学士，入讲东宫，得到宪宗好评。天顺三年，主持顺天府(今北京)乡试，由于他秉公行事，没有录取大臣子，被诬告而遭流放。在流放7年间，以讲学授课为己任，学生都能学而有成，深受当地士人敬重。成化初(1465)宪宗即位后，倪官复原职，不久与儿子倪谦岳一起调入史局，编修《英宗实录》。后升任礼部右侍郎，成化（一四六五至一四八七）中又转任南京礼部尚书。卒后追赠太子少保，谥文僖。工笔札，王世贞谓其与僧求竹帖无意而有笔。事迹收录于《三吴墨妙跋》、《列卿记》。