Все предки Неплюеева несли серьезную ответственность за людей. Пра-пра-прадед Неплюева – Иван Иванович (5.11.1693-11.11.1773) жил и служил при шести царях. В 1720 году блестяще сдал экзамен в присутствии Петра Великого, выразившегося о нем: "В этом малом будет толк". Служил в чине поручика морского галерного флота, был главным командиром над всеми судами, строившимися в Петербурге. Долгое время уже при Елизавете был русским резидентом Константинополя и получил много наград. В результате доноса был отстранен от всего, арестован, лишен поместий. Но вскоре императрица убедилась в его невиновности и вернула ему чин тайного советника и орден, не вернув, правда, поместья. Назначен он был наместником Оренбургского края и за 16 лет основал Оренбург с целью обороны. Много заботился о устроении школ и церквей, экономике города, открыл немало заводов.
Он оставил завещание всем будущим поколениям Неплюевых: «Подчиненным своим, а паче крестьянам, будь более отец, нежели господин, присно держи в памяти слово Божье, что милости хочу, а не жертвы, что они такие же люди, как и ты, кроме чинов и званий, данных тебе гражданским законом».
Иван Иванович Неплюев пользовался большим доверием Екатерины II, которая поручала ему все столичные войска, вела с ним переписку и вверяла ему заботы о наследнике престола. По характеристике историка Ивана Ивановича Голикова о И. И. Неплюеве: «Сей достопочтенный муж имел разум твердый и тонкий, деятельность неусыпную, правосудие строгое и никакими пристрастиями и интересами непоколебимое... был враг вольнодумства, суеверия, ласкательства и потаковщиков, всякие несчастия и прискорбности сносил с благодарением Богу...».
Бабушка Неплюева, Берта Васильевна Дибич (10.12.1794-25.03.1869), дочь генерала-фельдмаршала Дибича Забалканского, оказавшего большое влияние на русскую историю, одержал победу над турками на Балканах, была замужем за Иваном Ивановичем Неплюевым (8.05.1802-22.10.1858), полковником лейб-гвардии Киевского гусарского полка.