Levana

Гарри Поттер ходил в ту же начальную школу что и его кузен.
Гарри Поттер не то чтобы голодал. Даже когда летом перед вторым курсом он сидел в заточении - еду ему приносили. Били ли Гарри Поттера? Тоже нет.
Он был одет - пусть и в вещи кузена, обут, обеспечен школьными принадлежностями, сыт.
Так же мы знаем, что Петунья пробовала его стричь, чтобы он выглядел нормально - но волосы отросли. Так же Гарри был вполне здоров и явно посетил хотя бы раз детского офтальмолога. И это сугубо канон.
Да, может они его и не любили, но нельзя говорить о том, что ребёнок был заброшен.
И опять же, до 11 лет воспитание Гарри лежало на Верноне и Петунье.
И Гарри как мы видим вежливый, воспитанный мальчик, способный отличать плохое от хорошего, и не ест руками. Уже достижение.

Ну и самый показательный пример.
С письмами.
Ведь вместо того, чтобы вся семья Дурсль спасалась от писем из Ада на краю света, Вернон мог бы взять одного мальчишку и вывезти куда-то.

Или вот нелюбимые Гарри коты миссис фигг - Гарри оставляли с соседкой, а не бросали на произвол судьбы.
Какими бы Дурсли не рисовались негативными - функции опекунов они выполнили в целом вполне добросовестно.