Почему-то все считают, что Снейп и Дамблдор непрерывно легилиментят все, что попалось в поле зрения. Легилименция в каноне это сложная направленная магия, которая требует большого умения, усилий, особых движений палочкой, вербального заклинания. (Связь ГП и ТЛ не в счет, там другое) И показывает не все и сразу, а какие-то относительно небольшие и случайные (если не знать где искать) моменты памяти, судя по тому, что увидел Гарри у Снейпа, например. Более того - памяти эпизодической, типа что делал и что видел, а не чувства и мысли. Дамблдор, принеся мальчика к родственникам, должен был досконально залигелиментить всю их жизнь на предмет потенциального! (еще не случившегося) плохого обращения с ребенком?
Или когда ГП попал в Хог, Дамблдор должен был вызвать ГП на ковер и начать открыто исследовать память на предмет плохого обращения? (Стирание памяти к магам тоже только в фиках такое простое и постоянное дело.) А ведь это еще и незаконно, скорее всего!
Вероятно, со временем он узнал, что родственники с мальчиком были строги и не особенно его любили. Знал ли он все подробности? Не думаю.