Да Лорд просто обоих младенцев собирался ликвидировать. Кого первого нашли, к тем первым и пошёл.
Ну, допустим, пошёл бы он первым к Лонгботтомам. Никто же не думал, что он от этого развоплотится! Думали, что вторым номером пошёл бы к Поттерам всё равно.