Как вариант(где-то встречал уже), если хранитель внутри, то фиделиус не работает. Правда, это противоречит канону, так как Дамболдор часто сидел на Гриммо. Или ограничение, скажем, 3 часа в сутки. Если больше - защита падает.