Зависит от того, контролируете ли вы тот пакет, из которого импортируете. Если некоторые классы нельзя импортировать из внешнего мира, рассмотрите возможность сделать их закрытыми или закрытыми для пакета (без модификатора доступа).
Если вы не контролируете этот пакет и вам все еще нужно запретить импорт некоторых классов, рассмотрите возможность создания и использования какого-либо фасада вместо целевого пакета, см. https://en.wikipedia.org/wiki/Facade_pattern. Это не пуленепробиваемое решение, но оно увеличит вероятность того, что вы не будете использовать этот класс по ошибке.
Насколько я знаю, нет никакой возможности запретить импорт видимого класса в путь к классам.