попробуйте
collection1.find({'albums': {'$in': [3, 7, 8]}})
из документации mongodb, [IN] allow[s] you to specify an array of possible matches
Если это не сработает, возможно, вернитесь и посмотрите на действительные типы 3
7
и 8
в коллекции, чтобы они были целыми числами.
print type(collection1.find_one()['albums'][0])