Se você puder escrever uma consulta de doutrina para retornar a lista completa do que deseja, o pager a paginará.
Não tenho certeza, sem um esquema, de como você pode escrever essa consulta, nem mesmo 100% de certeza do que deseja fazer. Mas se você estiver tentando listar produtos com informações de categorias relacionadas, precisará de uma associação, caso contrário, se desejar uma lista mista de categorias e produtos, provavelmente desejará uma consulta UNION.
Se você postar um esquema e um pouco mais de informações sobre o que está fazendo, posso tentar te ajudar.