Você precisa adicionar
LIMIT às suas consultas. Exemplo do manual MySQL
:SELECT * FROM tbl LIMIT 5,10; # Retrieve rows 6-15
Aqui,
5 é o deslocamento inicial e 10 é a quantidade de linhas que você deseja buscar. Para o lado do cliente, você precisará do plugin jQuery de rolagem infinita .