Ou você pode fazer isso sem se preocupar com os resultados excluídos. Basta obter o quarto antes do id fornecido (6) por:
SELECT * FROM SomeTable WHERE id < 6 ORDER BY id DESC LIMIT 4,1
SELECT * FROM SomeTable WHERE id < 6 ORDER BY id DESC LIMIT 4,1