Você não parece interessado na contagem real, então experimente:
SELECT 1 FROM table WHERE fk = 1 LIMIT 5000, 1
Se uma linha for retornada, você terá 5.000 e mais registros. Presumo que o
fk
coluna é indexada. SELECT 1 FROM table WHERE fk = 1 LIMIT 5000, 1
fk
coluna é indexada.