Depende se você tem um ORDER BY. Um ORDER BY precisa de todo o conjunto de resultados de qualquer maneira, para que possa ser ordenado.

Se você não tiver nenhum ORDER BY, ele deve ser executado mais rapidamente.

Em todos os casos, ele será executado pelo menos um pouco mais rápido, já que todo o conjunto de resultados não precisa ser enviado, é claro.