Você pode envolver sua consulta dentro de outra:
SELECT
cnt AS page_visits
, COUNT(*) AS number_of_visitors
FROM
( SELECT
COUNT(*) AS cnt --- use: COUNT(DISTINCT page_id)
--- for a different count
FROM vislog
GROUP BY visid
) AS grp
GROUP BY cnt
ORDER BY number_of_visitors ;
ou (suponho que isso faça mais sentido para passar os números para um gráfico), remova o
ORDER BY
que é o mesmo que colocar:ORDER BY cnt ;