Isso precisa ser gerenciado pelo método pre_dump ou post_dump do Marshmallow. Mas, na verdade, decidi usar métodos de paginação SQLAlchemy, pois ele me deu o total de linhas na resposta.