Mysql
 sql >> Base de Dados >  >> RDS >> Mysql

Carregando 5 milhões de linhas no Pandas do MySQL


A melhor maneira de carregar todos os dados de uma tabela do banco de dados -any-SQL em pandas são:
  1. Descarregar os dados do banco de dados usando COPY para PostgreSQL, SELECT INTO OUTFILE para MySQL ou similar para outros dialetos.
  2. Ler o arquivo csv com pandas usando o pandas.read_csv função

Use o conector apenas para ler algumas linhas . O poder de um banco de dados SQL é sua capacidade de fornecer pequenos blocos de dados com base em índices.

Entregar tabelas inteiras é algo que você faz com dumps.