sql >> Database teknologi >  >> RDS >> Mysql

Indlæser 5 millioner rækker i Pandas fra MySQL

Den bedste måde at indlæse alle på data fra en tabel ud af -any-SQL-database til pandaer er:

  1. Dumpning af data ud af databasen ved hjælp af COPY for PostgreSQL, VÆLG I UDFIL til MySQL eller lignende for andre dialekter.
  2. Læsning af csv-filen med pandaer ved hjælp af pandas.read_csv funktion

Brug kun stikket til at læse et par rækker . Styrken ved en SQL-database er dens evne til at levere små bidder af data baseret på indekser.

At levere hele borde er noget, du gør med dump.



  1. Find refererede enheder i SQL Server:sys.dm_sql_referenced_entities

  2. præstationsstraf af strenge som primære nøgler?

  3. SQL Server (TSQL) - Er det muligt at EXEC-sætninger parallelt?

  4. AWS Database Migration Service DMS