Laddar 5 miljoner rader i Pandas från MySQL

Det bästa sättet att ladda alla data från en tabell från -any-SQL-databas till pandor är:

1. Dumpa data från databasen med COPY för PostgreSQL, VÄLJ I UTFIL för MySQL eller liknande för andra dialekter.
2. Läser csv-filen med pandor med pandas.read_csv funktion

Använd kontakten endast för att läsa några rader . Styrkan med en SQL-databas är dess förmåga att leverera små bitar av data baserat på index.

Att leverera hela bord är något man gör med dumpningar.