Extreu una sola taula d'un abocament MySQL

No tota feina necessita la base de dades sencera. Quan estàs construint una funcionalitat en local, rarament vols un abocament complet de producció omplint-te el disc i trigant una hora a importar-se. Vols el grapat de taules que la funcionalitat realment toca.

El mateix passa quan estàs depurant una sola taula (reproduir un problema de dades a orders no requereix les altres 126 taules) o fent una migració parcial, on només unes quantes taules es mouen a un servei nou. En tots aquests casos la pregunta és la mateixa: com trec just aquestes taules d'un abocament gegant, de manera neta i ràpida?

L'enfocament amb sed/grep i per què es trenca

La resposta clàssica és tallar el fitxer amb sed entre les capçaleres de secció que mysqldump escriu per a cada taula:

# extreu la taula users d'un fitxer mysqldump
sed -n '/-- Table structure for table `users`/,/-- Table structure for table/p' dump.sql > users.sql

Sembla enginyós, i en un abocament petit i endreçat fins i tot podria funcionar un cop. En un fitxer real de 7 GB s'esfondra de moltes maneres subtils:

• INSERT multilínia. Un sol INSERT INTO ... VALUES pot abastar milers de línies. Les eines orientades a línies com sed i grep tallen aquestes files pel mig i produeixen un fitxer que no s'analitzarà.
• Cometes invertides i caràcters especials. Els valors de columna contenen --, punts i coma, cometes invertides, cometes i salts de línia dins de les cadenes. El teu patró coincideix amb text dins de les dades que mai no havia de ser un delimitador.
• Noms de taula com a subcadenes. Extreure user també agafa user_roles, user_sessions i password_user, perquè el nom apareix com a subcadena d'altres.
• Els comentaris i capçaleres varien. El text exacte del comentari varia entre versions de MySQL, MariaDB i PostgreSQL, i pg_dump no fa servir les mateixes capçaleres en absolut, així que la mateixa ordre retorna silenciosament res.
• Cap consciència de claus foranes. Fins i tot si talles orders perfectament, les seves files referencien users. sed no en té ni idea, així que l'extracció no s'importa a causa d'un error de clau forana.

Acabes apilant awk sobre grep sobre sed, provant amb subconjunts, i encara no et fies del resultat. Hi ha una manera millor.

Extreu taules amb DumpCleaner

DumpCleaner analitza l'abocament correctament (entén els límits de les sentències, els INSERT multilínia, les cometes invertides i els comentaris), així que sempre talla per les línies correctes. Extreure les taules que necessites es fa en quatre passos:

1. Arrossega-hi el teu abocament .sql. DumpCleaner recorre el fitxer en flux, així que un abocament de 7 GB s'obre amb memòria constant en lloc de carregar-ho tot.
2. Llegeix la llista de taules autodetectada. Cada taula s'analitza i es llista amb el seu recompte de files i la seva mida: sense desplaçar-te per milions de línies per trobar què hi ha.
3. Tria les taules que vols. Marca users, orders i products, o escriu un patró regex / d'exclusió com ara *_logs per eliminar grups sencers de cop.
4. Inclou els pares de clau forana i exporta. Opcionalment, inclou automàticament les taules pare referenciades i després exporta un fitxer net i importable.

Unes quantes coses fan que això sigui molt menys enutjós que les eines de shell:

• Patrons d'exclusió com *_logs o *_sessions eliminen el soroll d'auditoria i de sessió sense desmarcar dotzenes de taules a mà.
• Filtres regex et permeten coincidir per prefix, sufix o qualsevol patró: manté tot el que coincideixi amb shop_*, per exemple.
• Una previsualització en directe mostra exactament quines taules acabaran a la sortida a mesura que canvies la selecció.
• Una mida de sortida estimada t'indica com de gran serà l'extracció abans d'exportar, així saps que et cabrà en local.
• Les dependències de clau forana es poden incloure automàticament, així triar orders arrossega discretament users i l'extracció s'importa sense errors de restricció.

Preguntes freqüents