Ekstrak satu tabel dari dump MySQL

Tidak setiap pekerjaan membutuhkan seluruh database. Saat Anda membangun sebuah fitur secara lokal, Anda jarang ingin dump produksi penuh memenuhi disk dan butuh satu jam untuk diimpor. Anda hanya ingin segelintir tabel yang benar-benar disentuh fitur itu.

Hal yang sama berlaku saat Anda men-debug satu tabel — mereproduksi masalah data di orders tidak memerlukan 126 tabel lainnya — atau melakukan migrasi sebagian, ketika hanya beberapa tabel yang pindah ke layanan baru. Dalam semua kasus ini pertanyaannya sama: bagaimana caranya mendapatkan hanya tabel-tabel ini dari dump raksasa, dengan bersih dan cepat?

Pendekatan sed/grep dan mengapa gagal

Jawaban klasiknya adalah mengiris file dengan sed di antara header bagian yang ditulis mysqldump untuk setiap tabel:

# tarik tabel users dari file mysqldump
sed -n '/-- Table structure for table `users`/,/-- Table structure for table/p' dump.sql > users.sql

Kelihatannya cerdik, dan pada dump yang kecil dan rapi mungkin bisa berhasil sekali. Pada file 7 GB sungguhan, cara ini berantakan dalam banyak hal yang halus:

• INSERT multi-baris. Satu INSERT INTO ... VALUES bisa membentang ribuan baris. Alat berbasis baris seperti sed dan grep memotong baris-baris itu di tengah dan menghasilkan file yang tidak dapat di-parse.
• Backtick dan karakter khusus. Nilai kolom mengandung --, titik koma, backtick, tanda kutip, dan baris baru di dalam string. Pola Anda cocok dengan teks di dalam data yang tidak pernah dimaksudkan sebagai pembatas.
• Nama tabel sebagai substring. Mengekstrak user juga menangkap user_roles, user_sessions, dan password_user, karena namanya muncul sebagai substring dari yang lain.
• Komentar dan header bergeser. Teks komentar persisnya berbeda antar versi MySQL, MariaDB, dan PostgreSQL, dan pg_dump sama sekali tidak memakai header yang sama — sehingga perintah yang sama diam-diam tidak mengembalikan apa pun.
• Tidak sadar foreign key. Bahkan jika Anda mengiris orders dengan sempurna, baris-barisnya mengacu ke users. sed tidak tahu itu, jadi hasil ekstrak gagal diimpor dengan error foreign key.

Anda pun akhirnya menumpuk awk di atas grep di atas sed, menguji pada subset, dan tetap tidak memercayai hasilnya. Ada cara yang lebih baik.

Ekstrak tabel dengan DumpCleaner

DumpCleaner mem-parse dump dengan benar — memahami batas pernyataan, INSERT multi-baris, backtick, dan komentar — sehingga selalu memotong pada baris yang tepat. Mengekstrak tabel yang Anda butuhkan hanya butuh empat langkah:

1. Seret dump .sql Anda ke dalam. DumpCleaner melakukan streaming file, jadi dump 7 GB terbuka dengan memori konstan alih-alih memuat semuanya.
2. Baca daftar tabel yang terdeteksi otomatis. Setiap tabel di-parse dan didaftar beserta jumlah baris dan ukurannya — tidak perlu menggulir jutaan baris untuk menemukan isinya.
3. Pilih tabel yang Anda mau. Centang users, orders, dan products, atau ketik pola regex / pengecualian seperti *_logs untuk membuang seluruh grup sekaligus.
4. Sertakan induk foreign key dan ekspor. Secara opsional tarik tabel induk yang diacu secara otomatis, lalu ekspor file yang bersih dan siap diimpor.

Beberapa hal membuat ini jauh lebih tidak merepotkan dibanding alat shell:

• Pola pengecualian seperti *_logs atau *_sessions membuang noise audit dan sesi tanpa perlu menghapus centang lusinan tabel secara manual.
• Filter regex memungkinkan Anda mencocokkan berdasarkan awalan, akhiran, atau pola apa pun — misalnya pertahankan semua yang cocok dengan shop_*.
• Pratinjau langsung menampilkan persis tabel mana yang akan masuk ke output saat Anda mengubah pilihan.
• Perkiraan ukuran output memberi tahu seberapa besar hasil ekstrak sebelum Anda mengekspor, jadi Anda tahu akan muat secara lokal.
• Dependensi foreign key dapat disertakan secara otomatis, jadi memilih orders diam-diam ikut membawa users dan hasil ekstrak terimpor tanpa error constraint.

Pertanyaan yang sering diajukan