חילוץ טבלה בודדת מ-MySQL dump

לא כל משימה צריכה את כל מסד הנתונים. כשאתם בונים תכונה מקומית, אתם לעיתים רחוקות רוצים dump ייצור מלא שממלא את הדיסק ולוקח שעה לייבוא. אתם רוצים את חופן הטבלאות שהתכונה באמת נוגעת בהן.

אותו דבר נכון כשאתם מנפים באגים בטבלה בודדת — שחזור בעיית נתונים ב-orders לא דורש את 126 הטבלאות האחרות — או עושים מיגרציה חלקית, שבה רק כמה טבלאות עוברות לשירות חדש. בכל המקרים האלה השאלה זהה: איך אני מוציא רק את הטבלאות האלה מתוך dump ענק, בצורה נקייה ומהירה?

גישת sed/grep ולמה היא נשברת

התשובה הקלאסית היא לחתוך את הקובץ עם sed בין כותרות המקטע ש-mysqldump כותב לכל טבלה:

# משיכת טבלת ה-users מתוך קובץ mysqldump
sed -n '/-- Table structure for table `users`/,/-- Table structure for table/p' dump.sql > users.sql

זה נראה חכם, ועל dump קטן ומסודר זה אולי אפילו יעבוד פעם אחת. על קובץ אמיתי של 7 ג'יגה-בייט זה מתפרק בהרבה דרכים עדינות:

• INSERTs רב-שורתיים. INSERT INTO ... VALUES יחיד יכול להשתרע על אלפי שורות. כלים מבוססי-שורה כמו sed ו-grep חותכים את השורות האלה בחצי ומייצרים קובץ שלא יעבור פירוק.
• Backticks ותווים מיוחדים. ערכי עמודות מכילים --, נקודה-פסיק, backticks, מרכאות ושורות חדשות בתוך מחרוזות. התבנית שלכם מתאימה לטקסט בתוך נתונים שמעולם לא נועד להיות מפריד.
• שמות טבלאות כמחרוזות משנה. חילוץ user תופס גם את user_roles, user_sessions ו-password_user, כי השם מופיע כמחרוזת משנה של אחרים.
• הערות וכותרות משתנות. טקסט ההערה המדויק משתנה בין גרסאות MySQL, MariaDB ו-PostgreSQL, ו-pg_dump לא משתמש באותן כותרות כלל — כך שאותה פקודה מחזירה בשקט כלום.
• אין מודעות למפתחות זרים. גם אם תחתכו את orders בצורה מושלמת, השורות שלו מפנות אל users. ל-sed אין מושג, אז החילוץ נכשל בייבוא עם שגיאת מפתח זר.

אתם בסוף עורמים awk על grep על sed, בודקים על תת-קבוצות, ועדיין לא בוטחים בתוצאה. יש דרך טובה יותר.

חילוץ טבלאות עם DumpCleaner

DumpCleaner מפרק את ה-dump כמו שצריך — הוא מבין גבולות פקודות, INSERTs רב-שורתיים, backticks והערות — אז הוא תמיד חותך בשורות הנכונות. חילוץ הטבלאות שאתם צריכים לוקח ארבעה שלבים:

1. גררו את קובץ ה-.sql שלכם פנימה. DumpCleaner מזרים את הקובץ, אז dump של 7 ג'יגה-בייט נפתח עם זיכרון קבוע במקום לטעון את הכל.
2. קראו את רשימת הטבלאות שזוהתה אוטומטית. כל טבלה מפורקת ומוצגת עם מספר השורות והגודל שלה — בלי לגלול דרך מיליוני שורות כדי למצוא מה יש שם.
3. בחרו את הטבלאות שאתם רוצים. סמנו users, orders ו-products, או הקלידו תבנית regex / החרגה כמו *_logs כדי להפיל קבוצות שלמות בבת אחת.
4. כללו הורי מפתח זר וייצאו. אופציונלית משכו את טבלאות ההורה המצוינות אוטומטית, ואז ייצאו קובץ נקי וניתן-לייבוא.

כמה דברים הופכים את זה לפחות מעצבן מכלי מעטפת:

• תבניות החרגה כמו *_logs או *_sessions מסירות רעש של ביקורת ו-session בלי לבטל סימון של עשרות טבלאות ידנית.
• מסנני regex מאפשרים לכם להתאים לפי קידומת, סיומת או כל תבנית — שמרו על כל מה שמתאים ל-shop_*, לדוגמה.
• תצוגה מקדימה חיה מציגה בדיוק אילו טבלאות יגיעו לפלט תוך כדי שאתם משנים את הבחירה.
• גודל פלט משוער מספר לכם כמה גדול יהיה החילוץ לפני שאתם מייצאים, כך שאתם יודעים שהוא יתאים מקומית.
• תלויות מפתח זר יכולות להיכלל אוטומטית, כך שבחירה של orders בשקט מביאה איתה את users והחילוץ מתייבא בלי שגיאות אילוץ.

שאלות נפוצות