V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
MySQL 5.5 Community Server
MySQL 5.6 Community Server
Percona Configuration Wizard
XtraBackup 搭建主从复制
Great Sites on MySQL
Percona
MySQL Performance Blog
Severalnines
推荐管理工具
Sequel Pro
phpMyAdmin
推荐书目
MySQL Cookbook
MySQL 相关项目
MariaDB
Drizzle
参考文档
http://mysql-python.sourceforge.net/MySQLdb.html
FenixVu
V2EX  ›  MySQL

mysql4G 的一个库,导入了一天还没导入完

  •  
  •   FenixVu · Nov 25, 2022 · 3338 views
    This topic created in 1248 days ago, the information mentioned may be changed or developed.

    这咋定位问题啊 看 show processlist ,也没锁表还在 insert 同期跑的一个 32g 的早跑完了

    7 replies    2022-11-26 11:41:16 +08:00
    seers
        1
    seers  
       Nov 25, 2022 via Android
    看日志是不是写满了一直在刷日志,系统 io 也检查下是不是有其他占用
    bjzhush
        2
    bjzhush  
       Nov 25, 2022
    直接看 SQL ,看看是不是逐条 insert ,如果是批量 insert 一次 insert 几十上百条数据会快很多
    awanabe
        3
    awanabe  
       Nov 25, 2022   ❤️ 1
    小技巧:
    建表的时候先把表的索引全部去掉, 然后导入就很快, 导入之后再加索引
    westoy
        4
    westoy  
       Nov 25, 2022
    是不是没关事务
    realpg
        5
    realpg  
    PRO
       Nov 26, 2022
    建议找个 dba
    FenixVu
        6
    FenixVu  
    OP
       Nov 26, 2022
    @bjzhush
    卧槽真的,我看了下 1000w+insert
    bjzhush
        7
    bjzhush  
       Nov 26, 2022
    @FenixVu 如果一行一个 SQL ,你可以写代码自己合并批量 insert ,记得建表语句去掉索引
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5713 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 43ms · UTC 01:37 · PVG 09:37 · LAX 18:37 · JFK 21:37
    ♥ Do have faith in what you're doing.