如何监视大.sql文件的导入进度？

$ mysql -h localhost -u root 'my_data' < foobar.sql

$ mysql --version
/usr/local/mysql/bin/mysql  Ver 14.12 Distrib 5.0.96, for apple-darwin9.8.0 (i386) using readline 5.1

#1 楼

如果您只是从* nix上的CLI从转储文件导入，例如

mysql -uxxx -pxxx dbname < /sqlfile.sql

，那么请先在操作系统上安装管道查看器，然后尝试如下操作：

pv sqlfile.sql | mysql -uxxx -pxxxx dbname

，它将在程序运行时显示进度条。

它非常有用，您也可以用它来估算mysqldump的进度。

pv转储sqlfile.sql并将其传递给mysql（由于管道运算符）。在转储时，它显示进度。很酷的事情是，mysql仅以其可以处理数据的速度来获取数据，因此pv可以显示导入的进度。我没有任何证据。但似乎是这样。我想这里使用了一些缓冲区，但是在某些时候我认为mysql在仍在忙处理时不再读取任何数据。

#2 楼

如果您已经开始导入，则可以在另一个窗口中执行此命令以查看数据库的当前大小。如果您知道要导入的.sql文件的总大小，这可能会有所帮助。

SELECT table_schema "Data Base Name", sum( data_length + index_length ) / 1024 / 1024 "Data Base Size in MiB" 
FROM information_schema.TABLES GROUP BY table_schema;  

信用至：http://forums.mysql.com/ read.php？108,201578,201578


MySQL 8.0参考声明了以下有关准确性的信息： br />对于MyISAM，DATA_LENGTH是数据文件的长度，以字节为单位。

对于InnoDB，DATA_LENGTH是为聚簇索引分配的大致内存量，以字节为单位。具体来说，它是聚集的
索引大小（以页为单位）乘以InnoDB页面的大小。


/>
对于MyISAM，INDEX_LENGTH是索引文件的长度（以字节为单位）。

对于InnoDB，INDEX_LENGTH是为非聚集索引分配的近似内存量，以字节为单位。具体来说，它是
非聚集索引大小（以页为单位）的总和乘以InnoDB页面
大小。

#3 楼

当您执行单个数据库的mysqldump时，所有表都按字母顺序转储。

自然地，将mysqldump重新加载到数据库中也将按字母顺序转储。 >您可以只显示一个SHOW PROCESSLIST；并找出运行mysqldump的数据库连接。重新装入转储时，数据库连接将消失。

如果您想知道转储文件中包含哪些表，请对foobar.sql进行运行。

cat foobar.sql | grep "^CREATE TABLE" | awk '{print }'

UPDATE 2012-05-02 13:53 EDT

对不起，因为您没有注意到只有一个表。

如果表是MyISAM，则唯一监视的方法是从OS的角度来看。原因？该表在整个重装过程中被写锁定。你在找什么？ .MYD和.MYI文件的大小。当然，您需要将其与之前导入的其他数据库服务器上的表大小进行比较。

如果表是InnoDB并且启用了innodb_file_per_table，则监视的唯一方法是从操作系统的观点。原因？该表在整个重装过程中被写锁定。你在找什么？ .ibd文件的大小。当然，您需要将其与之前导入的其他数据库服务器上的表大小进行比较。

如果表为InnoDB并且禁用了innodb_file_per_table，则即使从操作系统的角度来看

UPDATE 2012-05-02 13:56 EDT

我去年曾这样说过：我如何获得％db.sql类型的进度？ mysql“

UPDATE 2012-05-02 14:09 EDT

由于标准的mysqldump写锁定表，如下所示：

LOCK TABLES `a` WRITE;
/*!40000 ALTER TABLE `a` DISABLE KEYS */;
INSERT INTO `a` VALUES (123),(451),(199),(0),(23);
/*!40000 ALTER TABLE `a` ENABLE KEYS */;
UNLOCK TABLES;

然后，在释放表锁之前，无法获得mysql的进步。

如果可以从转储文件中获得LOCK TABLES和UNLOCK TABLES的注释，...


如果表是MyISAM，则SELECT COUNT（*）将起作用
如果表是InnoDB，则SELECT COUNT（*）可能会减慢/停止加载，直到完成计数为止。

#4 楼

每2秒您将看到进程正在运行。

watch 'echo "show processlist;" | mysql -uuser -ppassword';

如果您希望它不那么频繁，则添加-n x，其中x是秒数。 5秒将是：

watch -n 5 'echo "show processlist;" | mysql -uuser -ppassword';

#5 楼

如果只想检查它是否已停止，则可以查询

show processlist; 

并查看正在执行的操作。

#6 楼

作为无法上电或上电说谎的人的解决方案。您可以在/ var / lib / mysql中监视包含数据的ibdata1文件的大小。这将最终达到源服务器中文件大小的相同大小（或大约相同）。

如果有很多表，您还可以在/ var / lib / mysql / <数据库名称>。

最近，当一个长期数据库在三到四年的时间内建立了大约20G的日志文件时，我碰巧使用了这个事实。我注意到传输需要花费很多时间，并使用了这种技术来监视进度。

我认为，当数据库不涉及某个地方或其他文件时，这一天不太可能出现。同时，您可以监视文件以查看传输进度。自从编写第一个sql数据库以来，我建议的方法就是您可以以一种或另一种形式执行的操作。我从不打算暗示手动骑师可以依靠任何一种“官方”技术。它假定您对计算机具有一般水平，尤其是对unix。

#7 楼

如果您的数据库处于安静状态（即没有其他用户处于活动状态），并且您只想查看读/写活动，那么为什么不这样做：

mysqladmin -h<host>-uroot -p<yourpass> extended -r -i 10 |grep 'row'

您将会看到读取/写入/插入/等待/更新的数量。

例如，如果要插入，您将看到类似以下内容： >其中28958是在您的间隔内插入的行数（在我的情况下为10秒）。

#8 楼

我有一个500 MB的SQL文件要导入。我花了大约2个小时。在导入过程开始时，mysqld CPU使用率接近100％。但是几分钟后，CPU使用率降到了15％。 mysql的导入只花了3分钟！ CPU利用率一直都是100％。

如果您想使用此设置，则需要编辑“ /etc/mysql/my.cnf”文件并使用“ sudo”重新启动mysql服务器。服务mysql重新启动”。

这是我的“ my.conf”文件的设置：

    [mysqld]
    innodb_log_buffer_size = 256M
    innodb_fast_shutdown = 0
    innodb-doublewrite = OFF
    innodb_io_capacity = 1000
    innodb_flush_log_at_trx_commit = 0

请注意：“ innodb_flush_log_at_trx_commit = 0“仅每秒执行一次提交。因此它不符合ACID，但可以接受批量进口。导入后，可以将“ innodb_flush_log_at_trx_commit”的值设置回1并重新启动数据库。
链接到mySQL文档

#9 楼

对于正在使用mysqldump查找管道查看器示例的人，您将可以执行以下操作：

mysqldump -hxxx -uxxx -p dbname | pv -W > dump.sql

-W标志只是告诉pv等待第一个字节在显示进度之前（提示后）

#10 楼

您可以在文件夹\ Msql \ Data [DB name]
中监视导入。

#11 楼

好的，另一个解决方法。但这可能是最糟糕，最不准确的选择。

这就是我的Windows解决方案：

按
打开任务管理器

CTRL + SHIFT + ESC

复制“ mysqld.exe”磁盘值速度

e.g. 11mb/s

将其放在像这样的计算器中：https：// techinternets。 com / copy_calc？do

估算ETA。我的案例是：

Speed: 8 MB/s
Size: 4.9 GB
0 Hours, 11 Minutes and 29 Seconds

结果：

Beg -> 11:19
ETA -> 11:31
End -> 11:39

#12 楼

如果您有gnu coreutils / dd版本> = 8.24（2015年7月3日发布），则可以使用dd的status = progress参数，

例如

cat dbdump.gz | gzip -d | mysql --password=root -v | time dd of=/dev/null status=progress

* PS：不适用于busybox，busybox dd无法理解“ status = progress”

#13 楼

我使用https://github.com/Xfennec/progress并通过watch监控

watch progress

导入zcat example.sql.gz | mysql -u root -proot -h localhost example后

#14 楼

我很惊讶没有人发布'mysql -v'作为选项。如果卡住，则输出将停止。