MySQL導出TSV格式文件

能夠使用mysqldump, 也能夠使用mysql -emysql

使用mysqldump

由於要使用到 -T / --tab 參數, 須要先查看mysql設置的secure_file_privsql

mysql> select @@secure_file_priv;
+-----------------------+
| @@secure_file_priv    |
+-----------------------+
| /var/lib/mysql-files/ |
+-----------------------+
1 row in set (0.00 sec)

在使用 -T / --tab 參數時, 必須使用上面的地址, 不然會報以下錯誤bash

mysqldump: Got error: 1290: The MySQL server is running with the --secure-file-priv option so it cannot execute this statement when executing 'SELECT INTO OUTFILE'

因而導出的命令爲測試

sudo mysqldump -h 127.0.0.1 -u root -p -T /var/lib/mysql-files/ demodb demo_table

若是當前用戶在此目錄無寫權限, 須要使用sudo. 在 /var/lib/mysql-files/ 路徑下會生成對應table的sql文件和txt文件, 其中sql文件存儲的是表結構, txt存儲的是以tab分隔的記錄.this

使用mysql -e

# 導出數據
mysql --user=root --password='' phineas_and_ferb -e "SELECT * FROM characters INTO OUTFILE '~/tmp/data.txt' FIELDS TERMINATED BY '\t' OPTIONALLY ENCLOSED BY '\"' LINES TERMINATED BY '\n';"

# 若是須要導出表頭
mysql --user=root --password='' -e "SELECT GROUP_CONCAT(COLUMN_NAME SEPARATOR '\t') FROM INFORMATION_SCHEMA.COLUMNS WHERE table_schema='phineas_and_ferb' and table_name='characters' INTO OUTFILE '~/tmp/output.txt' FIELDS TERMINATED BY '\t' OPTIONALLY ENCLOSED BY '' ESCAPED BY '' LINES TERMINATED BY '\n';"
cat ~/tmp/data.txt >> ~/tmp/output.txt

由於這種狀況下實際是mysqld在寫文件, 因此能夠不須要sudo權限.
在實際測試中, 導出約5kw條記錄(最終tsv文件大小爲2.6GB)使用了13分鐘.server

相關文章
相關標籤/搜索