标签：mysql,高效导数据
数据：一个db，2000个表格，2000张表格数据，每条记录30个column，平均每张表格4.3w条记录，总共86388670条记录。
机器：linux 64bit 8G内存 4核IntelX3320@2.5GHz
基本思路：
mysql -utest -pxxxx -s -e "source xxxx.sql"
将load语句放在xxxx.sql中
load语法：
load data [low_priority] [local] infile 'file_name.txt' [replace | ignore]
如果串行导入数据，会很慢，考虑并行，但可能有冲突，解决办法：
load之前清空表
truncate table xxxx 或 delete from table xxxx;
或使用replace或ignore关键字。
0
投稿猜你喜欢
本文实例为大家分享了Python函数实现学员管理系统的具体代码，供大家参考，具体内容如下这个是一个简单的管理程序输入姓名，年龄，性别（也可以- 于是我登陆主机的管理面板，重启了网站服务，ldb文件就消失了，网站打开也正常了，但过了数小时后，网站又再次出现以上情况，此种情况持续了好一段
- 【pytorch官方文档】：https://pytorch.org/docs/stable/generated/torch.nn.AvgPo
- 本文实例为大家分享了JavaScript实现切换多张图片的具体代码，供大家参考，具体内容如下循环切换图片HTML+CSS+JavaScrip
- 本文实例讲述了Python实现批量修改文件名的方法。分享给大家供大家参考。具体如下：下载了评书《贺龙传奇》，文件名中却都含有xxx有声下载，
- 遇到一个很奇怪的现象，在给页面添加“打印”按钮时，发现网页在IE6下居然不能打印，弹出一个对话框，遇到脚本错误。查看错误详细：定位到 url
- 这几天转了几个内容包含日语的贴，结果发现搜索数据库时出现“内存溢出”错误。上网搜索寻求答案未果。最后才发现这就是传说中的“日文 26 个片假
- 而由于InnoDB是一个健壮的事务型存储引擎，已经有10多年的历史，一些重量级的互联网公司(Yahoo,Google Netease ，Ta
- 一般我们能过VS2005的SQL explorer来添加一个本地的MDF文件。也许你可能会出现下面这个问题：Exception Detail
- 比如说如果设置为例外，那么里面的.py文件就不会被IDE索引，所以语法提示也不会包括里面的内容sys.path.append('..
- <table width="636" border="0" align="cente
- 概念Node.js 是构建在Chrome javascript runtime之上的平台，能够很容易的构建快速的，可伸缩性的网络应用程序。N
- 目录问题背景解决方案主要实现原理：可靠性：SpringBoot 集成使用 Redis 分布式锁使用示例参考文档问题背景现在的应用程序架构中，
- 因为一个需求，因为自己想多了一点东西，最后发现了一个问题，一个很奇怪的问题。这个问题我想还是我自己当初想法上的出路导致的吧，但想不通为什么会
- 功能说明： 滑动展开/收缩广告效果,可指定：广告完全展开时的停留时间，最大高度。兼容浏览器：IE5.0+、FF1.06+、Opera8.0+
- 问题：过滤用户输入中前后多余的空白字符‘ ++++abc123---
- 阅读上一篇：微软建议的ASP性能优化28条守则(2) 技巧 5：不要将数据库连接缓存在 Application 或 Session 对象中
- 本文研究的主要问题时Python读取word文本操作，分享了相关概念和实现代码，具体如下。一，docx模块Python可以利用python-
- 最近，Facebook设计团队在其位于加州帕罗奥多市(Palo Alto)的总部，提到了他们为2.5亿用户设计的原理和方法。 他们特别强调了
- JDBC是由java编程语言编写的类及接口组成，同时它为程序开发人员提供了一组用于实现对数据库访问的JDBC API,并支持SQL语言。利用
