加载解析txt文件中的数据到数据库(适合大量数据的情况)
将txt文本文件中的数据解析到数据库有很多种方式,比如不同的语言,java,python,shell等。
今天来介绍一种mysql自带的,快速加载txt文本中的数据,录入到数据库中的方法。
该方法适合导入大量数据的情况,博主亲测,加载一个拥有400多万条数据的txt文本到数据库仅需1-2分钟。
具体方式如下(此处写成在shell函数配置加载的方式):
function loadAndStore{
#$1 表示调用函数时传入的参数,此处代表文件路径
if test -f $1; then
#database_name表示你的数据库名,username表示用户名,password表示密码(去掉单引号)
mysql -u'username' -p'password' database_name <<eof
load data