用ADO从文本文件中导入数据库的两种方法比较

我用的这两种方法,不管是哪一种,大体原理上都是打开文本,然后一行行读出,再根据分隔符拆分字段,然后再用ADO来一条条记录插入数据库中,但采用的ADO的方式不同,第一种用普通的ADOQUERY来操作,第二种则采用ADO的原生对象来操作,但在速度上是明显后一种占优的,且是很大的优势,原因我说不来,但认为是个不错的方法,虽然导入文本还有别的很好的方法,例如采用SQLSERVER的DTS等。但这些我还没做过尝试,就暂不说了。
1、
if dlgOpendatain.Execute then
  begin
    datapath := dlgOpendatain.FileName; //取得文件路径
    Filepath := ExtractFileName(datapath); //取得文件名
    AssignFile(TeFile1, datapath); //将文件变量与文件关联
    Reset(TeFile1); //以读写方式打开类型文件和无类型文件
    try
      j := 0;
      while not Eof(TeFile1) do
      begin
        application.ProcessMessages;
        Readln(TeFile1, str); //一行一行的读文件,str为一行的字符串
        recordstr := str;
        inc(j);
        i := 0;
        while pos(#9, recordstr) > 0 do //#9是tab分隔符
        begin
          str := Copy(recordstr, 1, Pos(#9, recordstr) - 1);
          case i of
            0:str1 := str;
            1:str2 := str;
          end;
          i := i + 1;
          recordStr := copy(recordstr, (Pos(#9, recordstr) + 1),
            length(recordstr));
          if i = 2 then
            str4 := trim(uppercase(recordStr));
        end;
        ADOQuery1.Close;
ADOQuery1.SQL.Clear;
        ADOQuery1.SQL.TEXT:='INSERT INTO S1,S2,S3 VALUES('+''''+
             str1''''+','+''''+str2+''''+','+''''+str3+''''+')';
        ADOQuery1.Prepare;
        ADOQuery1.ExecSQL ;
      end;
      MessageBox(GetactiveWindow(), '当前导入数据完毕!', '提示',
        MB_OK + mb_iconexclamation);
    except
      CloseFile(TeFile1);
    end;
  end;
2、
按下面的方法,四万条记录全部导入ACCESS,直接从文本中装载23.90秒,当我将文本装载到MEMO1中的时候,八万条记录全部导入ACCESS也不过四十一秒。
unit Unit1;
interface
uses
  Windows,
  Messages,
  SysUtils,
  Variants,
  Classes,
  Graphics,
  Controls,
  Forms,
  Dialogs,
  StdCtrls,
  ComCtrls,
  Gauges,
  DB,
  ADODB,
  ComObj,
  ADOInt;
type
  TStrArray = array[1..9] of string;
type
  TForm1 = class(TForm)
    Button1: TButton;
    OpenDialog1: TOpenDialog;
    StatusBar1: TStatusBar;
    Gauge1: TGauge;
    ADOConnection: TADOConnection;
    Label1: TLabel;
    Memo1: TMemo;
    procedure Button1Click(Sender: TObject);
    procedure FormCreate(Sender: TObject);
  private
    { Private declarations }
  public
    { Public declarations }
  end;
var
  Form1             : TForm1;
implementation
{$R *.dfm}
procedure TForm1.Button1Click(Sender: TObject);
const
  TabChar           = #32;              //定义空格键
var
  i, j              : integer;
  D1                : Real;
  TeFile1           : TextFile;
  datapath, Filepath, str: string;
  dd                : TStrArray;
  AdoRecordSet      : variant;
  FConnectionObject : _Connection;
begin
  AdoRecordSet := CreateOleObject('ADODB.RecordSet');
  ADOConnection.Connected := True;
  FConnectionObject := ADOConnection.ConnectionObject;
  AdoRecordSet.CursorLocation := clUseClient;
  AdoRecordSet.open('select *  from abcdefg where 1=2', FConnectionObject,
    adOpenStatic, adLockOptimistic, AdCmdText); //写数据库
  try
    OpenDialog1.Title := '请选择要打开的文件';
    OpenDialog1.Filter := '数据文件(*.txt)|*.txt';
    if OpenDialog1.Execute then
    begin
      DataPath := OpenDialog1.FileName; //取得文件路径
      Filepath := ExtractFileName(DataPath); //取得文件名
      //      Memo1.Lines.Clear;
      //      Memo1.Lines.LoadFromFile(DataPath); //.LoadFromStream(ms2);
      AssignFile(TeFile1, DataPath);    //将文件变量与文件关联
      Reset(TeFile1);                   //以读写方式打开类型文件和无类型文件
      statusbar1.Panels[1].Text := FormatDateTime('hh:mm:ss', now()); //开始时间
      //Gauge1.MaxValue:=Memo1.Lines.Count;
      D1 := Now;
      try
        //        for i := 0 to Memo1.Lines.Count do
        while not Eof(TeFile1) do
        begin
          Application.ProcessMessages;
          Readln(TeFile1, str);           //一行一行的读文件,str为一行的字符串
          statusbar1.Panels[3].Text := str;
          //str := Memo1.Lines[i];
          j := 1;
          while pos(TabChar, str) > 0 do
          begin
            dd[j] := Copy(str, 1, pos(TabChar, str));
            Delete(str, 1, Pos(TabChar, str) + 1);
            Str := TRIM(Str);
            Inc(j);
          end;
          DD[9] := str;
          AdoRecordSet.AddNew;
          try
            AdoRecordSet.fields[1].value := DD[1];
            AdoRecordSet.fields[2].value := DD[2];
            AdoRecordSet.fields[3].value := DD[3];
            AdoRecordSet.fields[4].value := DD[4];
            AdoRecordSet.fields[5].value := DD[5];
            AdoRecordSet.fields[6].value := DD[6];
            AdoRecordSet.fields[7].value := DD[7];
            AdoRecordSet.fields[8].value := DD[8];
            AdoRecordSet.fields[9].value := DD[9];
            AdoRecordSet.Update;
          except
          end;
          Inc(i);
          //Gauge1.Progress:=Gauge1.Progress + 1;
          Label1.Caption:=IntToStr(i);
        end;
        statusbar1.Panels[2].Text := FormatDateTime('hh:mm:ss', now());  //结束时间
        statusbar1.Panels[0].Text := '总用时:  ' + Floattostr((NOW - D1) * 24 *
          60 * 60);
        MessageBox(GetactiveWindow(), '当前导入数据完毕!', '提示',
          MB_OK + mb_iconexclamation);
      except
        CloseFile(TeFile1);
      end;
    end;
  finally
    AdoRecordSet.Close;
  end;
end;
procedure TForm1.FormCreate(Sender: TObject);
var                                     //联接ACCESS数据库的方法。
  path              : string;
begin
  path := ExtractFilePath(Application.ExeName); //程序路径
  if path[Length(path)] <> '\' then
    path := path + '\';
  ADOConnection.Connected := False;
  try
    ADOConnection.ConnectionString :=
      'Provider=Microsoft.Jet.OLEDB.4.0;Data Source=' +
      path + 'Data.MDB' + ';Persist Security Info=False';
    ADOConnection.Connected := true;
  except
    MessageBox(GetActiveWindow(), '系统错误!', '警告', MB_OK + MB_ICONWARNING);
    application.Terminate;
  end;
end;
end.


1、改进 SQL 语句,IN 的效率比 EXISTS 要低得多;
2、使用原生 ADO 对象,从存取对象一级提高效率(别告诉我 ADOExpress 很快)。
3、事务能提高效率?别开玩笑了!
4、代码如下:
uses ComObj;
procedure FastDeleteAInB(DBName: string);
const
  adCmdText = $00000001;
var
  cmd: OleVariant;
begin
  cmd := CreateOleObject('ADODB.Command');
  cmd.CommandType := adCmdText;
  //cmd.CommandTimeout := 15;
  cmd.ActiveConnection := 'Provider=Microsoft.Jet.OLEDB.4.0;Data Source=' + DBName;
  cmd.CommandText := 'DELETE FROM LinkGrp WHERE EXISTS (SELECT * FROM B WHERE LinkGrp.LGID = B.LGID)';
  cmd.Prepared := True;
  cmd.Execute;
  cmd := Unassigned;
end;
5、有效果的话,和其他几个问题一并结了吧。 

转载于:https://www.cnblogs.com/railgunman/archive/2011/01/03/1924340.html

VC与ADO技术集成Access数据库的实践教程 Visual C++(简称VC)是微软公司推出的一款强大的C++开发环境,它提供了丰富的库支持和开发工具,广泛应用于桌面、游戏开发以及系统编程等领域。而ActiveX Data Objects(ADO)是一套基于COM(Component Object Model)的数据访问技术,允许开发者通过编程访问和操作数据源,如数据库等。在VC项目中引入ADO库,可以极大简化数据访问操作,提升开发效率。Recordset对象是ADO中用于处理查询结果的主要工具。 阅读详情

相关推荐

ASP实现Excel数据批量导入至Access数据库技术指南

随着企业数据处理需求的不断增长,有效地将大量数据从Excel批量导入到数据库变得至关重要。ASP(Active Server Pages)作为一种成熟的技术,搭配ADO(ActiveX Data Objects),为这一需求提供了强大的解决方案。本章节将概述ASP在批量数据导入中的应用,并简要介绍整个数据流程。我们还将触及使用ASP技术批量导入Excel数据的基本概念和关键步骤,为之后的技术细节和实操部分打下基础。ASP作为一种服务器端脚本技术,允许开发者在服务器上编写动态生成HTML的脚本。

weixin_42230607的博客 548

ADO方法操作数据库

一、ADO连接数据库步骤 1、加载库 #import “C:\Program Files\Common Files\system\ado\msado60.tlb” no_namespace rename(“EOF”,“adoEOF”) 2、初始化ado组件 CoInitialize(NULL); 3、初始化连接对象和数据记录 _ConnectionPtr::CreateInstance(“ADOD...

Hi, Boy 1204

使用ADO Recordset对象导入Excel).txt

使用ADO Recordset对象把记录导入到Excel文件中获取或者建立 Excel 对象

种用ADO从文本文件中导入数据库的两种方法比较

我用的这两种方法,不管是哪一种,大体原理上都是打开文本,然后一行行读出,再根据分隔符拆分字段,然后再用ADO来一条条记录插入数据库中,但采用的ADO的方式不同,第一种用普通的ADOQUERY来操作,第二种则采用ADO的原生对象来操作,但在速度上是明显后一种占优的,且是很大的优势,原因我说不来,但认为是个不错的方法,虽然导入文本还有别的很好的方法,例如采用SQLSERVER的DTS等。但这些我还没做过尝试,就暂不说了。1、 if dlgOpendatain.Execute then  begin    dat

ninetowns2008的专栏 660

MFC实现ADO连接数据库并导入Excel文件

在Debug文件夹下的Login.ini文件中修改一下所连接的数据库信息即可

ado连接的文件

ado连接的文件

ADO 数据库的 导出和导入实例(从数据表导入到文件和把文本文件导入到数据库的数据表中)

using System; using System.Collections.Generic; using System.Linq; using System.Web; using System.Web.UI; using System.Web.UI.WebControls; using System.Data.SqlClient; using System.IO; namespa

昂头天外 922

RecordSet对象

这个资源是一个很实在的对象,请大家分享学习

C#进阶ADO.NET基础三 案例:登录框、导入文档、省市联动

一、ADO.NET基础练习题一:登录案例 if(txtName.Text.Length <=0) //未输入用户名,提示输入 { MessageBox.Show("请输入用户名!"); } else if (txtPsw.Text.Length <= 0) //未输入密码,提示输入

tufeiax的专栏 660

Unity 机械臂控制(二)——从碰撞检测到姿态解算:实现精准抓取

本文详细介绍了Unity中机械臂控制的实现方法,从碰撞检测到姿态解算,涵盖精准抓取的全流程。重点讲解了碰撞检测的分层处理、状态机设计、逆向运动学(IK)算法以及抓取稳定性优化等关键技术,并提供了实用的调试技巧和性能优化建议,帮助开发者实现高效的机械臂控制。

weixin_28693447的博客 307

Blazor Session设置

微软官方封装了一些浏览器的操作,其中就有Session的操作的封装ProtectedSessionStorage 微软文档因为我们知道,依赖注入的生命周期是Singleton程序Scoped网页:刷新,url直接跳转都会重置。Transient路由C# Blazor 学习笔记(10):依赖注入但是没有一个和浏览器绑定的生命周期。即浏览器关闭才会退出。这个是后端无法获取的,因为后端根本不知道浏览器何时关闭。这个只能用浏览器自带的缓存。

qq_44695769的博客 1788

SQL Server 数据库之导入导出数据

导入导出数据 导入数据表 导出数据表 导入其他源数据表

程序员小白的博客 1万+

Windows下MMdetection3D保姆级安装指南(含CUDA和PyTorch版本避坑)

本文提供Windows平台下MMdetection3D的完整安装指南,重点解决CUDA与PyTorch版本匹配问题。从环境准备到关键组件安装,详细介绍了CUDA Toolkit选择策略、PyTorch精准安装步骤,以及MM系列组件的安装顺序和常见错误解决方案,帮助用户顺利完成3D目标检测环境的配置。

weixin_42628941的博客 493

ADO 总结

ADO是微软提供的数据库访问COM组件,支持VB、VBA、ASP等开发环境。其核心组件包括Connection(连接数据库)、Recordset(数据集操作)、Command(执行查询)和Stream(处理二进制数据)。ADO支持多种数据类型,可执行参数化查询、大对象处理等操作,适用于数据库查询、更新、文件操作等场景。使用时需注意连接字符串配置、资源管理及错误处理。虽然功能强大,但作为较旧技术,在性能和现代开发支持上存在局限。适用于传统COM环境,对于新项目可考虑ADO.NET等替代方案。

likuoelie的博客 1103

大模型微调框架之TRL

近年来,大语言模型(LLMs)的快速发展推动了下游应用的繁荣,但如何高效地对这些模型进行对齐和微调,依然是研究与应用的热点。Hugging Face 开源的 TRL(Transformer Reinforcement Learning) 框架,提供了基于强化学习的语言模型训练方法,并支持 SFT(监督微调)、PPO(近端策略优化)、DPO(直接偏好优化)等多种方式,是目前对齐和微调 LLM 的重要工具。

和大家一起涨芝士 905

[零基础]用docker搭建Hadoop集群

[零基础]用docker搭建Hadoop集群,每一步都有详细的解释!

weixin_56114243的博客 2万+

VC如何使用ADO

VC用ADO访问数据库全攻略,介绍了VC用ADO来访问数据库的各个对象及各方法,很经典,也很实用,很值得一看。  正文 一、ADO概述 ADO是Microsoft为最新和最强大的数据访问范例 OLE DB 而设计的,是一个便于使用的应用程序层接口。ADO 使您能够编写应用程序以通过 OLE. DB 提供者访问和操作数据库服务器中的数据。ADO 最主要的优点是易于使用、速度快、内存支出少

梦想庚远 1443

【异常】SpringCloud Gateway报错503 SERVICE_UNAVAILABLE “Unable to find instance for xxx-gen“

网关服务报错,如下。

奶爸的编程之路,也就一周冷个三天 4226

关于将EXCEL文件导入到MYSQL数据库的一些方法

昨天因为老师这边需要,就涉及到了这个东西,其实最后还是老师给我的链接,以后要自己多动动脑 具体方法参考了:http://blog.163.com/six-lhf@126/blog/static/1992123220090410141011/ (后面发现下面还有篇文章,感觉更好操作一点,GOOGLE关键字 excel 导入mysql) 1.将选中的数据快儿拷贝到一个TXT文本文

流浪天空 9万+

使用AI预测彩票的架构思路

彩票是随机的数字游戏,不要过度依赖AI,本文仅供娱乐研究

淘淘小窝 9416

[Dify] 多步对话流程的实现技巧:构建连贯自然的多轮交互系统

摘要:本文探讨了AI系统中实现多轮对话的核心技术与应用方法。文章首先分析了多步对话的典型场景(如机票预订、财务报告生成)及其价值,提出了Dify平台实现该功能的三大机制:变量系统、条件控制和状态管理。随后详细介绍了顺序型、条件型和确认型三种基本对话模式,并通过"会议预约助手"案例展示了实际应用流程。文章还提供了提示词设计、变量引用等实用建议,并强调多轮对话成功的关键在于清晰的结构设计而非单纯依赖模型能力,最终实现自然流畅的人机交互体验。

技术小甜甜:传播可落地技术,帮助个人和企业降低解决真实场景问题的成本 1343

SQL注入漏洞攻击、数据库导入导出[从txt中导入导出]

1.SQL注入漏洞攻击 protected void Button1_Click(object sender, EventArgs e) { string constr = "data source=pc-20120907sdqu;initial catalog=shool;user id=sa;password=admin"; usi

zhanglan478950的专栏 1415

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

Excel 2010 VBA 入门 098 导入Access数据库的数据

Access是微软Office组件的数据库软件,使用它可以进行简单的数据库软件的开发。但Access的图表功能和数据分析功能不如Excel强大,常用的做法可以将Access中的数据导入 Excel中再进行处理。如何使用VBA导入Access的数据?如图所示,该表为Access中某个公司的加工数据表。 ...

复行数十步 1459

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

ADO.Net_案例1(数据导入导出)

数据导入导出: 导入:从文本文件中读取数据,插入到数据库表中; 导出:从数据库中读取数据,保存到文本文件中。 (易错点:Parameter的重复添加)   应用程序的主入口点: static void Main()         {             string dataDir = AppDomain.CurrentDomain.BaseDirectory;

chay1227的专栏 446

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

上一篇: 关于使用ACCESS中带参数的查询的用法
下一篇: ACCESS技巧集
aowo7144
博客等级 码龄10年 5粉丝 0原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值