视频来自:老杜JDBC实战精讲 以及 宋红康JDBC核心技术教程
涉及:JDBC规范制定的背景,JDBC编程六部曲,JDBC事务,JDBC批处理,SQL注入,行级锁,以及数据库连接池和DbUtils包使用
JDBC笔记
JDBC是一套接口 java.sql.*,面向接口编程符合多态机制,降低程序的耦合度,提高程序的拓展力(灵活,不局限于具体)。
思考:为什么SUN要制定一套JDBC接口?
因为每一个数据库的底层实现原理不一样。使用这套接口,可以不必关心底层数据库,具体实现接口交给数据库厂商。
-
程序员负责调用接口,面向JDBC接口写代码
-
SUN公司负责定义这套数据库接口
-
驱动:mysql-connector-java-8.0.26.jar由mysql厂商提供,jar包有很多class文件。即是对接口的实现类
JDBC编程六步(需要背会)
- 第一步:注册驱动(告诉java程序即将连接的是哪个品牌的数据库)
- 第二步:获取连接(表示JVM的进程和数据库进程之间的通道打开了,属于进程通信,两个应用程序。)
- 第三步:获取数据库操作对象(专门执行SQL语句的对象)
- 第四步:执行SQL语句(DQL DML)
- 第五步:处理查询结果集(只有第四步执行select语句)
- 第六步:释放资源(进程间的通信,使用完资源后一定要释放资源)
1. 增删改:
import java.sql.Driver;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.sql.Connection;
import java.sql.statement;
public class JDBCTest01{
public static void main(String[] args){
Connection conn = null;
Statement stmt = null;
//1.注册驱动
try{
//方法一:
Driver driver = new com.mysql.jdbc.Driver();//多态
//Driver driver = new oracle.jdbc.driver.OracleDriver();Oracle驱动
DriverManager.registerDriver(driver);
//com.mysql.jdbc.Driver实现了接口java.sql.Driver
//方法二:类加载的方式驱动,String可以被写入xxx.properties中
Class.forName("com.mysql.jdbc.Driver");
//2.获取连接
/*
ur1:统一资源定位符(网络中某个资源的绝对路径)
URL包括写协议,IP,port, 资源名
https://www.baidu.com/这就是URL = http:180.101.49.12:80/index.html
http://通信协议; 180.101.49.12服务器IP地址
80服务器上软件端口 index.html服务器上某个资源名
jdbc:mysql://10.116.85.40:3306/fkddatabase
jdbc:mysql ://协议
10.116.85.40 IP地址
3306:端口号
fkddatabase:具体的数据库实例名
注意:localhost和10.116.85.40都是本机IP
*/
String ur1 = "jdbc:mysql://10.116.85.40:3306/fkddatabase";
String user = "root";
String password = "123456";
conn = DriverManager.getConnection(ur1, user, password);
//com.mysql.jdbc.JDBC4Connection@41cf53f9
//3.获取数据库操作对象(Statement专门执行SQL语句)
stmt = conn.createStatement();
//4.执行sql
//JDBC中的sql语句不需要;
String sql = "insert into dept(deptno, dname, loc) values(50, '人事部', '北京')";
//String sql = "delete from dept where deptno = 40";
//String sql = "update dept set dname = '销售部', loc = '天津' where deptno = 20"
//专门执行DML语句的(Insert, delete, Update)
//返回值是影响的“数据库中的记录条数
int count = stmt.executeUpdate(sql);
}catch(SQLException e){
e.printStackTrace();
}catch(ClassNotFoundException e){
e.printStackTrace();
}finally{
//6.释放资源
//为了保证资源的一定释放,在finally语句块中关闭资源,并且遵循从小到大依次关闭
//分别对其try...catch...
try{
if(stmt != null){
stmt.close();
}
}catch(SQLException e){
e.printStackTrace();
}
try{
if(conn != null){
conn.close();
}
}catch(SQLException e){
e.printStackTrace();
}
}
//5.处理查询结果集
}
}
- 什么是通信协议?
通信协议是通信之前就提前定好的数据传送格式,数据包具体怎么传,格式提前定好。
注册驱动第二种方式:类加载
class.forName("com.mysql.jdbc.Driver")//反射机制加载类自动调用静态代码块(源码中有注册驱动)
2. 配置资源文件:
jdbc.properties key = value
driver = com.mysql.jdbc.Driver
url = jdbc:mysql://localhost:3306/fkddatabase
user = root
password = 123456
package zju.edu.test;
import java.sql.*;
import java.util.ResourceBundle;
/**
* @Autor:godfu
* @Date:2022/2/28-21:55
*/
public class JDBCDemo {
public static void main(String[] args) {
ResourceBundle rc = ResourceBundle.getBundle("zju.edu.Resource.jdbc");
String driver = rc.getString(driver);
String url = rc.getString(url);
String user = rc.getString(user);
String password = rc.getString(password);
Connection conn = null;
Statement stmt = null;
try {
//1.注册驱动
Class.forName(driver);
//2.获取连接
conn = DriverManager.getConnection(url, user, password);
//3.获取数据库连接对象
stmt = conn.createStatement();
//4.执行SQL语句
String sql = "update dept set loc = 'beijing' where deptno = 30";
int count = stmt.executeUpdate(sql);
System.out.println("更新的数据数目:" + count);
}catch (SQLException e){
e.printStackTrace();
}catch (ClassNotFoundException e){
e.printStackTrace();
}finally{
try {
if(stmt != null){
stmt.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(conn != null){
conn.close();
}
}catch (SQLException e){
e.printStackTrace();
}
}
}
}
3. 查:
package zju.edu.test;
import java.sql.*;
import java.util.ResourceBundle;
/**
* @Autor:godfu
* @Date:2022/2/28-21:55
*/
public class JDBCDemo {
public static void main(String[] args) {
ResourceBundle rc = ResourceBundle.getBundle("zju.edu.Resource.jdbc");
String driver = rc.getString(driver);
String url = rc.getString(url);
String user = rc.getString(user);
String password = rc.getString(password);
Connection conn = null;
Statement stmt = null;
ResultSet rs = null;
try {
//1.注册驱动
Class.forName(driver);
//2.获取连接
conn = DriverManager.getConnection(url, user, password);
//3.获取数据库连接对象
stmt = conn.createStatement();
//4.执行SQL语句
String sql = "select empno,ename, sal from emp";
rs = stmt.executeQuery(sql);
//5.处理查询结果集
//getString()方法的特点是无论数据库中的类型是什么,最终都以String的形式取出,getDouble()或者getInt()
//next方法判断下一行是否有数据
while(rs.next()) {
String empno = rs.getString("empno");//列名
String ename = rs.getString("ename");
String sal = rs.getString("sal");
System.out.println(empno + "," + ename + "," + sal);
}
}catch (SQLException e){
e.printStackTrace();
}catch (ClassNotFoundException e){
e.printStackTrace();
}finally{
try {
if(rs != null){
rs.close();
}
}catch (Exception e){
e.printStackTrace();
}
try {
if(stmt != null){
stmt.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(conn != null){
conn.close();
}
}catch (SQLException e){
e.printStackTrace();
}
}
}
}
4. IDEA配置驱动:
对Module右键 ---->open module settings -----> libraries----->导入驱动jar包
5. 模拟用户登录:
1.需求:模拟用户登录功能的实现
2.业务描述:程序运行时,提供一个输入的入口,可以让用户输入用户名和密码
用户输入用户名和密码之后,提交信息,让java程序收集到用户信息,
java程序连接数据库验证用户名和密码是否合法
合法:显示登录成功
不合法:显示登录失败
3.数据的准备:实现使用powerDesigner建表,导出sql脚本
package zju.login;
import java.sql.*;
import java.util.HashMap;
import java.util.Map;
import java.util.ResourceBundle;
import java.util.Scanner;
/**
* @Autor:godfu
* @Date:2022/3/1-10:40
*/
public class login_demo {
public static void main(String[] args) {
//初始化用户界面
Map<String, String> userInfo = initUI();
//验证用户名和密码
boolean login = login(userInfo);
System.out.println(login ? "登录成功":"登录失败");
}
/**
* 初始化界面
* @return 用户名和密码
*/
private static Map<String,String> initUI() {
Scanner sc = new Scanner(System.in);//键入数据
System.out.print("用户名:");
String userName = sc.nextLine();
System.out.print("密码:");
String userPwd = sc.nextLine();
Map<String, String> userInfo = new HashMap<>();
userInfo.put("userName", userName);
userInfo.put("userPwd", userPwd);
return userInfo;
}
/**
* 用户登录
* @param userInfo: 用户的登录信息
* @return 登录成功或失败
*/
private static boolean login(Map<String,String> userInfo) {
//获取用户数据名与密码
String userName = userInfo.get("userName");
String userPwd = userInfo.get("userPwd");
//JDBC连接数据库
Connection conn = null;
Statement stmt = null;
ResultSet rs = null;
//读取资源文件
ResourceBundle rc = ResourceBundle.getBundle("zju.resource.jdbc");
String driver = rc.getString("driver");
String url = rc.getString("url");
String user = rc.getString("user");
String password = rc.getString("password");
boolean login = false;
try {
//1.注册驱动
Class.forName(driver);
//2.获取数据库连接对象
conn = DriverManager.getConnection(url, user, password);
//3.获取数据库处理对象
stmt = conn.createStatement();
//4.执行sql语句
String sql = "select * from t_user where loginName = '"+userName+"' and loginPwd = '"+userPwd+"'";
rs = stmt.executeQuery(sql);
//查询到存在
if(rs.next()){
login = true;
}
}catch(Exception e){
e.printStackTrace();
}finally {
try {
if(rs != null){
rs.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(stmt != null){
stmt.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(conn != null){
conn.close();
}
}catch (SQLException e) {
e.printStackTrace();
}
}
return login;
}
}
6. SQL注入
当前程序存在的问题:
用户名:fkd
密码:fkd’ or ‘1’ = '1
=> select * from t_user where loginName = 'fkd' and loginPwd = 'fkd' or '1' = '1';
导致SQL注入的根本原因 ?
用户输入的信息中含有sql语句的关键字,并且这些关键字参与了sql语句的编译过程,导致原sql语句的含义被扭曲了,进而达到sql注入。
解决SQL注入:
只要用户提供的信息不参与SQL的编译过程,问题就解决了。即使用户提供的信息中含有SQL语句的关键字,但是没有参与编译,不起作用。
- 使用预编译数据库操作对象:java.sql.PreparedStatement,继承了java.sql.Statement
- PreparedStatement原理:预先对SQL框架进行编译,然后传值
package zju.login;
import java.sql.*;
import java.util.HashMap;
import java.util.Map;
import java.util.ResourceBundle;
import java.util.Scanner;
/**
* @Autor:godfu
* @Date:2022/3/1-10:40
*/
public class login_demo {
public static void main(String[] args) {
//初始化用户界面
Map<String, String> userInfo = initUI();
//验证用户名和密码
boolean login = login(userInfo);
System.out.println(login ? "登录成功":"登录失败");
}
/**
* 初始化界面
* @return 用户名和密码
*/
private static Map<String,String> initUI() {
Scanner sc = new Scanner(System.in);//键入数据
System.out.print("用户名:");
String userName = sc.nextLine();
System.out.print("密码:");
String userPwd = sc.nextLine();
Map<String, String> userInfo = new HashMap<>();
userInfo.put("userName", userName);
userInfo.put("userPwd", userPwd);
return userInfo;
}
/**
* 用户登录
* @param userInfo: 用户的登录信息
* @return 登录成功或失败
*/
private static boolean login(Map<String,String> userInfo) {
//获取用户数据名与密码
String userName = userInfo.get("userName");
String userPwd = userInfo.get("userPwd");
//JDBC连接数据库
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
//读取资源文件
ResourceBundle rc = ResourceBundle.getBundle("zju.resource.jdbc");
String driver = rc.getString("driver");
String url = rc.getString("url");
String user = rc.getString("user");
String password = rc.getString("password");
boolean login = false;
try {
//1.注册驱动
Class.forName(driver);
//2.获取数据库连接对象
conn = DriverManager.getConnection(url, user, password);
//3.获取预编译数据库处理对象
//SQL语句框架,一个?代表一个占位符,将来接受值
String sql = "select * from t_user where loginName = ? and loginPwd = ?";
//程序执行到此处,会发送sql语句框架给DBMS,然后DBMS进行sql语句的预编译
ps = conn.prepareStatement(sql);
//给占位符?传值(第一个问好下标是1,第二个是2,JDBC所有下标从1开始)
ps.setString(1,userName);//有setInt() setDate()方法
ps.setString(2, userPwd);
//4.执行sql语句
rs = ps.executeQuery();
//查询到存在
if(rs.next()){
login = true;
}
}catch(Exception e){
e.printStackTrace();
}finally {
try {
if(rs != null){
rs.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(ps != null){
ps.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(conn != null){
conn.close();
}
}catch (SQLException e) {
e.printStackTrace();
}
}
return login;
}
}
对比Statement和PreparedStatement
-
PreparedStatement解决了SQL注入问题
-
Statement是编译一次,PreparedStatement是编译一次,可执行N次,PreparedStatement效率较高
-
PreparedStatement会在编译阶段做类型的安全检查
-
业务要求必须SQL注入(sql拼接)时使用Statement
String sql = "select ename from emp order by ename" + keywords;
keywords = “asc";
7. PreparedStatement完成增删改:
涉及具体值都用?占位符来代替
8. JDBC事务机制(增删改):
-
JDBC中的事务是自动提交的,只要执行任意一条DML语句,则自动提交一次
-
但在实际的业务中,通常是多条DML语句联合完成的,必须保证他们同时成功或失败
-
解决方案:将自动提交机制关闭:
conn.setAutoCommit(false);//关闭事务自动提交机制
conn.commit();//提交事务
conn.rollback();//回滚事务
增删改模板:
public class JDBCTest {
public static void main(String[] args) {
//用preparedstatement预编译的方式实现JDBC增删改
Connection conn = null;
PreparedStatement ps = null;
try {
//1.注册驱动
Class.forName("com.mysql.cj.jdbc.Driver");
//2.建立连接
conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/fkddatabase", "root", "123456");
//将自动提交机制改为手动提交
conn.setAutoCommit(false);
//3.获取预编译数据库操作对象
String sql = "delete from dept where deptno = ?";
ps = conn.prepareStatement(sql);
//4.执行sql
ps.setString(1, "50");
int count = ps.executeUpdate();
System.out.println(count);
//提交事务
conn.commit();
}catch (Exception e){
//在执行完毕前遇到异常,回滚事务
if(conn != null){
try {
conn.rollback();
} catch (SQLException ex) {
ex.printStackTrace();
}
}
e.printStackTrace();
}finally {
//5.关闭资源
try {
if(ps != null){
ps.close();
}
}catch (Exception e){
e.printStackTrace();
}
try {
if(conn != null){
conn.close();
}
}catch (Exception e){
e.printStackTrace();
}
}
}
}
9. 包装工具类以及模糊查询:
package zju.edu;
import java.sql.*;
/**
* @Autor:godfu
* JDBC工具类,简化JDBC编程
* @Date:2022/3/1-19:30
*/
public class DBUtil {
/**
* 工具类中的构造方法都是私有的
* 工具类中的方法都是静态的,可以直接通过类名调用
*/
private DBUtil(){
}
//静态代码块在类被加载时执行,并且只执行一次
static{
try {
Class.forName("com.mysql.cj.jdbc.Driver");
} catch (ClassNotFoundException e) {
e.printStackTrace();
}
}
/**
* 获取数据库连接对象
* @return
*/
public static Connection getConnection() throws SQLException {
return DriverManager.getConnection("jdbc:mysql://localhost:3306/fkddatabase","root","123456");
}
/**
* 关闭资源
* @param conn 连接对象
* @param stmt 数据库连接对象
* @param rs 查询结果集对象
*/
public static void close(Connection conn, Statement stmt, ResultSet rs){
try {
if(conn != null){
conn.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(stmt != null){
stmt.close();
}
}catch (SQLException e){
e.printStackTrace();
}
try {
if(rs != null){
rs.close();
}
}catch (SQLException e){
e.printStackTrace();
}
}
}
package zju.edu;
import java.sql.Connection;
import java.sql.PreparedStatement;
import java.sql.ResultSet;
/**
* @Autor:godfu
* @Date:2022/2/28-23:35
*/
public class JDBCTest {
public static void main(String[] args) {
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
//获取连接
conn = DBUtil.getConnection();
//获取数据库预编译对象
String sql = "select ename from emp where ename like ?";
ps = conn.prepareStatement(sql);
ps.setString(1,"_A%");
//执行SQL
rs = ps.executeQuery();
while(rs.next()){
System.out.println(rs.getString("ename"));
}
} catch (Exception e) {
e.printStackTrace();
}finally {
DBUtil.close(conn, ps, rs);
}
}
}
10. 悲观乐观锁
悲观锁:
- 在当前事务没有结束的时候,所有job = 'MANAGER’的行记录都被锁住了,其他线程无法修改
- 事务必须排队进行,数据锁着了,不允许并发
select ename, job, sal from emp where job = 'MANAGER' for update;//在select后加入for update
乐观锁:
-
支持并发,事务也不需要排队,只不过需要一个版本号
-
事务1先修改,修改之后看了版本号为1.1,于是提交修改的数据,将版本号修改为1.2
事务2后修改,修改之后准备提交的时候,发现版本号为1.2,和它最初读的版本号不一致。回滚。
JDBC模板
//1.获取连接
//用指定系统类加载器读取配置文件,生成输入流
InputStream is = ConnectionTest.class.getClassLoader.getResourceAsStream("jdbc.properties");
//定义资源类读取输入流
Properties pros = new Properties();
pros.load(is);
String user = pros.getProperty("user");
String password = pros.getProperty("password");
String url = pros.getProperty("url");
String driverclass = pros.getProperty("driverclass");
//2.加载驱动
class.forName(driverclass);
//3.获取连接
Connection conn = DriverManager.getConnection(url, user, password);
//通用的增、删、改操作(体现一:增、删、改 ; 体现二:针对于不同的表)
public void update(String sql,Object ... args){
Connection conn = null;
PreparedStatement ps = null;
try {
//1.获取数据库的连接
conn = JDBCUtils.getConnection();
//2.获取PreparedStatement的实例 (或:预编译sql语句)
ps = conn.prepareStatement(sql);
//3.填充占位符
for(int i = 0;i < args.length;i++){
ps.setObject(i + 1, args[i]);
}
//4.执行sql语句
ps.execute();
} catch (Exception e) {
e.printStackTrace();
}finally{
//5.关闭资源
JDBCUtils.closeResource(conn, ps);
}
}
// 通用的针对于不同表的查询:返回一个对象 (version 1.0)
public <T> T getInstance(Class<T> clazz, String sql, Object... args) {
Connection conn = null;
PreparedStatement ps = null;
ResultSet rs = null;
try {
// 1.获取数据库连接
conn = JDBCUtils.getConnection();
// 2.预编译sql语句,得到PreparedStatement对象
ps = conn.prepareStatement(sql);
// 3.填充占位符
for (int i = 0; i < args.length; i++) {
ps.setObject(i + 1, args[i]);
}
// 4.执行executeQuery(),得到结果集:ResultSet
rs = ps.executeQuery();
// 5.得到结果集的元数据:ResultSetMetaData
ResultSetMetaData rsmd = rs.getMetaData();
// 6.1通过ResultSetMetaData得到columnCount,columnLabel;通过ResultSet得到列值
int columnCount = rsmd.getColumnCount();
if (rs.next()) {
//反射实例化对象
T t = clazz.newInstance();
for (int i = 0; i < columnCount; i++) {// 遍历每一个列
// 获取列值
Object columnVal = rs.getObject(i + 1);
// 获取列的别名:列的别名,使用类的属性名充当
String columnLabel = rsmd.getColumnLabel(i + 1);
// 6.2使用反射,给对象的相应属性赋值
Field field = clazz.getDeclaredField(columnLabel);
//接触private封装
field.setAccessible(true);
//给对象赋值
field.set(t, columnVal);
}
return t;
}
} catch (Exception e) {
e.printStackTrace();
} finally {
// 7.关闭资源
JDBCUtils.closeResource(conn, ps, rs);
}
return null;
}
数据库连接池
1. JDBC数据库连接池的必要性
-
在使用开发基于数据库的web程序时,传统的模式基本是按以下步骤:
- 在主程序(如servlet、beans)中建立数据库连接
- 进行sql操作
- 断开数据库连接
-
这种模式开发,存在的问题:
- 普通的JDBC数据库连接使用 DriverManager 来获取,每次向数据库建立连接的时候都要将 Connection 加载到内存中,再验证用户名和密码(得花费0.05s~1s的时间)。需要数据库连接的时候,就向数据库要求一个,执行完成后再断开连接。这样的方式将会消耗大量的资源和时间。**数据库的连接资源并没有得到很好的重复利用。**若同时有几百人甚至几千人在线,频繁的进行数据库连接操作将占用很多的系统资源,严重的甚至会造成服务器的崩溃。
- **对于每一次数据库连接,使用完后都得断开。**否则,如果程序出现异常而未能关闭,将会导致数据库系统中的内存泄漏,最终将导致重启数据库。(回忆:何为Java的内存泄漏?)
- 这种开发不能控制被创建的连接对象数,系统资源会被毫无顾及的分配出去,如连接过多,也可能导致内存泄漏,服务器崩溃。
2 数据库连接池技术
-
为解决传统开发中的数据库连接问题,可以采用数据库连接池技术。
-
数据库连接池的基本思想:就是为数据库连接建立一个“缓冲池”。预先在缓冲池中放入一定数量的连接,当需要建立数据库连接时,只需从“缓冲池”中取出一个,使用完毕之后再放回去。
-
数据库连接池负责分配、管理和释放数据库连接,它允许应用程序重复使用一个现有的数据库连接,而不是重新建立一个。
-
数据库连接池在初始化时将创建一定数量的数据库连接放到连接池中,这些数据库连接的数量是由最小数据库连接数来设定的。无论这些数据库连接是否被使用,连接池都将一直保证至少拥有这么多的连接数量。连接池的最大数据库连接数量限定了这个连接池能占有的最大连接数,当应用程序向连接池请求的连接数超过最大连接数量时,这些请求将被加入到等待队列中。
- 工作原理:
-
数据库连接池技术的优点
1. 资源重用
由于数据库连接得以重用,避免了频繁创建,释放连接引起的大量性能开销。在减少系统消耗的基础上,另一方面也增加了系统运行环境的平稳性。
2. 更快的系统反应速度
数据库连接池在初始化过程中,往往已经创建了若干数据库连接置于连接池中备用。此时连接的初始化工作均已完成。对于业务请求处理而言,直接利用现有可用连接,避免了数据库连接初始化和释放过程的时间开销,从而减少了系统的响应时间
3. 新的资源分配手段
对于多应用共享同一数据库的系统而言,可在应用层通过数据库连接池的配置,实现某一应用最大可用数据库连接数的限制,避免某一应用独占所有的数据库资源
4. 统一的连接管理,避免数据库连接泄漏
在较为完善的数据库连接池实现中,可根据预先的占用超时设定,强制回收被占用连接,从而避免了常规数据库连接操作中可能出现的资源泄露
3 多种开源的数据库连接池
- JDBC 的数据库连接池使用 javax.sql.DataSource 来表示,DataSource 只是一个接口,该接口通常由服务器(Weblogic, WebSphere, Tomcat)提供实现,也有一些开源组织提供实现:
- DBCP 是Apache提供的数据库连接池。tomcat 服务器自带dbcp数据库连接池。速度相对c3p0较快,但因自身存在BUG,Hibernate3已不再提供支持。
- C3P0 是一个开源组织提供的一个数据库连接池,**速度相对较慢,稳定性还可以。**hibernate官方推荐使用
- Proxool 是sourceforge下的一个开源项目数据库连接池,有监控连接池状态的功能,稳定性较c3p0差一点
- BoneCP 是一个开源组织提供的数据库连接池,速度快
- Druid 是阿里提供的数据库连接池,据说是集DBCP 、C3P0 、Proxool 优点于一身的数据库连接池,但是速度不确定是否有BoneCP快
- DataSource 通常被称为数据源,它包含连接池和连接池管理两个部分,习惯上也经常把 DataSource 称为连接池
- DataSource用来取代DriverManager来获取Connection,获取速度快,同时可以大幅度提高数据库访问速度。
- 特别注意:
- 数据源和数据库连接不同,数据源无需创建多个,它是产生数据库连接的工厂,因此整个应用只需要一个数据源即可。
- 当数据库访问结束后,程序还是像以前一样关闭数据库连接:conn.close(); 但conn.close()并没有关闭数据库的物理连接,它仅仅把数据库连接释放,归还给了数据库连接池。
2.1 C3P0数据库连接池
- 获取连接方式一
//使用C3P0数据库连接池的方式,获取数据库的连接:不推荐
public static Connection getConnection1() throws Exception{
ComboPooledDataSource cpds = new ComboPooledDataSource();
cpds.setDriverClass("com.mysql.jdbc.Driver");
cpds.setJdbcUrl("jdbc:mysql://localhost:3306/test");
cpds.setUser("root");
cpds.setPassword("abc123");
// cpds.setMaxPoolSize(100);
Connection conn = cpds.getConnection();
return conn;
}
- 获取连接方式二
//使用C3P0数据库连接池的配置文件方式,获取数据库的连接:推荐
private static DataSource cpds = new ComboPooledDataSource("helloc3p0");
public static Connection getConnection2() throws SQLException{
Connection conn = cpds.getConnection();
return conn;
}
其中,src下的配置文件为:【c3p0-config.xml】
<?xml version="1.0" encoding="UTF-8"?>
<c3p0-config>
<named-config name="helloc3p0">
<!-- 获取连接的4个基本信息 -->
<property name="user">root</property>
<property name="password">abc123</property>
<property name="jdbcUrl">jdbc:mysql:///test</property>
<property name="driverClass">com.mysql.jdbc.Driver</property>
<!-- 涉及到数据库连接池的管理的相关属性的设置 -->
<!-- 若数据库中连接数不足时, 一次向数据库服务器申请多少个连接 -->
<property name="acquireIncrement">5</property>
<!-- 初始化数据库连接池时连接的数量 -->
<property name="initialPoolSize">5</property>
<!-- 数据库连接池中的最小的数据库连接数 -->
<property name="minPoolSize">5</property>
<!-- 数据库连接池中的最大的数据库连接数 -->
<property name="maxPoolSize">10</property>
<!-- C3P0 数据库连接池可以维护的 Statement 的个数 -->
<property name="maxStatements">20</property>
<!-- 每个连接同时可以使用的 Statement 对象的个数 -->
<property name="maxStatementsPerConnection">5</property>
</named-config>
</c3p0-config>
2.2 DBCP数据库连接池
- DBCP 是 Apache 软件基金组织下的开源连接池实现,该连接池依赖该组织下的另一个开源系统:Common-pool。如需使用该连接池实现,应在系统中增加如下两个 jar 文件:
- Commons-dbcp.jar:连接池的实现
- Commons-pool.jar:连接池实现的依赖库
- **Tomcat 的连接池正是采用该连接池来实现的。**该数据库连接池既可以与应用服务器整合使用,也可由应用程序独立使用。
- 数据源和数据库连接不同,数据源无需创建多个,它是产生数据库连接的工厂,因此整个应用只需要一个数据源即可。
- 当数据库访问结束后,程序还是像以前一样关闭数据库连接:conn.close(); 但上面的代码并没有关闭数据库的物理连接,它仅仅把数据库连接释放,归还给了数据库连接池。
- 配置属性说明
属性 | 默认值 | 说明 |
---|---|---|
initialSize | 0 | 连接池启动时创建的初始化连接数量 |
maxActive | 8 | 连接池中可同时连接的最大的连接数 |
maxIdle | 8 | 连接池中最大的空闲的连接数,超过的空闲连接将被释放,如果设置为负数表示不限制 |
minIdle | 0 | 连接池中最小的空闲的连接数,低于这个数量会被创建新的连接。该参数越接近maxIdle,性能越好,因为连接的创建和销毁,都是需要消耗资源的;但是不能太大。 |
maxWait | 无限制 | 最大等待时间,当没有可用连接时,连接池等待连接释放的最大时间,超过该时间限制会抛出异常,如果设置-1表示无限等待 |
poolPreparedStatements | false | 开启池的Statement是否prepared |
maxOpenPreparedStatements | 无限制 | 开启池的prepared 后的同时最大连接数 |
minEvictableIdleTimeMillis | 连接池中连接,在时间段内一直空闲, 被逐出连接池的时间 | |
removeAbandonedTimeout | 300 | 超过时间限制,回收没有用(废弃)的连接 |
removeAbandoned | false | 超过removeAbandonedTimeout时间后,是否进 行没用连接(废弃)的回收 |
- 获取连接方式一:
public static Connection getConnection3() throws Exception {
BasicDataSource source = new BasicDataSource();
source.setDriverClassName("com.mysql.jdbc.Driver");
source.setUrl("jdbc:mysql:///test");
source.setUsername("root");
source.setPassword("abc123");
//
source.setInitialSize(10);
Connection conn = source.getConnection();
return conn;
}
- 获取连接方式二:
//使用dbcp数据库连接池的配置文件方式,获取数据库的连接:推荐
private static DataSource source = null;
static{
try {
Properties pros = new Properties();
InputStream is = DBCPTest.class.getClassLoader().getResourceAsStream("dbcp.properties");
pros.load(is);
//根据提供的BasicDataSourceFactory创建对应的DataSource对象
source = BasicDataSourceFactory.createDataSource(pros);
} catch (Exception e) {
e.printStackTrace();
}
}
public static Connection getConnection4() throws Exception {
Connection conn = source.getConnection();
return conn;
}
其中,src下的配置文件为:【dbcp.properties】
driverClassName=com.mysql.jdbc.Driver
url=jdbc:mysql://localhost:3306/test?rewriteBatchedStatements=true&useServerPrepStmts=false
username=root
password=abc123
initialSize=10
#...
2.3 Druid(德鲁伊)数据库连接池
Druid是阿里巴巴开源平台上一个数据库连接池实现,它结合了C3P0、DBCP、Proxool等DB池的优点,同时加入了日志监控,可以很好的监控DB池连接和SQL的执行情况,可以说是针对监控而生的DB连接池,可以说是目前最好的连接池之一。
package com.atguigu.druid;
import java.sql.Connection;
import java.util.Properties;
import javax.sql.DataSource;
import com.alibaba.druid.pool.DruidDataSourceFactory;
public class TestDruid {
public static void main(String[] args) throws Exception {
Properties pro = new Properties(); pro.load(TestDruid.class.getClassLoader().getResourceAsStream("druid.properties"));
DataSource ds = DruidDataSourceFactory.createDataSource(pro);
Connection conn = ds.getConnection();
System.out.println(conn);
}
}
其中,src下的配置文件为:【druid.properties】
url=jdbc:mysql://localhost:3306/test?rewriteBatchedStatements=true
username=root
password=123456
driverClassName=com.mysql.jdbc.Driver
initialSize=10
maxActive=20
maxWait=1000
filters=wall
- 详细配置参数:
配置 | 缺省 | 说明 |
---|---|---|
name | 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。 如果没有配置,将会生成一个名字,格式是:”DataSource-” + System.identityHashCode(this) | |
url | 连接数据库的url,不同数据库不一样。例如:mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto | |
username | 连接数据库的用户名 | |
password | 连接数据库的密码。如果你不希望密码直接写在配置文件中,可以使用ConfigFilter。详细看这里:https://github.com/alibaba/druid/wiki/使用ConfigFilter | |
driverClassName | 根据url自动识别 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName(建议配置下) | |
initialSize | 0 | 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时 |
maxActive | 8 | 最大连接池数量 |
maxIdle | 8 | 已经不再使用,配置了也没效果 |
minIdle | 最小连接池数量 | |
maxWait | 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。 | |
poolPreparedStatements | false | 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。 |
maxOpenPreparedStatements | -1 | 要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100 |
validationQuery | 用来检测连接是否有效的sql,要求是一个查询语句。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会其作用。 | |
testOnBorrow | true | 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 |
testOnReturn | false | 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能 |
testWhileIdle | false | 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。 |
timeBetweenEvictionRunsMillis | 有两个含义: 1)Destroy线程会检测连接的间隔时间2)testWhileIdle的判断依据,详细看testWhileIdle属性的说明 | |
numTestsPerEvictionRun | 不再使用,一个DruidDataSource只支持一个EvictionRun | |
minEvictableIdleTimeMillis | ||
connectionInitSqls | 物理连接初始化的时候执行的sql | |
exceptionSorter | 根据dbType自动识别 当数据库抛出一些不可恢复的异常时,抛弃连接 | |
filters | 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat日志用的filter:log4j防御sql注入的filter:wall | |
proxyFilters | 类型是List,如果同时配置了filters和proxyFilters,是组合关系,并非替换关系 |
Apache-DBUtils实现CRUD操作
1 Apache-DBUtils简介
-
commons-dbutils 是 Apache 组织提供的一个开源 JDBC工具类库,它是对JDBC的简单封装,学习成本极低,并且使用dbutils能极大简化jdbc编码的工作量,同时也不会影响程序的性能。
-
API介绍:
- org.apache.commons.dbutils.QueryRunner
- org.apache.commons.dbutils.ResultSetHandler
- 工具类:org.apache.commons.dbutils.DbUtils
-
API包说明:
2 主要API的使用
2.2 DbUtils
- DbUtils :提供如关闭连接、装载JDBC驱动程序等常规工作的工具类,里面的所有方法都是静态的。主要方法如下:
- public static void close(…) throws java.sql.SQLException: DbUtils类提供了三个重载的关闭方法。这些方法检查所提供的参数是不是NULL,如果不是的话,它们就关闭Connection、Statement和ResultSet。
- public static void closeQuietly(…): 这一类方法不仅能在Connection、Statement和ResultSet为NULL情况下避免关闭,还能隐藏一些在程序中抛出的SQLEeception。
- public static void commitAndClose(Connection conn)throws SQLException: 用来提交连接的事务,然后关闭连接
- public static void commitAndCloseQuietly(Connection conn): 用来提交连接,然后关闭连接,并且在关闭连接时不抛出SQL异常。
- public static void rollback(Connection conn)throws SQLException:允许conn为null,因为方法内部做了判断
- public static void rollbackAndClose(Connection conn)throws SQLException
- rollbackAndCloseQuietly(Connection)
- public static boolean loadDriver(java.lang.String driverClassName):这一方装载并注册JDBC驱动程序,如果成功就返回true。使用该方法,你不需要捕捉这个异常ClassNotFoundException。
2.3 QueryRunner类
-
该类简单化了SQL查询,它与ResultSetHandler组合在一起使用可以完成大部分的数据库操作,能够大大减少编码量。
-
QueryRunner类提供了两个构造器:
- 默认的构造器
- 需要一个 javax.sql.DataSource 来作参数的构造器
-
QueryRunner类的主要方法:
- 更新
- public int update(Connection conn, String sql, Object… params) throws SQLException:用来执行一个更新(插入、更新或删除)操作。
- …
- 插入
- public T insert(Connection conn,String sql,ResultSetHandler rsh, Object… params) throws SQLException:只支持INSERT语句,其中 rsh - The handler used to create the result object from the ResultSet of auto-generated keys. 返回值: An object generated by the handler.即自动生成的键值
- …
- 批处理
- public int[] batch(Connection conn,String sql,Object[][] params)throws SQLException: INSERT, UPDATE, or DELETE语句
- public T insertBatch(Connection conn,String sql,ResultSetHandler rsh,Object[][] params)throws SQLException:只支持INSERT语句
- …
- 查询
- public Object query(Connection conn, String sql, ResultSetHandler rsh,Object… params) throws SQLException:执行一个查询操作,在这个查询中,对象数组中的每个元素值被用来作为查询语句的置换参数。该方法会自行处理 PreparedStatement 和 ResultSet 的创建和关闭。
- …
- 更新
-
测试
// 测试添加
@Test
public void testInsert() throws Exception {
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
String sql = "insert into customers(name,email,birth)values(?,?,?)";
int count = runner.update(conn, sql, "何成飞", "he@qq.com", "1992-09-08");
System.out.println("添加了" + count + "条记录");
JDBCUtils.closeResource(conn, null);
}
// 测试删除
@Test
public void testDelete() throws Exception {
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
String sql = "delete from customers where id < ?";
int count = runner.update(conn, sql,3);
System.out.println("删除了" + count + "条记录");
JDBCUtils.closeResource(conn, null);
}
2.4 ResultSetHandler接口及实现类
-
该接口用于处理 java.sql.ResultSet,将数据按要求转换为另一种形式。
-
ResultSetHandler 接口提供了一个单独的方法:Object handle (java.sql.ResultSet .rs)。
-
接口的主要实现类:
-
ArrayHandler:把结果集中的第一行数据转成对象数组。
-
ArrayListHandler:把结果集中的每一行数据都转成一个数组,再存放到List中。
-
**BeanHandler:**将结果集中的第一行数据封装到一个对应的JavaBean实例中。
-
**BeanListHandler:**将结果集中的每一行数据都封装到一个对应的JavaBean实例中,存放到List里。
-
ColumnListHandler:将结果集中某一列的数据存放到List中。
-
KeyedHandler(name):将结果集中的每一行数据都封装到一个Map里,再把这些map再存到一个map里,其key为指定的key。
-
**MapHandler:**将结果集中的第一行数据封装到一个Map里,key是列名,value就是对应的值。
-
**MapListHandler:**将结果集中的每一行数据都封装到一个Map里,然后再存放到List
-
**ScalarHandler:**查询单个值对象
-
-
测试
/*
* 测试查询:查询一条记录
*
* 使用ResultSetHandler的实现类:BeanHandler
*/
@Test
public void testQueryInstance() throws Exception{
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
String sql = "select id,name,email,birth from customers where id = ?";
//
BeanHandler<Customer> handler = new BeanHandler<>(Customer.class);
Customer customer = runner.query(conn, sql, handler, 23);
System.out.println(customer);
JDBCUtils.closeResource(conn, null);
}
/*
* 测试查询:查询多条记录构成的集合
*
* 使用ResultSetHandler的实现类:BeanListHandler
*/
@Test
public void testQueryList() throws Exception{
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
String sql = "select id,name,email,birth from customers where id < ?";
//
BeanListHandler<Customer> handler = new BeanListHandler<>(Customer.class);
List<Customer> list = runner.query(conn, sql, handler, 23);
list.forEach(System.out::println);
JDBCUtils.closeResource(conn, null);
}
/*
* 自定义ResultSetHandler的实现类
*/
@Test
public void testQueryInstance1() throws Exception{
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
String sql = "select id,name,email,birth from customers where id = ?";
ResultSetHandler<Customer> handler = new ResultSetHandler<Customer>() {
@Override
public Customer handle(ResultSet rs) throws SQLException {
System.out.println("handle");
// return new Customer(1,"Tom","tom@126.com",new Date(123323432L));
if(rs.next()){
int id = rs.getInt("id");
String name = rs.getString("name");
String email = rs.getString("email");
Date birth = rs.getDate("birth");
return new Customer(id, name, email, birth);
}
return null;
}
};
Customer customer = runner.query(conn, sql, handler, 23);
System.out.println(customer);
JDBCUtils.closeResource(conn, null);
}
/*
* 如何查询类似于最大的,最小的,平均的,总和,个数相关的数据,
* 使用ScalarHandler
*
*/
@Test
public void testQueryValue() throws Exception{
QueryRunner runner = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
//测试一:
// String sql = "select count(*) from customers where id < ?";
// ScalarHandler handler = new ScalarHandler();
// long count = (long) runner.query(conn, sql, handler, 20);
// System.out.println(count);
//测试二:
String sql = "select max(birth) from customers";
ScalarHandler handler = new ScalarHandler();
Date birth = (Date) runner.query(conn, sql, handler);
System.out.println(birth);
JDBCUtils.closeResource(conn, null);
}
JDBC总结
总结
@Test
public void testUpdateWithTx() {
Connection conn = null;
try {
//1.获取连接的操作(
//① 手写的连接:JDBCUtils.getConnection();
//② 使用数据库连接池:C3P0;DBCP;Druid
//2.对数据表进行一系列CRUD操作
//① 使用PreparedStatement实现通用的增删改、查询操作(version 1.0 \ version 2.0)
//version2.0的增删改public void update(Connection conn,String sql,Object ... args){}
//version2.0的查询 public <T> T getInstance(Connection conn,Class<T> clazz,String sql,Object ... args){}
//② 使用dbutils提供的jar包中提供的QueryRunner类
//提交数据
conn.commit();
} catch (Exception e) {
e.printStackTrace();
try {
//回滚数据
conn.rollback();
} catch (SQLException e1) {
e1.printStackTrace();
}
}finally{
//3.关闭连接等操作
//① JDBCUtils.closeResource();
//② 使用dbutils提供的jar包中提供的DbUtils类提供了关闭的相关操作
}
}
r = new QueryRunner();
Connection conn = JDBCUtils.getConnection3();
//测试一:
// String sql = “select count(*) from customers where id < ?”;
// ScalarHandler handler = new ScalarHandler();
// long count = (long) runner.query(conn, sql, handler, 20);
// System.out.println(count);
//测试二:
String sql = "select max(birth) from customers";
ScalarHandler handler = new ScalarHandler();
Date birth = (Date) runner.query(conn, sql, handler);
System.out.println(birth);
JDBCUtils.closeResource(conn, null);
}
## JDBC总结
```java
总结
@Test
public void testUpdateWithTx() {
Connection conn = null;
try {
//1.获取连接的操作(
//① 手写的连接:JDBCUtils.getConnection();
//② 使用数据库连接池:C3P0;DBCP;Druid
//2.对数据表进行一系列CRUD操作
//① 使用PreparedStatement实现通用的增删改、查询操作(version 1.0 \ version 2.0)
//version2.0的增删改public void update(Connection conn,String sql,Object ... args){}
//version2.0的查询 public <T> T getInstance(Connection conn,Class<T> clazz,String sql,Object ... args){}
//② 使用dbutils提供的jar包中提供的QueryRunner类
//提交数据
conn.commit();
} catch (Exception e) {
e.printStackTrace();
try {
//回滚数据
conn.rollback();
} catch (SQLException e1) {
e1.printStackTrace();
}
}finally{
//3.关闭连接等操作
//① JDBCUtils.closeResource();
//② 使用dbutils提供的jar包中提供的DbUtils类提供了关闭的相关操作
}
}