11级_Java_曹建波 9.10 JDB处理大数据&大文本&二进制数据&批处理&事务

JDB处理大数据

在实际开发中，程序需要把大文本或二进制数据保存到数据库。

基本概念：大数据也称之为LOB(LargeObjects)，LOB又分为：clob和blob

clob用于存储大文本。Text

blob用于存储二进制数据，例如图像、声音、二进制文等。

对MySQL而言只有blob，而没有clob，mysql存储大文本采用的是Text，Text和blob分别又分为：

TINYTEXT、TEXT、MEDIUMTEXT和LONGTEXT

TINYBLOB、BLOB、MEDIUMBLOB和LONGBLOB

JDB处理大文本

对于MySQL中的Text类型，可调用如下方法设置：

PreparedStatement.setCharacterStream(index,reader, length);

//注意length长度须设置，并且设置为int型

对MySQL中的Text类型，可调用如下方法获取：

reader = resultSet. getCharacterStream(i);

reader =resultSet.getClob(i).getCharacterStream();

string s = resultSet.getString(i);

JDBC处理二进制数据

对于MySQL中的BLOB类型，可调用如下方法设置：

PreparedStatement. setBinaryStream(i,inputStream, length);

对MySQL中的BLOB类型，可调用如下方法获取：

InputStream in = resultSet.getBinaryStream(i);

InputStream in = resultSet.getBlob(i).getBinaryStream();

批处理

实现批处理有两种方式，第一种方式：

Statement.addBatch(sql) list

执行批处理SQL语句

executeBatch()方法：执行批处理命令

clearBatch()方法：清除批处理命令

Connection conn = null;

Statement st = null;

ResultSet rs = null;

try {

conn = JdbcUtil.getConnection();

String sql1 = "insert into user(name,password,email,birthday)

values('kkk','123','abc@sina.com','1978-08-08')";

String sql2 = "update user setpassword='123456' where id=3";

st = conn.createStatement();

st.addBatch(sql1); //把SQL语句加入到批命令中

st.addBatch(sql2); //把SQL语句加入到批命令中

st.executeBatch();

} finally{

JdbcUtil.free(conn,st, rs);

}

采用Statement.addBatch(sql)方式实现批处理：

优点：可以向数据库发送多条不同的ＳＱＬ语句。

缺点：

SQL语句没有预编译。

当向数据库发送多条语句相同，但仅参数不同的SQL语句时，需重复写上很多条SQL语句。例如：

Insertinto user(name,password) values(‘aa’,’111’);

Insertinto user(name,password) values(‘bb’,’222’);

Insertinto user(name,password) values(‘cc’,’333’);

Insertinto user(name,password) values(‘dd’,’444’);

实现批处理的第二种方式：

PreparedStatement.addBatch()

conn = JdbcUtil.getConnection();

String sql = "insert intouser(name,password,email,birthday) values(?,?,?,?)";

st = conn.prepareStatement(sql);

for(int i=0;i<50000;i++){

st.setString(1, "aaa" + i);

st.setString(2, "123" + i);

st.setString(3, "aaa" + i +"@sina.com");

st.setDate(4,new Date(1980, 10, 10));

st.addBatch();

if(i%1000==0){

st.executeBatch();

st.clearBatch();

}

}

st.executeBatch();

采用PreparedStatement.addBatch()实现批处理

优点：发送的是预编译后的SQL语句，执行效率高。

缺点：只能应用在SQL语句相同，但参数不同的批处理中。因此此种形式的批处理经常用于在同一个表中批量插入数据，或批量更新表的数据。

Connection conn = JdbcUtil.getConnection();

String sql = "insert intouser(name,password,email,birthday)

values('abc','123','abc@sina.com','1978-08-08')";

PreparedStatement st = conn.

prepareStatement(sql,Statement.RETURN_GENERATED_KEYS );

st.executeUpdate();

ResultSet rs = st.getGeneratedKeys(); //得到插入行的主键

if(rs.next())

System.out.println(rs.getObject(1));

注：此参数仅对insert操作有效。

JDBC调用存储过程

编写存储过程（参看mysql文档）

得到CallableStatement，并调用存储过程：

CallableStatement cStmt =conn.prepareCall("{call demoSp(?, ?)}");

设置参数，注册返回值，得到输出

cStmt.setString(1, "abcdefg");

cStmt.registerOutParameter(2,Types.VARCHAR);

cStmt.execute();

System.out.println(cStmt.getString(2));

事务

事务的概念

事务指逻辑上的一组操作，组成这组操作的各个单元，要不全部成功，要不全部不成功。

例如：A——B转帐，对应于如下两条sql语句

update from account set money=money+100 where name=‘b’;

update from account set money=money-100 where name=‘a’;

数据库开启事务命令

start transaction 开启事务

Rollback回滚事务

Commit提交事务

当Jdbc程序向数据库获得一个Connection对象时，默认情况下这个Connection对象会自动向数据库提交在它上面发送的SQL语句。若想关闭这种默认提交方式，让多条SQL在一个事务中执行，可使用下列语句：

JDBC控制事务语句

Connection.setAutoCommit(false); starttransaction

Connection.rollback(); rollback

Connection.commit(); commit

在JDBC代码中使如下转帐操作在同一事务中执行。

update from account set money=money-100 where name=‘a’;

update from account set money=money+100 where name=‘b’;

设置事务回滚点

Savepoint sp = conn.setSavepoint();

Conn.rollback(sp);

Conn.commit(); //回滚后必须要提交

创建JDBC的事务主要分以下步骤

1.设置事务的提交方式为非自动提交：

conn.setAutoCommit(false);

2.将需要添加事务的代码放入try，catch块中。

3.在try块内添加事务的提交操作，表示操作无异常，提交事务。

conn.commit();

4.在catch块内添加回滚事务，表示操作出现异常，撤销事务：

conn.rollback();

5.设置事务提交方式为自动提交：

conn.setAutoCommit(true);

事务的特性(ACID)

原子性（Atomicity）
原子性是指事务是一个不可分割的工作单位，事务中的操作要么都发生，要么都不发生。

一致性（Consistency）
事务必须使数据库从一个一致性状态变换到另外一个一致性状态。

隔离性（Isolation）
事务的隔离性是多个用户并发访问数据库时，数据库为每一个用户开启的事务，不能被其他事务的操作数据所干扰，多个并发事务之间要相互隔离。

持久性（Durability）
持久性是指一个事务一旦被提交，它对数据库中数据的改变就是永久性的，接下来即使数据库发生故障也不应该对其有任何影响。

数据库共定义了四种隔离级别：

Serializable：可避免脏读、不可重复读、虚读情况的发生。（串行化）(序列化)

Repeatable read：可避免脏读、不可重复读情况的发生。（可重复读）

Read committed：可避免脏读情况发生（读已提交）。

Read uncommitted：最低级别，以上情况均无法保证。(读未提交)

settransaction isolation level 设置事务隔离级别

select @@tx_isolation 查询当前事务隔离级别