1. 存储过程
存储过程(Stored Procedure)是一组为了完成特定功能的 SQL 语句集,经编译后存储在数据库中。用户通过指定存储过程的名字并给出参数(如果该存储过程带有参数)来执行它。
存储过程是数据库中的一个重要对象,任何一个设计良好的数据库应用程序都应该用到存储过程。
优点:
- 允许模块化程序设计,就是说只需要创建一次过程,以后在程序中就可以调用该过程任意次。
- 允许更快执行,如果某操作需要执行大量 SQL 语句或重复执行,存储过程比 SQL 语句执行的要快。
- 减少网络流量,例如一个需要数百行的 SQL 代码的操作有一条执行语句完成,不需要在网络中发送数百行代码。
- 更好的安全机制,对于没有权限执行存储过程的用户,也可授权他们执行存储过程。
存储过程的具体使用详见: http://www.cnblogs.com/yank/p/4235609.html
2. 存储过程创建
create or replace procedure 存储过程名(param1 in type,param2 out type)
as
变量 1 类型(值范围);
变量 2 类型(值范围);
Begin
Select count(*) into 变量 1 from 表 A where 列名=param1;
If (判断条件) then
Select 列名 into 变量 2 from 表 A where 列名=param1;
Dbms_output。Put_line(‘打印信息’);
Elsif (判断条件) then
Dbms_output。Put_line(‘打印信息’);
Else
Raise 异常名(NO_DATA_FOUND);
End if;
Exception
When others then
Rollback;
End;
注意事项:
1. 存储过程参数不带取值范围,in 表示传入,out 表示输出
2. 变量带取值范围,后面接分号
3. 在判断语句前最好先用 count(*)函数判断是否存在该条操作记录
4. 用 select 。。。into。。。给变量赋值
5. 在代码中抛异常用 raise+异常名
3. 使用 Oracle 的游标
参考博客:https://www.cnblogs.com/sc-xx/archive/2011/12/03/2275084.html
1. Oracle 中的游标分为显示游标和隐式游标
2. 显示游标是用cursor…is 命令定义的游标,可对查询语句(select)返回的多条记录进行处理
3. 隐式游标是在执行插入 (insert)、删除(delete)、修改(update) 和返回单条记录的查询(select)语句时由 PL/SQL自动定义的。
4. 显式游标的操作:打开游标、操作游标、关闭游标;PL/SQL 隐式地打开 SQL 游标,并在它内部处理 SQL语句,然后关闭它。
4. Oracle 中字符串用什么连接?
Oracle 中使用 || 这个符号连接字符串 如 ‘abc’ || ‘d’ 的结果是 abcd。
5. Oracle 中是如何进行分页查询的?、
使用rownum进行分页, 是效率最好的分页方法,hibernate也使用rownum进行Oralce分页的
select * from
( select rownum r,a from tabName where rownum <= 20 )
where r > 10
6. 存储过程和存储函数的特点和区别?
特点:
- 一般来说,存储过程实现的功能要复杂点,函数实现的功能针对性比较强。
- 对存储过程来说可返回参数,而函数只能返回值或表对象。
- 存储过程一般是作为独立的部分来执行,函数可作为查询语句的一个部分来调用,由于函数可返回一个表对象,它可在查询语句中位于 FROM 关键字的后面。
区别:
- 函数必须有返回值,而过程没有.
- 函数可以单独执行.而过程必须通过 execute 执行.
- 函数可以嵌入到 SQL 语句中执行.而过程不行.
其实我们可以将比较复杂的查询写成函数.然后到存储过程中去调用这些函数.
7. 存储过程与 SQL 的对比
优势:
- 提高性能
SQL在创建过程时进行分析和编译。 存储过程是预编译的,首次运行一个存储过程时,查询优化器对其分析、优化,并给出最终被存在系统表中的存储计划 - 降低网络开销
存储过程调用时只需提供存储过程名和必要参数信息,降低网络的流量。 - 便于进行代码移植
数据库专业人员可随时对存储过程进行修改,对应用程序源代码却毫无影响,极大提高了程序的可移植性。 - 更强的安全性
- 系统管理员可对执行的某一个存储过程进行权限限制,避免非授权用户对数据访问
- 在通过网络调用过程时,只有对执行过程的调用是可见的。恶意用户无法看到表和数据库对象名称、嵌入自己的 Transact-SQL 语句或搜索关键数据。
- 使用过程参数有助于避免SQL 注入攻击。 因参数输入被视作文字值而非可执行代码,攻击者将命令插入过程内的 Transact-SQL 语句并损害安全性将更为困难。
- 可以对过程进行加密,有助于对源代码进行模糊处理。
劣势:
- 存储过程需专门数据库开发人员进行维护,实际往往由程序开发员人员兼职……
- 设计逻辑变更,修改存储过程没有 SQL 灵活
8. 存储过程和 SQL 语句该使用哪个
1. 在一些高效率或者规范性要求比较高的项目,建议采用存储过程
2. 对于一般项目建议采用参数化命令方式,是存储过程与 SQL 语句一种折中的方式
3. 对于一些算法要求比较高,涉及多条数据逻辑,建议采用存储过程
9. 触发器的作用
- 触发器可通过数据库中的相关表实现级联更改;通过级联引用完整性约束可以更有效地执行这些更改。
- 触发器可强制比用 CHECK 约束定义的约束更为复杂的约束。与 CHECK 约束不同,触发器可以引用其它表中的列。
如触发器可使用另一个表中的 SELECT比较插入或更新的数据,以及执行其它操作,如修改数据或显示用户定义错误信息。 - 触发器还可以强制执行业务规则
- 触发器也可以评估数据修改前后的表状态,并根据其差异采取对策。
参考资料:http://www.cnblogs.com/yank/p/4193820.html
10. 在千万级的数据库查询中,如何提高效率?
1. 数据库设计方面
- 对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。
- 尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,
如: select id from t where num is null 可以在 num 上设置默认值 0,确保表中 num 列没有 null 值,然后这样查询: select id from t where num=0 - 并不是所有索引对查询都有效,SQL 是根据表中数据来进行查询优化的,当索引列有大量数据重复时,查询可能不会去利用索引,如一表中有字段 sex,male、female 几乎各一半,那么即使在 sex 上建了索引也对查询效率起不了作用。
- 索引并不是越多越好,索引固然可以提高相应的 select 的效率,但同时也降低了 insert 及 update 的效率,因为 insert 或 update 时有可能会重建索引。
一个表的索引数最好不要超过 6 个,若太多则应考虑一些不常使用到的列上建的索引是否有必要。 - 尽可能避免更新索引数据列,因索引数据列的顺序就是表记录的物理存储顺序,一旦该列值改变将导致整个表记录的顺序的调整,耗费相当大的资源。若系统需要频繁更新索引数据列,那么需考虑是否应将该索引建为索引。
- 尽量使用数字型字段,若只含数值信息的字段尽量不要设计为字符型,会降低查询和连接的性能,并会增加存储开销。因为引擎在处理查询和连接时会逐个比较字符串中每一个字符,而对于数字型而言只需要比较一次就够了。
- 尽可能的使用 varchar/nvarchar 代替 char/nchar ,因为首先变长字段存储空间小,可以节省存储空间,其次对于查询来说,在一个相对较小的字段内搜索效率显然要高些。
- 尽量使用表变量来代替临时表。如表变量包含大量数据,请注意索引非常有限(只有主键索引)。
- 避免频繁创建和删除临时表,以减少系统表资源的消耗。
- 临时表并不是不可用,适当使用可使某些例程更有效,如,当需要重复引用大型表或常用表中的某个数据集时。但对于一次性事件,最好使用导出表。
- 在新建临时表时,如果一次性插入数据量很大,那么可以使用 select into 代替 create table,避免造成大量 log ,以提高速度;如数据量不大,为缓和系统表的资源,应先 create table,然后 insert。
- 如果使用到了临时表,在存储过程的最后务必将所有临时表显式删除,先 truncate table,后 droptable ,可避免系统表的较长时间锁定。
####2. SQL 语句方面
- 应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放弃使用索引而进行全表扫描。
- 应尽量避免在 where 子句中使用 or 来连接条件,否则将导致引擎放弃使用索引而进行全表扫描,如:select id from t where num=10 or num=20 可以这样查询: select id from t where num=10 union all
select id from t where num=20 - in 和 not in 要慎用,否则会导致全表扫描,如: select id from t where num in(1,2,3) 对于连续的数值,能用 between 就不要用 in :select id from t where num between 1 and 3
- 下面的查询也将导致全表扫描: select id from t where name like ‘%abc%’
- 如在 where 子句中使用参数,也会导致全表扫描。因为 SQL 只有在运行时才会解析局部变量,但优化程序不能将访问计划的选择推迟到运行时;它必须在编译时进行选择。然而,如果在编译时建立访问计划,变量的值还是未知的,因而无法作为索引选择的输入项。如下面语句将进行全表扫描: select id from t wherenum=@num 可以改为强制查询使用索引: select id from t with(index(索引名)) where num=@num
- 尽量避免在 where 子句中对字段进行表达式操作,这将导致引擎放弃使用索引而进行全表扫描。如:select id from t where num/2=100 应改为: select id from t where num=100*2
- 尽量避免在where子句中对字段进行函数操作,这将导致引擎放弃使用索引而进行全表扫描。如: selectid from t where substring(name,1,3)= ‘ abc’ – name 以 abc 开头 的 id select id from t where datediff(day,createdate,’2005-11-30′)=0–‘2005-11-30’生成的 id 应改为: select id from t where namelike ‘abc%’ select id from t where createdate>=’2005-11-30′ and createdate<’2005-12-1′
- 不要在 where 子句中的“=”左边进行函数、算术运算或其他表达式运算,否则系统将可能无法正确使用索引。
- 不要写一些没有意义的查询,如需要生成一个空表结构: select col1,col2 into #t from t where 1=0 这类代码不会返回任何结果集,但是会消耗系统资源的,应改成这样: create table #t(…)
- 用exists 代替 in 是一个好的选择: select num from a where num in(select num from b)用下面的语句替换: select num from a where exists(select 1 from b where num=a.num)
- 不要使用 select * from t ,用具体的字段列表代替“*”,不要返回用不到的任何字段。
- 尽量避免使用游标,因为游标的效率较差,如果游标操作的数据超过 1 万行,那么就应该考虑改写。
- 尽量避免向客户端返回大数据量,若数据量过大,应该考虑相应需求是否合理。
- 尽量避免大事务操作,提高系统并发能力。
3. java 方面:重点内容
- 尽可能的少造对象。
- 合理摆正系统设计的位置。大量数据操作,和少量数据操作一定是分开的。大量的数据操作,肯定不是 ORM框架搞定的。,
- 使用 jDBC 链接数据库操作数据
- 控制好内存,让数据流起来,而不是全部读到内存再处理,而是边读取边处理;
- 合理利用内存,有的数据要缓存