wanghailin1984-优快云博客

原创学习笔记(10):21天搞定分布式Python网络爬虫-xpath-lxml解析HTML代码和文件

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 14:09:49 280

原创学习笔记(09):21天搞定分布式Python网络爬虫-xpath-基本介绍

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 13:20:18 242

原创学习笔记(08):21天搞定分布式Python网络爬虫-requests库-处理cookie

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 12:56:25 303

原创学习笔记(07):21天搞定分布式Python网络爬虫-requests库-使用代理

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 12:54:47 244

原创学习笔记(06):21天搞定分布式Python网络爬虫-requests库-基本使用

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 12:42:06 179

原创学习笔记(05):21天搞定分布式Python网络爬虫-urllib库-实战-知乎登录模拟实战（2）...

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 12:20:59 170

原创学习笔记(04):21天搞定分布式Python网络爬虫-urllib库-实战-知乎登录模拟实战（1）...

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 12:06:35 181

原创学习笔记(03):21天搞定分布式Python网络爬虫-urllib库-Cookie原理讲解

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 11:57:14 177

原创学习笔记(02):21天搞定分布式Python网络爬虫-urllib库-ProxyHandler处理器

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-05 11:27:55 179

原创学习笔记(01):21天搞定分布式Python网络爬虫-爬虫介绍（资料在第一节中下载）...

【本课程如何让你系统掌握python爬虫？】一个完整的爬虫程序，无论大小，总体来说可以分成三个步骤，分别是：网络请求：模拟浏览器的行为从网上抓取数据。数据解析：将请求下来的数据进行过滤，提取我们想要的数据。数据存储：将提取到的数据存储到硬盘或者内存中。比如用mysql数据库...

2020-02-04 21:38:58 799

原创 excel 合并列植

选课课号=

2014-09-23 10:12:50 590

转载 oracle函数中有不足位数补空格的函数

oracle函数中有不足位数补空格的函数 LPAD和RPAD分别是左补位和右补位 repalce(lpad(字段名，共几位)，‘ ’，‘0’) 如运行 select replace(lpad('123',5),' ','0') from dual 结果是00123 即补足五位

2014-09-23 09:58:13 9885 1

原创关于EXP-00106: 数据库链接口令无效问题处理

连接到: Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit ProductionWith the Partitioning, OLAP, Data Mining and Real Application Testing options已导出 ZHS16GBK 字符集和 AL16UTF16 NCHAR 字符集

2014-09-23 09:52:21 38799

原创 oracle 行转列与列转行

1 列转行select a.xn,a.xm,a.zydm,a.xh,a.sfbz,a.sfxmdm,b.sfxmmc from (select xn,xm,zydm,xh,sfxm01 sfbz, '01' sfxmdm from xssfbunion allselect xn,xm,zydm,xh,sfxm02 sfbz,'02' sfxmdm from xssfbunion

2013-09-27 08:55:56 940

转载 JSP 9 大内置对象详解

JSP 9 大内置对象详解内置对象特点:1. 由JSP规范提供,不用编写者实例化。2. 通过Web容器实现和管理3. 所有JSP页面均可使用4. 只有在脚本元素的表达式或代码段中才可使用(使用内置对象%>或使用内置对象%>) 常用内置对象:1. 输出输

2013-07-19 15:24:26 505

原创实验三：jsp页面数据采集技术 <FORM> 表单技术

表单采集示例一：-------------------------------------------------------------------------------------------------------String path = request.getContextPath();String basePath = request.getScheme

2013-07-19 15:14:26 5733

原创实验二：分页显示数据库信息（jsp页面直接分页)

分页显示数据库信息分页显示数据库记录职工号姓名所在部门try{//驱动程序名String driverName="sun.jdbc.odbc.JdbcOdbcDriver";//连接字符串//加载驱动程序Class.forName(driverName).newInstance();Connecti

2013-07-17 22:25:33 567

原创实验一:JDBC-ODBC 连接数据库技术

String path = request.getContextPath();String basePath = request.getScheme()+"://"+request.getServerName()+":"+request.getServerPort()+path+"/";%> "> ODBC访问数据库技术

2013-07-17 22:23:55 756

转载 Oracle创建/重建和删除索引

Oracle创建/重建和删除索引.关键字：Oracle 　　为了方便广大考生更好的复习，帮考网综合整理提供了Oracle认证：Oracle创建/重建和删除索引，以供各位考生考试复习参考，希望对考生复习有所帮助。　　Oracle创建、重建和删除索引　　创建索引：　　SQL》 create index mcconf_index on mc$ma_warn_config (N

2013-06-20 18:03:20 1499

原创 excel截取特殊字符之间的值

取列值中括号内的信息：=MID(B5,FIND("(",B5)+1,FIND(")",B5)-FIND("(",B5)-1)取列值中括号左边的信息：=LEFT(B5,FIND("(",B5)-1)

2013-05-29 12:54:34 1461

原创合并多个excel 文档到一个工作表（具有相同字段结构的表）并核对记录数的准确性

第一步：将多个Excel文档中的工作表，合并到一个Excel文档假如我们是要将多个Excel 文档中的工作表，全部合并到一个Excel文档中时，我们可以进行如下操作： 1、首先，我们打开要合并的所有的Excel 文档； 2、然后，我们右键工作表的名称，“选定全部工作表”——“移动或复制工作表”； 3、然后，我们在“工作簿”下拉框中选择目的Excel文件；这样，便可以将多个Exc

2013-04-18 14:28:43 20742

原创提取特定字符的值

--提取列值中2个固定字符的值select substr(kcmc,instr(kcmc,'[')+1,instr(kcmc,']')-2) from cjb_gxgsyssj--提取列值中某个固定字符后所有的值select substr(kcmc,instr(kcmc,']')+1,length(kcmc)-instr(kcmc,']')) khfs from cjb_gxgsyss

2013-04-09 12:26:39 1573

转载多个oracle安装后plsql 如何寻找tns文件

配置sqldeveloper中使用的TNS文件2012-04-30 13:38:07分类： Oraclesqldeveloper介绍：Oracle SQL Developer is a free and fully supported graphical tool for database development. With SQL Deve

2013-03-26 15:43:01 7629

转载转至Oracle查询数据库中所有表的记录数

1、create or replace function count_rows(table_name in varchar2, owner in varchar2 default null)return numberauthid current_userIS num_rows number; stmt v

2013-03-21 21:11:37 721

原创 excel 数据比对和填值

=INDEX(系统导出一级总成绩!$B$2:$B$6000,MATCH($D$2:$D$8212,系统导出一级总成绩!$C$2:$C$6000,0)) 一个excel 工作簿 2张excel工作表比对2列值如果相同的话赋予一个结果。上边这个公式含义：在本表基础上列值 $D$2:$D$8212 比对 “系统导出一级总成绩”表的系统导出一级总成绩表列值!$C$2:$C

2013-03-13 13:00:21 869

原创 ORA-12560

连接服务器，sqlplus /nolog ；conn /as sysdba shutdown start 一切正常。用plsql登录提示 ORA-12560 协议适配器错误。看监听程序状态，服务是否起来。通过重建实例名监听查看状态。启动监听 lsnrctl start 启动提示监听启动不起来，被其他程序占用，重启服务器后正常。 --------

2013-03-12 22:18:08 1352

转载查看http服务器连接数的命名

perfmon.msc：服务器性能监视器-------------------------------------------------------------------------------netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'如何查看如何查看如何查看如何查看Web服务

2013-01-25 12:23:44 1318

原创 java编程（二）

对象1）所有的东西都是对象，从抽象到物质。可以将对象想象成一种新的变量，里边存储着数据。有自己的属性和行为，在接受调用后（其他对象传送过来的消息时）实现自己。 2）对象都有自己的存储空间和内存，可以封装其他对象，可以无限封装无限抽象和复杂。 3）每个对象都有自己的类type 。是类中的一个个体，能够接受该类通用的消息。一个类最重要的特征是“能将什么消息发给他？”

2012-12-26 22:56:34 279

原创 java 编程（一）

在颓败中再一次开始java 计算机语言的学习旅程。再一次阅读java搜寻与java相关记忆，发现一切都如云烟清淡而远。 1 java 是一种从c++衍生出来的面向对象的优秀的程序设计（oop）语言，其跨平台，简化编程的过程（代码复用，封装，接口调用，类库），以及安全性（违例机制，垃圾收集器）和多线程处理机制都表现出 java 在解决复杂问题方面的优秀能力。

2012-12-26 21:41:04 206

原创 oracle 经典查询之一

1怎样查询字段中不包含字母的值select * from table_name where not regexp_like(colname, '[a-zA-Z]');2怎样查询字段中包含数字的值select * from table_name where regexp_like(colname,'[0-9]')

2012-11-07 14:43:27 422

原创让我崩溃的oracle装机实战

几乎接近崩溃的装机，版本，包，图形界面，xhost+ ，语言设置让我脆弱的小心肝经历了一次痛苦的煎熬。给我打击不少。‘但作为一个基督徒来说，一切都是神的安排，都是美意。该大声赞美神。--------------------------------------------------------------------------------------------------

2012-06-16 11:41:15 393

原创 IBM Informix Client-SDK

今天，初次去给用户装软件，机房系统还没装好，客户告诉我要迁移原来的财务系统的数据。我为我的无知感到惭愧呀，每一个项目背后总会有许许多多的故事，还以为是全从新开始的呢，所以事情总是伴随着意外和困难，这也许正是项目的魅力所在。客户原来用的数据库是ibm informix （表示未听过），应用是tomcat 的，全新组合呀，不知道效率如何。让我们瞧瞧这个没有听说的

2012-06-11 21:09:13 4588

原创 plsql 使用技巧及语句集锦(二）经典update

1 列值的替换：（1）根据列值直接替换成相应标识符。员工信息表中有xb字段，值为1和2 替换为’男‘和’女‘update jg_jzgjcsjzl set xb= case when xbm='1' then '男' when xbm='2' then '女' endUPDATE Personnel SET salary = CASE WHEN salary >= 5000

2012-05-06 22:58:51 19908

原创 ORA-12514

今天五一放假，早上跑完步回来接到一个客户电话，数据库昨天掉电，早上登录不了了。责任所在，赶紧喵喵啥情况。现象，plsql登录提示ORA-12514 ：监听程序无法识别连接中的描述符。【ps：连接描述符：oracle 客服端连接服务器的 ip 端口号 sid 信息）神马情况呢，监听有oracle 服务都正常，oracle 本地，无法识别本地配置的服务名。意味着神马呢？1）

2012-04-29 17:05:33 656

转载右键添加新建记事本

转载文章：http://www.cnblogs.com/jizhitao/archive/2009/10/05/1578221.html背景：右键没有新建记事本的功能，导致我每次想记录点什么临时的信息什么的，去建一个word文档，真是很憋呀。这个注册表代码还是很好用的，至于文字试了一下没有成功，也没心情仔细研究。。写入记事本：Windows Registry Editor

2012-04-28 22:09:50 929

原创 oracle 数据备份服务器安装之乱码篇

服务器：win2003系统数据库：oracle10.2.1 forwindows32 参考文献：解決EXP-00091的方法：http://www.blogjava.net/nobody_am/articles/147982.html 今天，一客户购买一台新的备份服务器，替其安装数据库及备份。安装过程中数次出现波折。波折一：将oracle解压后，双击setup 系统

2012-04-11 22:47:51 983

原创 oracle 管理之数据备份

实验中ing 期待。。。。1 逻辑备份2 物理备份3 归档日志

2012-03-09 21:19:12 324

原创 oracle 管理之数据恢复之闪回

误删数据的回魂汤闪回（flashback），oracle 深深了解人冒险与莽撞的天性，特别开发了这颗后悔药。 roacle 的世界里我们可以还原历史。参考文档： ----数据闪回实验文档 falshback------------------------------------------------1建表及数据脚本sql-----------A 闪回查

2012-03-09 21:16:43 974

原创 oracle 管理之会话篇 session

现象：正常情况下，客户端连上来之后处理，退出，会话会很快释放。异常情况，客户端连上时很慢，不等页面程序完成就关掉，结果导致许多oracle会话无法释放。请问各位高手兄弟：在oracle服务器端有无办法设置一超时时间，使inactive的会话在超时后自行释放？另，kill会话之后，被kill的显示状态为killed，请问此种会话是否占用资源？如何释放？

2012-03-09 14:24:43 632

原创 plsql 使用技巧及语句集锦

sql语句也是一种具有数据世界的通用语言还是具有很强生命力的，比鸟语要好懂，语法不复杂，运用很灵活。0 进行数据处理的时候，经常碰到的一种情况就是（一列值中有几类值，要根据值来更新相应的关联值，例如人员表中性别一列值中有‘男‘’女’ 2种值，现更新值为‘男’的记录为1 ，‘女’记录为2；）update ryb set xb= case when xbm='1' t

2012-03-08 21:42:04 815

空空如也

空空如也