- 博客(85)
- 收藏
- 关注
转载 域名解析三问
为什么可以用域名访问baidu.com而自己的不行呢?因为域名被百度买了,公网就能访问。为什么有的局域网,可以用主机名访问?因为局域网内有DNS,域名解析。可以不单独的解析某个机器名,就能用机器名访问。为什么有的局域网,没有DNS,也能用主机名访问?因为在/etc/hosts内加了解析,客户端加入解析访问要访问的机器。IP host...
2019-01-23 14:54:00
210
转载 python json dumps loads
请看以上图片可知1. python requests里面返回的是json 字符串, 说白了是字符串。不能直接取里面对应的值。2. 取值的话,需要把json字符串转换成字典, 用json.loads(json_str)3. 将字典转成json 字符串用json.dumps(dict)4. 取到里面的值应该1)dict=json...
2018-12-18 11:50:00
212
转载 github 新创建repositories
1. 在github上新建repo2. 找到改repo的地址,用命令git clone https://...., 拉取到本地3. 打开一个单独的窗口,打开此文件夹4. 创建自己的python文件等5. git->commit->push6. github上检查自己的repo是否更新转载于:https://www.cnblogs.com/zwingb...
2018-12-07 15:03:00
323
转载 Docker 启动Centos
dockerrun-d-e"container=docker"--privileged=true-v/sys/fs/cgroup:/sys/fs/cgroup--namecentos7centos/usr/sbin/init 2. dockerexec-itab49ca003950/bin/bash转载于:https://www.c...
2018-03-19 17:06:00
199
转载 Docker 初相见
Docker 是一个开源的应用容器引擎,基于Go 语言并遵从Apache2.0协议开源。Docker 可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中,然后发布到任何流行的 Linux 机器上,也可以实现虚拟化。容器是完全使用沙箱机制,相互之间不会有任何接口(类似 iPhone 的 app),更重要的是容器性能开销极低。Docker的应用场景...
2018-03-19 15:42:00
95
转载 ETL testing
https://www.tutorialspoint.com/etl_testing/index.htmquerysurge-installer-6.0.5-linux-x64 测试ETL的工具。转载于:https://www.cnblogs.com/zwingblog/p/8533571.html
2018-03-09 14:05:00
152
转载 [大数据测试]ETL测试或数据仓库测试入门
转载自:http://blog.youkuaiyun.com/zhusongziye/article/details/78633934概述在我们学习ETL测试之前,先了解下business intelligence(即BI)和数据仓库。什么是BI?BI(Business Intelligence)即商务智能,它是一套完整的解决方案,用来将企业中现有的数据(原始数据或商业数据...
2018-03-09 08:38:00
186
转载 ETL测试基本知识
转载自:https://www.cnblogs.com/clarke157/p/6383024.html一、ETL测试的重要性:ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程)作为BI/DW(Business Intelligence)的核心和灵魂,能够按照统一的规则集成并提高数据的价值,是负责完成数据从数据源向目标数据仓库转化的...
2018-03-09 08:34:00
243
转载 ETL 自动化测试框架
分享个自己最近在做的自动化测试框架架构图。数据的测试,入口一般定时任务。可添加参数选择执行任务的范围,也可以选择默认的执行范围。验证测试的为etl测试、数据库中的字段校验(通过对应关系、接口或者SQL校验)。工具类数据库工具类:定义一些数据库相关的操作,主要为操作MySQL。自定义了一些增删改查操作,简化SQL;消息相关工具类:发消息的工具类;定时任务工具类:暂...
2018-03-09 08:20:00
278
转载 大数据测试之ETL测试工具和面试常见的问题及答案
转载自:http://www.51testing.com/html/87/n-3722487.html概述 商业信息和数据对于任何一个企业而言都是至关重要的。现在很多公司都投入了大量的人力、资金和时间对这些信息、数据进行分析和整理。 数据的分析和整理已经获得了巨大的潜在市场,因此为了使得这个过程更为简单,越来越多的软件供应商引入了ETL测试工具。 目前...
2018-03-07 17:04:00
732
转载 Hadoop面试链接
http://blog.youkuaiyun.com/haohaixingyun/article/details/52819457http://blog.youkuaiyun.com/kingmax54212008/article/details/51257067http://blog.youkuaiyun.com/lxhandlbb/article/details/54599512http:...
2018-03-07 16:41:00
95
转载 Hadoop 面试总结
1、简要描述如何安装配置一个开源的hadoop,只描述即可,列出完整步骤。a、创建一个用户和用户组,用来管理hadoop项目b、修改确定ip地址:vim /etc/sysconfig/network-scripts/ifcfg-eth0c、修改主机名:vim /etc/sysconfig/networkd、修改host主机名和ip地址映射:vim /etc/hosts...
2018-03-07 16:34:00
190
转载 Spark 基本架构及原理
转载自:http://blog.youkuaiyun.com/swing2008/article/details/60869183转自:http://www.cnblogs.com/tgzhu/p/5818374.htmlApache Spark是一个围绕速度、易用性和复杂分析构建的大数据处理框架,最初在2009年由加州大学伯克利分校的AMPLab开发,并于2010年成为Apache的开...
2018-03-07 16:29:00
103
转载 HDFS默认副本数为什么是3
转载自:https://www.cnblogs.com/bugchecker/p/why_three_replications_for_HDFS_in_engineer.htmlHDFS采用一种称为机架感知的策略来改进数据的可靠性、可用性和网络带宽的利用率。在大多数情况下,HDFS的副本系数是3,HDFS的存放策略是一个副本存放在本地机架节点上,另一个副本存放在同一机架的...
2018-03-07 16:18:00
1925
转载 Linux xargs
产生命令的参数。常和find 在一起连用。1.echo 'one two three' | xargs mkdir2.find /tmp -mtime +14 | xargs rm3.time find . -type f -name "*.txt" -exec rm {} \; 0.35s user 0.11s system 99% cpu 0.467 t...
2018-02-24 17:44:00
119
转载 Redhat 7 之 Mariadb(mysql)
Redhat7 之后mysql 改为Mariadba,由于mysql 被卖给了IBM, 有闭源的风险。所以就另外开了一个新的分支,继续开源。Maria 来源于mysql开发者的女儿的名字。1. 安装MariaDByum install -y mariadb mariadb-serversystemctl ebable mariadbsystemctl st...
2018-02-24 14:51:00
117
转载 Cloudera 安装
参考网址:http://tcxiang.iteye.com/blog/2087597http://archive.cloudera.com/cdh5/http://archive.cloudera.com/cm5/ Cloudera安装的关键点1. 配置本地源: cloudera-manager.repo 和cloudera-cdh.repo2. 需要配置h...
2018-02-24 14:39:00
120
转载 Liunx 下载文件夹下所有文件
136down voteacceptedYou may use this in shell:wget -r --no-parent http://abc.tamu.edu/projects/tzivi/repository/revisions/2/raw/tzivi/The Parameters are:-r //recurs...
2018-02-23 10:26:00
150
转载 Jenkins 通过ssh 拷贝文件到远程机器上。
想实现的目的是: 在构建之前,从jenkins master上拷贝脚本到需要运行的机器上(linux ssh)。本来是通过publish over ssh 的transfer set可以直接设置,但是种种原因,莫名原因都不能如愿。现直接通过执行scp命令手动拷贝。Source file=/var/lib/jenkins/jobs/InstallBDM_ES/workspac...
2018-02-05 17:50:00
1433
转载 Eclipse 断点调试
Eclipse 开发专用的Debug模式,用于发现问题解决问题。1. 设置断点,程序会在改位置停止。2. 按F5(step into), F6(step over)执行。F5指跳入,逐语句。会进入断点处的方法看到细节。而F6指跳过,逐过程,看重结果。执行此断点处的语句查看结果,不去看方法内部的细节。Resume: 恢复暂停的线程,直接从当前的位置调到下一个断点的位置。此处...
2018-02-02 10:27:00
171
转载 python+selenium+js 处理滚动条
selenium并不是万能的,有时候页面上操作无法实现的,这时候就需要借助JS来完成了。常见场景:当页面上的元素超过一屏后,想操作屏幕下方的元素,是不能直接定位到,会报元素不可见的。这时候需要借助滚动条来拖动屏幕,使被操作的元素显示在当前的屏幕上。滚动条是无法直接用定位工具来定位的。selenium里面也没有直接的方法去控制滚动条,这时候只能借助J了,还好selen...
2018-01-24 17:46:00
93
转载 测试站内搜索
各种测试都可以考虑从这些方面入手,功能,性能,易用性,兼容性,安全性和异常性。总的方面可以分为: 功能方面,性能方面,易用性方面,兼容性方面,安全性方面,异常性方面。<1>功能方面,是否能按指定条件查到正确、完整的结果,具体: 1、录入条件为可查到结果的正常关键字、词、语句,检索到的内容、链接正确性; 2、录入条件为不可查到结果的关键字、词、语句...
2018-01-24 17:24:00
152
转载 windows修改文件的修改或者创建时间
https://www.online-tech-tips.com/computer-tips/how-to-change-the-last-modified-date-creation-date-and-last-accessed-date-for-files-and-folders/软件:BulkFileChanger.exe转载于:https://www.cnb...
2017-12-27 13:59:00
1783
转载 jenkins slave agent 当作服务运行
1. 接上边编辑好文件2. 双击以上的jnlp文件3. 点击弹出的窗口File->save as service, 此时如果报错的话很可能是由于没有安装.net(.net2 以上)4. 保存一下运行即可。转载于:https://www.cnblogs.com/zwingblog/p/8074077.html...
2017-12-20 15:39:00
217
转载 JNLP Slave connection error解决办法
Replace in jnlp-file<argument>-workDir</argument><argument />with<argument>-workDir</argument> <argument>.</argument>as wo...
2017-12-20 14:33:00
435
转载 jenkins Process leaked file descriptors
https://stackoverflow.com/questions/17024441/process-leaked-file-descriptors-error-on-jenkins1. BUILD_ID=dontKillMe nohup ./yourStartScript.sh &不确定是否有效2.Add this line as a JAVA_ARGS...
2017-12-19 14:20:00
434
转载 Bat 命令相关
1. bat 里面怎么sleep 等待:ping 127.0.0.1 -n 2000 > nul2. net use建立映射:net use Y: \\172.16.10.240\Infa_Shared\Infa_Build\Mercury\AT_build\Windows /user:INFARAIDSVR\infa "!qaz2wsX"在cmd里面执行可能不需要...
2017-12-19 14:17:00
110
转载 VM 脚本回快照和开关机
#Import PowerCLI*Get-Module -ListAvailable PowerCLI* | Import-Module#Resolve login issueSet-PowerCLIConfiguration -InvalidCertificateAction Prompt -confirm:$false#Connect to serverConnect-VIS...
2017-12-18 10:29:00
222
转载 Linux powercli 以及connect-viserver 连接问题
1. 参考文档http://fdo-workspace.blogspot.hk/2017/07/powershell-powercli-for-linux-server.html2. powershell 版本需要是 alpha 不是betapowershell-6.0.0_alpha.18-1.el7.centos.x86_64.rpm3. 查看文档下面的troble...
2017-12-15 18:16:00
444
转载 Windows下自动解压windows share上的文件
rem mkdir c:\buildmd c:\buildrem Mount the Windows share to Z drivenet use x: \\172.16.10.240\Infa_Shared\Infa_Build\Mercury\AT_build\Windowsrem Start unzip windows build to local machine, no...
2017-12-15 17:11:00
141
转载 Jenkins有用的插件
1.Multijob plugin: 多个任务同时运行2.ssh slave plugin: 用于安装slave? Allows to launch over ssh, using a java implementation of the ssh protocol3.Publish Over SSH: ssh 连接4. Pipeline Job5. Ant:6...
2017-12-12 18:10:00
97
转载 windows下用时间戳创建文件名
英文环境下:echo Archive_%date:~-4,4%%date:~-10,2%%date:~-7,2%_%time:~0,2%%time:~3,2%%time:~6,2%.zip中文:echo根据当前日期时间,生成文件名称,......setYYYYmmdd=%date:~0,4%%date:~5,2%%date:~8,2%sethhmi...
2017-12-12 13:32:00
687
转载 Jenkins Pulgin 安装
1. 利用管理插件找到需要安装的插件。 2. 如果安装失败,查看缺少啥。 3. 手动去下载http://updates.jenkins-ci.org/download/plugins/ 4. 安装此插件 5. 继续1转载于:https://www.cnblogs.com/zwingblog/p/7851219.html...
2017-11-17 13:52:00
92
转载 安装在Linux下的jenkins执行windows下的bat命令
launch method里面没有 launch agent via java web start默认是disable 需要改成random转载自:http://blog.youkuaiyun.com/songjiaping/article/details/49587297进入正题:想实现的目标就是如题,我有一个安装在Linux环境下的J...
2017-11-13 14:09:00
302
转载 Linux Shell下执行sqlplus
转载自:http://www.cnblogs.com/include/archive/2011/12/30/2307889.html以下方法解决了在linux下自动的删除创建用户sqlplus -S "sys/unimas as sysdba" << !select to_char(sysdate,'yyyy-mm-dd') today from dual;e...
2017-11-09 11:08:00
663
转载 Linux 下访问Windows共享目录
5、安装cifs-utils软件包# yum install cifs-utils貌似可以不用安装这个包。6、在Linux下创建一个挂载点# mkdir /mnt/Windows7、挂载Windows上的共享目录d:\redhat_disk到Linux下的/mnt/Windows目录下# mount -t cifs -o username=test ...
2017-11-07 16:10:00
84
转载 Linux SSH 无密码登录
1. ssh-keygen -t rsa2. scp root@ip:/root/.ssh/id_rsa.pub ./id23. cat id2 >> authtorized_keys4. systemctl restart sshd5. switch to another machine, ssh root@ip在另一机器上重复以上操作, 其中最关...
2017-10-25 09:51:00
56
转载 Linux 文件编码问题及iconv命令
iconv命令是运行于linux/unix平台的文件编码装换工具。当我们在linux/unix系统shell查看文本文件时,常常会发现文件的中文是乱码的,这是由于文本文件的编码与当前操作系统设置的编码不同而引起的,这时可以使用iconv进行编码转换,从而解决乱码问题。解决文本文件乱码问题分3步:1.确定文件编码,2.确定iconv是否支持此编码的转换,3.确定Linux/Unix操作系统...
2017-09-14 10:43:00
227
转载 Informatica _组件使用介绍及优化
转载http://blog.youkuaiyun.com/yongjian1092/article/details/52588434有空自己会写一个关于这方面的文章。转载于:https://www.cnblogs.com/zwingblog/p/7454168.html
2017-08-30 17:19:00
143
转载 Mantis 从Windows 迁移到Linux上
1. 导出windows manits的mysql数据库文件, 在cmd运行:mysqldump -uroot -p3edc$RFV bugtracker > C:/mantis.sql;2. 备份Mantis文件夹3. 在Linux上安装LAMP(Apache httpd, mysql, php), 并启动好所有服务4. 拷贝以上备份好的Mantis文件夹到/var/...
2017-08-09 15:19:00
249
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人