- 博客(75)
- 资源 (3)
- 收藏
- 关注
原创 搭建mycat+mysql集群的步骤
1 mysql主从配置1.1 主虚拟机配置(192.168.137.128)1.2 从虚拟机配置(192.168.137.129)1.3 测试2 配置mycat2.1 安装jdk2.2 安装mycat2.3 配置server.xml2.4 配置schema.xml2.5 测试1主虚拟机配置(192.168.11.109)1.1 修改/etc/mysql/...
2018-10-27 23:58:44
1217
转载 Springboot+Thymeleaf配置与使用
前言Springboot默认是不支持JSP的,默认使用thymeleaf模板引擎。所以这里介绍一下springboot使用Thymeleaf的实例以及遇到的问题。配置与使用1.在application.properties文件中增加Thymeleaf模板的配置。#thymelea模板配置spring.thymeleaf.prefix=classpath:/templates/spri...
2018-10-25 14:19:55
6086
转载 RDD之flatMap与Map对比
定义首先我们列出flatMap与Map的定义,可参考RDD APIdef map[U](f: (T) ⇒ U)(implicit arg0: ClassTag[U]): RDD[U] Return a new RDD by applying a function to all elements of this RDD.def flatMap[U](f: (T) ⇒ TraversableOnce[...
2018-03-21 17:29:09
4638
转载 spark配置安装
1 本文是在hadoop正确安装的前提的条件上进行的 Hadoop安装请参考:hadoop的安装和配置.docx(http://blog.youkuaiyun.com/tian_li/article/details/49103603)2 下载程序包http://spark.apache.org/downloads.html我们使用的是:spark-1.5.1-bin-hadoop2.6.tgz3 安装s...
2018-03-02 16:05:34
376
原创 centOS 用NAT模式无法上网
今天在centOS 7下更改完静态ip后发现network服务重启不了,翻遍了网络,尝试了各种方法,终于解决了。 现把各种解决方法归纳整理,希望能让后面的同学少走点歪路。。。首先看问题:执行service network restart命令后出现下面的错误:[java] view plain copy1. Restarting network (via s...
2018-03-02 15:59:33
2671
原创 使用Maven开发hbase的例子
创建Maven项目 配置pom.xml project xmlns="http://maven.apache.org/POM/4.0.0"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org
2017-12-17 18:59:51
5205
原创 配置HBase的伪分布跟完全分布集群
HBase的伪分布 下载地址https://mirrors.tuna.tsinghua.edu.cn/apache/hbase/stable/ 修改配置文件hbase-site.xmlhbase.rootdirhdfs://master:9000/hbasehbase.cluster.distributedtruehbase.zookeeper
2017-12-17 18:56:31
560
原创 配置zookeeper
将 zookeeper包解压后# cd zookeeper/conf/配置第一个:# cp zoo_sample.cfg zoo1.cfg# vi zoo1.cfg修改dataDir=/usr/data/zookeeper不要放在临时目录下面在最后面添加:server.1=192.168.137.128:2888:3888serve
2017-12-17 18:53:38
222
原创 hadoop在虚拟机中的配置
设定VirtualBox虚拟网卡的IP地址· 设置虚拟机中的网络设置1. 在虚拟机中选用host-only网络2. vi /etc/sysconfig/network NETWORKING=yesGATEWAY=192.168.56.13. vi/etc/sysconfig/network-sripts/ifcfg-enp0s3 TYP
2017-09-26 16:09:23
1653
转载 支持向量机(五)SMO算法
11 SMO优化算法(Sequential minimal optimization)SMO算法由Microsoft Research的John C. Platt在1998年提出,并成为最快的二次规划优化算法,特别针对线性SVM和数据稀疏时性能更优。关于SMO最好的资料就是他本人写的《Sequential Minimal Optimization A Fast Algorithm for
2017-03-27 17:18:55
415
转载 深入理解拉格朗日乘子法(Lagrange Multiplier) 和KKT条件
在求解最优化问题中,拉格朗日乘子法(Lagrange Multiplier)和KKT(Karush Kuhn Tucker)条件是两种最常用的方法。在有等式约束时使用拉格朗日乘子法,在有不等约束时使用KKT条件。 我们这里提到的最优化问题通常是指对于给定的某一函数,求其在指定作用域上的全局最小值(因为最小值与最大值可以很容易转化,即最大值问题可以转化成最小值问题)。提到KKT条件一般会附
2017-03-17 15:59:14
3785
转载 《机器学习实战》笔记之五——Logistic回归
第五章 Logistic回归回归:对一些数据点,算法训练出直线参数,得到最佳拟合直线,能够对这些点很好的拟合。训练分类器主要是寻找最佳拟合参数,故为最优化算法。5.1 基于Logistic回归和sigmoid函数的分类实现Logistic回归分类器:在每个特征上都乘以一个回归系数,然后把所有的结果值相加,总和带入sigmoid函数,其结果大于0.5分
2017-03-13 19:28:41
624
转载 朴素贝叶斯算法
一、朴素贝叶斯分类的基本原理给定的待分类项的特征属性,计算该项在各个类别出现的概率,取最大的概率类别作为预测项。二、贝叶斯定理根据条件概率的定义。在事件B发生的条件下事件A发生的概率是:同样地,在事件A发生的条件下事件B发生的概率:整理与合并这两个方程式,我们可以得到:这个引理有时称作概率乘法规则。上式两边
2017-02-28 15:30:57
615
转载 机器学习——决策树算法原理及案例
机器学习在各个领域都有广泛的应用,特别在数据分析领域有着深远的影响。决策树是机器学习中最基础且应用最广泛的算法模型。本文介绍了机器学习的相关概念、常见的算法分类和决策树模型及应用。通过一个决策树案例,着重从特征选择、剪枝等方面描述决策树的构建,讨论并研究决策树模型评估准则。最后基于 R 语言和 SPSS Modeler这两个工具,分别设计与实现了决策树模型的应用实例。1.机器学习概念
2017-02-28 15:18:19
1948
转载 机器学习——K-近邻(KNN)算法
一 . K-近邻算法(KNN)概述 最简单最初级的分类器是将全部的训练数据所对应的类别都记录下来,当测试对象的属性和某个训练对象的属性完全匹配时,便可以对其进行分类。但是怎么可能所有测试对象都会找到与之完全匹配的训练对象呢,其次就是存在一个测试对象同时与多个训练对象匹配,导致一个训练对象被分到了多个类的问题,基于这些问题呢,就产生了KNN。 KNN是通过测量不同特征
2017-02-17 17:35:42
778
转载 机器学习中的相似性度量
来自琥珀春秋博客的一篇,与自己最近计算的音乐相似性工作有所增益,记录之。在做分类时常常需要估算不同样本之间的相似性度量(Similarity Measurement),这时通常采用的方法就是计算样本间的“距离”(Distance)。采用什么样的方法计算距离是很讲究,甚至关系到分类的正确与否。本文的目的就是对常用的相似性度量作一个总结。本文目录:1. 欧氏距离2.
2017-02-07 14:05:27
516
转载 分级聚类算法(集体智慧编程)
分级聚类是通过连续不断地将最为相似的群组两两合并,来构造出一个群组的层级结构。其中的每个群组都是从单一元素开始的。如图所示:元素的相似程序是通过它们的相对位置来体现的,距离越近越相似。两两合并,直到合并最后两个群组。 聚类是无监督学习的一个例子。与神经网络或决策树不同,无监督学习算法不是利用带有正确答案的样本数据进行“训练”。它们的目的是要在一组数据中找寻某种结构,而这
2017-02-07 11:55:41
1239
转载 mysql-proxy实现读写分离
环境描述:操作系统:CentOS6.5 32位主服务器Master:192.168.179.146从服务器Slave:192.168.179.147调度服务器MySQL-Proxy:192.168.179.142由于电脑配置不行,安装了三台虚拟机,就卡死了,只能将就一下,由于是一主一从,所以,导致读写都在master上,有机会,再弄两台slave来测试一.mysql主从
2016-10-27 17:14:36
382
转载 MySQL 主从复制的原理和配置
工作原理图:主从复制的原理:分为同步复制和异步复制,实际复制架构中大部分为异步复制。 复制的基本过程如下:1).Slave上面的IO进程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;2).Master接收到来自Slave的IO进程的请求后,通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息,返回给S
2016-10-27 17:11:20
403
原创 log4net在vs2015中的使用
添加log4net.dll配置文件: configSections> section name="log4net" type="System.Configuration.IgnoreSectionHandler"/> configSections>
2016-09-09 11:02:16
2800
原创 Haproxy简单配置实例
Haproxy的配置文件:global #全局设置 log 127.0.0.1 local0 #日志输出配置,所有日志都记录在本机,通过local0输出 #log loghost local0 info maxconn 4096 #最大连接数 chroot /usr/loca
2016-05-12 14:42:31
538
原创 nginx配置实例
1、下载PCRE, 是一个用C语言编写的正则表达式函数库[root@localhostpcre-8.36]# cd /tmp/download/[root@localhostdownload]# wget http://nchc.dl.sourceforge.net/project/pcre/pcre/8.37/pcre-8.37.tar.gz[root@localhostdownlo
2016-05-11 16:32:45
786
转载 性能测试(并发负载压力)测试分析-简要篇
<br /> 在论坛混了多日,发现越来越多的性能测试工程师基本上都能够掌握利用测试工具来作负载压力测试,但多数人对怎样去分析工具收集到的测试结果感到无从下手,下面我就把个人工作中的体会和收集到的有关资料整理出来,希望能对大家分析测试结果有所帮助。<br /> 分析原则:<br /> ● 具体问题具体分析(这是由于不同的应用系统,不同的测试目的,不同的性能关注点)<br /> ● 查找瓶颈时按以下顺序,由易到难。<br /> 服务器硬件瓶颈-〉网络瓶颈(对局域网,可以不考虑)-〉服务器操作系统瓶颈(参
2011-03-16 11:19:00
700
转载 word转成html
<br />using System;<br />using System.Collections.Generic;<br />using System.Linq;<br />using System.Web;<br />using System.Web.UI;<br />using System.Web.UI.WebControls; <br />using System.Collections; <br />using System.Configuration; <br />using System.D
2011-03-10 17:46:00
805
转载 正则表达式过滤(.net)
<br />Regex re = new Regex("<a[^>]+href=[^>]+>[^<]*</a>");//这个可以过滤掉所有的超链接的内容<br />Regex re = new Regex("<a.*?>|</a>");//过滤超链接中的<a ....>xxx</a>标签,标签中xxx内容保留<br /> <br />public string checkStr(string html)<br /> {<br /> System.Text.RegularE
2010-11-08 22:03:00
1102
转载 WCF开发实战系列二:使用IIS发布WCF服务
<br />上一篇中,我们创建了一个简单的WCF服务,在测试的时候,我们使用VS2008自带的WCFSVCHost(WCF服务主机)发布WCF服务,以便进行测试。这种VS2008内置的WCFSVCHost只适用于开发人员测试的使用,能进行WCF服务部署。这一篇文章中我们来看一下如何在IIS中部发布我们上一篇中做好的WCF服务。<br />第一步:打开我们上一篇文章中建立的WCF服务项目。<br /><br />图《1》<br />第二步:新建WCF服务站点。在解决方案上右击,选择“添加”->“新建网站”,打
2010-09-29 18:08:00
692
转载 WCF开发实战系列一:创建第一个WCF服务
<br />在这个实战中我们将使用DataContract,ServiceContract来构建WCF服务,并使用VS2008内置的“WCFSVCHost”运行我们创建的WCF服务,并使用“WCF测试客户端”来测试我们创建的服务。<br />在此WCF服务中我们将建立一个关于Book的服务,并实现对Book的添加、删除和检索操作。<br />第一步:创建“WCF服务库”<br />“文件(F)”->“新建项目(P)...”打开新建项目对话框。在左侧的“项目类型”中选择“WCF”,然后再在右侧的“模板”中选择
2010-09-29 18:02:00
761
转载 端口被占用怎么办
<br />如果发现你用的端口被占用了可以通过以下两种方法解决<br /><br /> <br /><br /> 1.首先CMD命令,调出命令窗口。查询各个端口使用的程序代码为:netstat -ano 可以列出多有端口使用情况。找到port对应的80端口(地址后面跟着的数字)以及对应的PID,可以关闭该程序,或者卸载也行。不过一般用命令关闭比较快。用ntsd -c q -p PID。这里PID是端口对应的号码(数字)。一般是填数字。<br /><br /> 2.可以通过任务管理器找出使用80
2010-09-21 10:33:00
4156
转载 服务器提交了协议冲突.Section=ResponseHeader Detail=CR 后面必须是LF
<br />个错误貌似是微软没有容忍不符合RFC 822中的httpHeader必须以CRLF结束的规定的服务器响应所导致的,以至于无法使用软件登陆校内,让我很郁闷,后来尝试了各种方法,2种有效<br />方法一:<br />采用WEB编ASP.NET的话可用:<br />web.config文件里加入<br /><system.net><br /><settings><br /><httpWebRequest useUnsafeHeaderParsing="true" /><br /></settings
2010-09-08 11:29:00
12685
转载 用.NET创建Windows服务
我们将研究如何创建一个作为Windows服务的应用程序。内容包含什么是Windows服务,如何创建、安装和调试它们。会用到System.ServiceProcess.ServiceBase命名空间的类。 什么是Windows服务?Windows服务应用程序是一种需要长期运行的应用程序,它对于服务器环境特别适合。它没有用户界面,并且也不会产生任何可视输出。任何用户消息都会被写进Windows事件日志。计算机启动时,服务会自动开始运行。它们不要用户一定登录才运行,它们能在包括这个系统内的任何用户环境下运行。通过
2010-08-20 16:31:00
653
转载 网站采集 url网址正则表达式
<br />正则表达式规则<br />1. 正则表达式规则1.1 普通字符 字母、数字、汉字、下划线、以及后边章节中没有特殊定义的标点符号,都是"普通字符"。表达式中的普通字符,在匹配一个字符串的时候,匹配与之相同的一个字符。<br /> 举例1:表达式 "c",在匹配字符串 "abcde" 时,匹配结果是:成功;匹配到的内容是:"c";匹配到的位置是:开始于2,结束于3。(注:下标从0开始还是从1开始,因当前编程语言的不同而可能不同)<br /> 举例2:表达式 "bcd",在匹配字符串
2010-07-12 00:29:00
2794
转载 C# Stream 和 byte[] 之间的转换
<br />一. 二进制转换成图片<br />MemoryStream ms = new MemoryStream(bytes);<br />ms.Position = 0;<br />Image img = Image.FromStream(ms);<br />ms.Close();<br />this.pictureBox1.Image<br />二. C#中byte[]与string的转换代码<br />1、System.Text.UnicodeEncoding converter = new Sys
2010-07-08 21:38:00
632
转载 将dataset,reader转化为IList
<br />将dataset转化为IList<T>,关键是将datatable转化为类型IList<T>,代码如下:<br />public T Export(System.Data.DataTable Table)<br /> {<br /> // 定义集合 <br /> IList<T> List = null;<br /> // 获得此模型的类型 <br /> Type type = typeof(T
2010-06-16 17:25:00
1057
2
转载 MethodInfo.Invoke如何使用out ref参数
MethodInfo.Invoke可以指定一个Object[]来给要调用的方法传递参数,但是如何使用Out参数呢,主要是如何获取其实执行方法后,方法out传出的参数会放到传入的object数组的对应位置,所以我们在对应位置直接访问就可以了ref参数也是一样的 public class Program1 { public void OprtParams
2010-05-11 23:15:00
3091
转载 javascript中的srcelement
srcElement 是Dom事件中的事件最初指派到的元素。比如有一个div,里面有一个按钮。你响应div的onclick事件,但实际上,你单击的只是它内部的按钮,那么,srcElement指向的,就是那个按钮。srcElement只在IE中有效。在Opera系列浏览器中对应的属性是target给你一个IE下使用的例子。http://www.w3.org/TR/xhtml1/DTD/xhtml1-
2010-05-08 16:57:00
1322
原创 nhibernate的一对多关系
栏目类(一)(栏目包含多个类别)数据字典1.1. 表Tb_ Subject(栏目表)表名 Tb_ Subject列名 空/非空 数据类型(精度范围) 约束条件ID N int PK, 流水号SubjectName N nvarchar(200)
2010-04-29 13:55:00
909
转载 利用反射,泛型,静态方法快速获取表单值到Model。(Henq)
在项目中经常需要处理表单,给model赋值,很烦人的一些重复代码。如下边的代码:CodeCode highlighting produced by Actipro CodeHighlighter (freeware)http://www.CodeHighlighter.com/--> News news = new News(); news.Id =
2010-03-25 17:09:00
1485
转载 js/css在ajax UpdatePanel 中没有效果的解决方法
js没效果:如果在以UpdatePanel的方式的局部回传中,普通的Javascript代码在这种局部回传中就不会在触发了,就必须使用scriptmanager.RegisterClientScript方法(在后面注册)和scriptmanager.RegisterStartupScript方法(在) 在你的用户控件的后端的某个合适位置,采用合适的注册方法,比如说load事件可以写以下代码:
2010-03-01 14:56:00
2576
转载 Jquery 如何取出页面中所有以"User_"开头的控件对像
if 是同一种控件,比如input $("input[id^=User_]") else $("*[id^=User_]") head> script src="http://code.jquery.com/jquery-latest.js">script> script> $(document).ready(function(){ $("#btn").click(f
2010-02-27 10:33:00
4296
转载 Iframe高度自适应(兼容IE/Firefox、同域/跨域)
在实际的项目进行中,很多地方可能由于历史原因不得不去使用iframe,包括目前正火热的应用开发也是如此。随之而来的就是在实际使用iframe中,会遇到iframe高度的问题,由于被嵌套的页面长度不固定而显示出来的滚动条,不仅影响美观,还会对用户操作带来不便。于是自动调整iframe的高度就成为本文的重点。采用JavaScript来控制iframe元素的高度是iframe高度自适应
2010-02-25 16:08:00
831
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人