- 博客(55)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 MySQL高可用方案选型参考
MySQL高可用方案选型参考MySQL的各种高可用方案，大多是基于以下几种基础来部署的：基于主从复制；基于Galera协议；基于NDB引擎；基于中间件/proxy；基于共享存储；基于主机高可用；在这些可选项中，最常见的就是基于主从复制的方案，其次是基于Galera的方案，我们重点说说这两种方案。其余几种方案在生产上用的并不多，我们只简单说下。基于主从复制的高可用方案双节点主从 + ke
2017-12-14 09:36:38
460
原创 机器学习实战学习笔记（四）：Logistic回归
逻辑回归 逻辑回归分类的主要思想是：根据现有数据对分类边界线建立回归公式，以此进行分类。优缺点优点：计算代价不高，易于理解和实现。确定：容易欠拟合，分类精度可能不高。适用数据类型：数值型和标称型数据。核心概念sigma函数最大释然估计应用——从疝气病预测病马的死亡率这章不详细描述，请参考书中描述及这篇博客，写的很好（http://sbp810050504.blog.51cto.c
2017-04-04 20:03:50
449
原创 机器学习实战学习笔记（三）：朴素贝叶斯
贝叶斯原理之所以称之为“朴素”，是因为整个形式化过程只做最原始、最简单的假设。优缺点 - 优点：在数据较少的情况下仍然有效，可以处理多类别问题。 - 确定：对于输入数据的准备方式比较敏感。 - 适用数据类型：标称型数据。入门示例 二维坐标中，如果p1(x,y) > p2(x,y)，那么(x,y)属于类别1，否则属于类别2.共有7块石头，3块灰色的，4块黑色的 p(gray) = 3/7
2017-04-04 15:18:45
548
原创 机器学习实战学习笔记（二）：决策树
决策树优缺点优点：计算复杂度不高，输出结果易于理解，对中间值的确实不敏感，可以处理不相关特征数据。缺点：可能会产生过度匹配问题。适用数据类型：数值型和标称型。原理树结构信息增益在划分数据集之前之后信息发生的变化称为信息增益。香农商集合信息的度量方式称为香农熵或者简称为熵，这个名字来源于信息论之父克劳德.香农。例子略实际中的应用——预测隐形眼镜类型隐形眼镜数据集是非常著名的数据集。构造树结构。
2017-03-22 13:30:38
313
原创 机器学习实战学习笔记（一）：K-近邻算法
K-近邻算法优缺点 K-近邻算法采用测量不同特征值之间的距离方法进行分类。优点：精度高、对异常值不敏感、无数据输入假定。缺点：计算复杂度高、空间复杂度高。适用数据范围：数值型和标称型。原理存在一个样本数据集合，也称作训练样本集，并且样本集中每个数据都存在标签，即我们知道样本集中每一数据与所属分类的对应关系。输入没有标签的新数据后，将新数据的每个特征和样本集中数据对应的特征进行比较，然后算法
2017-03-20 21:40:52
289
转载 Kubernetes学习笔记（二）：网络原理
Kubernetes网络模型 Kubernetes网络模型设计的一个基础原则是：每个Pod都拥有一个独立的IP地址，而且假定所有Pod都在一个可以直接连通的、扁平的网络空间中。所以不管它们是否运行在同一个Node（宿主机）中，都要求它们可以直接通过对方的IP进行访问。设计这个原则的原因是，用户不需额外考虑如何建立Pod之间的连接，也不需要考虑将容器端口映射到主机端口等问题。 实际在Kube
2017-02-27 22:28:58
430
转载 Mesos学习笔记（一）
概述 Mesos是集群管理器，力争通过在多种框架之间动态共享资源来优化资源使用率，2009年由加利福尼亚大学发起。master master负责在slave资源和框架之间进行调度。任何时候，Mesos只有一个活动的master，由zookeeper使用分布式一致性算法选举产生。Mesos master本身不会用来做任何重负载计算，这样简化了master的设计。它以资源offer的形式将slav
2017-02-27 22:08:06
560
转载 Kubernetes学习笔记（一）
导语 2015年4月，传闻已久的Borg论文伴随Kubernetes的高调宣传被谷歌首次公开； Kubernetes是一个完备的分布式系统支撑平台，具有完备的集群管理能力，包括多层次的安全防护和准入机制、多租户应用支撑能力、透明的服务注册和服务发现机制、内建智能负载均衡器、强大的故障发现和自我修复能力、服务滚动升级和在线扩容能力、可扩展的资源自动调度机制，以及多粒度的资源配额管理能力。同时
2017-02-18 15:50:51
4131
1
转载 Mesos安装问题
Mesos安装中会遇到有关protobuf的一些错误，这个一般是安装过程中会下载一些软件，这些数据被墙了，解决的方法是使用国内的源先把需要软件安装了，针对上述问题，是pip被墙了，使用清华的源： https://wiki.tuna.tsinghua.edu.cn/MirrorUsage/pypi修改源的步骤在上诉链接中给出了，我使用第一中方法，“临时使用源”。根据错误提示，被墙的包为google-a
2017-02-16 11:49:41
504
原创 Flume TailDirSource问题
在使用Flume的tailDirSource时，发现每天凌晨log文件名切换时会丢失日志，查看源码发现，发现log文件名修改后不符合flume file group定义的正则表达式，导致改过名的日志文件不会再被flume读到；后来改了正则表达式，适应改名后的log文件，但发现改名后的log文件会被flume当成新文件，重新读一遍，再看源码，发现tailDirSource通过inode和filePat
2017-02-14 11:57:48
2790
3
翻译 Docker
Docker笔记导语 Docker容器本质上是宿主机上的进程。Docker通过nampespace实现了资源隔离，通过cgroups实现了资源限制，通过写时复制机制（copy-on-write）实现了高效的文件操作。一、资源隔离1、namespace资源隔离namespace6项隔离表 namespace 系统调用参数 隔离内容 UTS CLONE_NEWUTS 主机名与
2017-02-10 21:19:56
1150
转载 mysql主从复制配置
mysql主从复制（超简单）转载自http://369369.blog.51cto.com/319630/790921怎么安装mysql数据库，这里不说了，只说它的主从复制，步骤如下：1、主从服务器分别作以下操作： 1.1、版本一致 1.2、初始化表，并在后台启动mysql 1.3、修改root的密码2、修改主服务器master: #v
2016-08-24 20:08:34
284
原创 rabbitMQ
安装erlang安装rabbitmq新建用户：rabbitmqctl add_user user_admin passwd_admin;设置权限，配置、写、读vhost1的权限：rabbitmqctl set_permissions -p /vhostName user_admin '.*' '.*' '.*';
2016-05-12 15:19:36
252
原创 设计模式笔记
关联、依赖、组合、聚合、实现、泛化依赖：局部变量、方法的参数、静态方法的调用；关联/聚合：成员变量*********************************************************************创建模式简单工厂模式、工厂方法、抽象工厂模式、原型模式、建造者模式、单例模式
2016-01-10 15:26:35
481
原创 marvel kibana安装
cd ${elasticsearch_home}bin/plugin install licensesudo bin/plugin install marvel-agentdownloadkibana、marvel-2.0.0.tar.gzcd ${kibana_home}bin/kibana plugin --install marve
2015-11-17 16:58:52
1314
转载 elasticSearch
IK Analysis for ElasticSearchThe IK Analysis plugin integrates Lucene IK analyzer into elasticsearch, support customized dictionary.Analyzer: ik_smart , ik_max_word , Tokenizer: ik_smart , i
2015-11-16 14:52:10
546
原创 笔记
1、简历；2、自我介绍；3、UML架构图；4、设计模式、JAVA多线程、JVM、数据结构；5、sql优化、mongodb、redis；6、spring、dubbo源码；7、Netty；8、zookeeper、rabbitMQ9、ElasticSearch20112012
2015-11-13 11:49:45
285
原创 fastdfs环境搭建
下载fastdfs-5.0.5.tar.gz、libfastcommon.zip、fastdfs-nginx-module_v1.15.tar.gz安装、设置libfastcommonlibfastcommon：./make.sh、./make.sh installinstall -m 755 libfastcommon.so /usr/lib64mkdir -p /usr
2015-11-06 22:28:11
401
转载 FastDFS+Nginx安装配置笔记
FastDFS+Nginx安装配置笔记1.系统环境 最小化安装的 CentOS 6.2tracker1: 192.168.68.113tracker1: 192.168.68.116storage1: 192.168.68.114storage1: 192.168.68.1152.环境准备[所有服务器都需要
2015-11-05 17:31:50
301
转载 FastDFS_v5.05安装记录
FastDFS_v5.05安装记录分类： 大数据处理技术2015-01-12 19:40 2649人阅读 评论(0) 收藏 举报FastDFS安装fastdfs51、软件包 FastDFS_v5.05.tar.gz libfastcommon-master.zip fastdfs-nginx-module_v1.16.tar.gz z
2015-11-05 17:30:18
295
原创 部署笔记
0、别忘了把短信发送的开关打开；1、安装jdk，设置profile环境变量；export JAVA_HOME=/usr/local/jdk1.7.0_79 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar2、
2015-10-26 15:16:04
497
原创 rsync + inotify 实现文件目录的实时单向同步
linux下两台服务器文件实时同步方案设计和实现1、源服务器：192.168.1.66，目录/opt/test 目的服务器：192.168.1.68，目录/opt/bak/test 2、yum install rsync 3、配置目标服务器 /etc/rsyncd.confuid=rootgid=rootuse chroot=nomax conn
2015-10-26 15:14:37
821
转载 nginx源码安装
nginx可以使用各平台的默认包来安装，本文是介绍使用源码编译安装，包括具体的编译参数信息。groupadd -r nginxuseradd -r -g nginx -s /bin/false -M nginx正式开始前，编译环境gcc g++ 开发库之类的需要提前装好，这里默认你已经装好。ububtu平台编译环境可以使用以下指令apt-get install build-e...
2015-08-25 15:56:21
337
原创 批量上传文件
package test;import java.io.BufferedReader;import java.io.DataOutputStream;import java.io.IOException;import java.io.InputStream;import java.io.InputStreamReader;import java.io.RandomA
2015-07-20 17:40:24
456
原创 工作计划
jsp/servlet、jquery、tomcat、UML2云计算：hadoop/hbase/HDFS/zookeeper/Storm、solr/lucene/nutchSOA：dubbo/Netty、JMS/ActiveMQ、webService/rest、Spring-WS、Tuscany/SCA/SDO/Activi/mule/Esper/droos/WSO2
2015-07-10 12:11:44
323
原创 项目资料整理
附近、活动、消息、朋友、个人注意：需要哪几种尺寸的图片；一、注册/登录1、微信注册；微信授权登录，显示车内logo；调用微信头像；显示用户名+慰问语；可以查看用户协议；2、其他方式注册：手机号/密码注册用户名需校验、性别、省/市选择；可以查看用户协议；非手机号码或手机号已注册，提示信息有误；密码；获取手机验证码；每
2015-07-03 15:44:03
760
原创 ubuntu14源码安装mysql5.7
https://codeload.github.com/mysql/mysql-server/zip/5.7# Preconfiguration setupshell> groupadd mysqlshell> useradd -r -g mysql mysql# Beginning of source-build specific instructionsshel
2015-06-18 19:41:07
805
原创 IOS消息推送探究socket
苹果开发者网站：https://developer.apple.com/library/ios/documentation/NetworkingInternet/Conceptual/RemoteNotificationsPG/Chapters/CommunicatingWIthAPS.html#//apple_ref/doc/uid/TP40008194-CH101-SW1//密钥
2015-06-02 13:39:56
462
原创 技术点
计算机相关专业本科以上学历；精通Java语言和面向对象设计开发，大型Web应用开发和架构经验；熟悉主流Web应用相关的框架，对至少两个主流框架有深入理解(SPRING、IBATIS)；对设计模式、软件工程等有较深入的理解；精通TCP/IP协议，进程间通讯编程，熟悉Unix/Linux下常用架构设计方法；熟悉Unix/Linux操作系统原理，常用工具；精通面向对象设计，熟悉U
2015-05-23 11:15:58
710
原创 融资业务
融资管理银行、信托1、需求背景及目标集团及下属子公司没有对融资的系统支持，完全通过人工管理业务流程及融资数据，造成数据共享性差、流程可控程度低、数据无法长期有序保存等问题，因此拟由集团统一在CMS系统开发融资模块进行统一管理，并供集团内所有涉及融资的子公司使用。为实现集团内融资管理的信息化，达到资源共享、减少手工操作、避免重复劳动、提高工作效率，集团拟通过CMS系统对融资涉
2015-05-23 01:55:24
807
原创 技术点对点
线程1、实例化实现RunnableTread thread = new Thread(runnable);thread.start();继承ThreadTestThread extends Thread2、线程主要方法currentThread：静态方法，获取当前线程；sleep：静态方法，在指定的毫秒数内让当前正在执行的线程休眠（暂停执行）
2015-05-23 01:54:26
356
原创 让oracle跑的更快笔记
exec dbms_stats.gather_table_stats(user, table_name, cascade=>true);alter session set sql_trace = true;delete操作会消耗大量的CPU资源和产生大量的I/O，同时还会产生大量的undo数据；delete操作并不能释放出空间，也就是说，删除了哪个表的数据，腾出
2015-05-23 01:53:46
430
原创 设计模式
关联：如果类A与类B关联，那么类B被引用为类A的属性；依赖：如果A类访问B类的属性或方法，或者类A负责实例化类B，那么可以说A依赖B；聚集：整体与部分的关系，类B是类A的属性，形式同关联关系，但语义不同。 聚集--部分类的对象不能单独存在，它的生命周期依赖于整体类的对象的声明周期，当整体消失，部分也就随之消失。 关联--允许每个类的对象都单独存在
2015-05-23 01:53:41
373
原创 数据结构笔记
排序：1、冒泡排序2、选择排序：冒泡排序的改进型，不用移动那么多节点；选择排序：选择其中最小的值找个一关键字，第一次循环，第一个和关键字比较，如果第一个比关键字小，则将值赋予关键字，并记录下索引，第二个和关键字比较，如果比关键字小，，则将值赋予关键字，并记录下索引，依此类推，第一遍循环完，关键字即第一个到最后一个中的最小数，放到第一个位置，原来第一个位置的数
2015-05-23 01:52:09
348
原创 财务笔记
疑问：转账操作在哪？所有的抽档数据都放到转账记录表中tdrawdata，不需要清理吗？名词解释：抽档：从业务系统获取收付交易数据的过程，主要通过dblink实现，包括：外部系统抽档和CMS调拨数据抽档。抽档逻辑：package：cms_business_system_package.drawoperate批次化：将业务数据打包成符合送盘行需求数据批的过程，分协议
2015-05-23 01:51:36
1049
原创 webservice笔记
1、根据定义契约的先后，有两种Web服务开发方法：contract-first：先设计服务契约，然后开发代码；contract-last：将现服务接口作为Web服务暴露，服务契约自动生成；比较开发contract-last web服务时，你实际上暴漏给客户的是应用的内部API。但是这个API可能会改变 -- 改变之后，你必须改变Web服务的契约，这可能涉及到所有客户的改
2015-05-23 01:50:47
604
原创 sql优化笔记
表空间、段、区、数据块数据库：表空间：oracle中最大的逻辑存储结构；表空间与物理上的数据文件相对应，一个表空间可以对应多个数据文件，但是一个数据文件只能对应一个表空间；一个表空间的大小等于构成该表空间的所有数据文件大小的总和；自动创建的表空间：SYSTEM、SYSAUX、TEMP、EXAMPLE、UNDOTBS1、USERS；段：oracle中
2015-05-23 01:49:01
459
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人