- 博客(67)
- 资源 (7)
- 收藏
- 关注
RSS订阅原创 Hadoop技巧（01）：插件，终端权限
阅读目录序HDFS权限系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 在hadoop开发或者使用中，可能会使用到一些插件或3方软件，比如：Eclipse的Hadoop插件，ETL的Kettle。那么就存在一个h
2016-02-29 13:55:06
354
原创 从零自学Hadoop(18)：Hive的CLI和JDBC
阅读目录序Hive CLI(old CLI)Beeline CLI(new CLI)JDBCDemo下载系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们对hive的数据导出，以及集群Hi
2016-02-04 08:49:44
625
原创 [置顶]【源】从零自学Hadoop系列索引
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink【源】从零自学Hadoop(01)：认识Hadoop【源】从零自学Hadoop(02)：环境准备【源】从零自学Hadoop(03)：Linux准备上【源】从零自学Hadoop(04)：Linux准备下【源】从
2016-01-24 15:29:39
502
原创 【源】从零自学Hadoop(17)：Hive数据导入导出，集群数据迁移下
阅读目录序将查询的结果写入文件系统集群数据迁移一集群数据迁移二系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们介绍了Hive的数据多种方式导入，这样我们的Hive就有了数据来源了，但有时候我
2016-01-24 15:29:34
392
原创 【源】从零自学Hadoop(16)：Hive数据导入导出，集群数据迁移上
阅读目录序导入文件到Hive将其他表的查询结果导入表动态分区插入将SQL语句的值插入到表中模拟数据文件下载系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们介绍了Hive的表操作做了简
2016-01-24 15:29:29
455
原创 【源】从零自学Hadoop(15)：Hive表操作
阅读目录序创建表查看表修改表删除表系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们介绍了Hive和对其进行了安装，下面我们就初步的使用hive进行讲解。 下面我们开始介绍hive
2016-01-24 15:29:25
270
原创 【源】从零自学Hadoop(14)：Hive介绍及安装
阅读目录序介绍安装系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 本系列已经有一个多月没更新了，期间涉及到找相关对应的工作，所幸的事，得到了几个offer，后来综合考虑来到了目前这家工作。希望在接下来的时间里，能
2016-01-24 15:29:20
311
原创 【源】从零自学Hadoop(13)：Hadoop命令下
阅读目录序MapReduce CommandsUser CommandsAdministration CommandsYARN CommandsUser CommandsAdministration Commands引用系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(
2016-01-24 15:29:16
243
原创 【源】从零自学Hadoop(12)：Hadoop命令中
阅读目录序HDFS CommandsUser CommandsAdministration CommandsDebug Commands引用系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们
2016-01-24 15:29:11
299
原创 【源】从零自学Hadoop(11)：Hadoop命令上
阅读目录序概述Hadoop Common CommandsUser CommandsAdministration CommandsFile System Shell引用系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink
2016-01-24 15:29:06
254
原创 【源】从零自学Hadoop(10)：Hadoop1.x与Hadoop2.x
阅读目录序里程碑Hadoop1.x与Hadoop2.x系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们使用Maven构建了我的MapReduce程序，并且成功的运行了Job。那么大家可能会觉得为什么要
2016-01-24 15:29:01
254
原创 【源】从零自学Hadoop(09)：使用Maven构建Hadoop工程
阅读目录序Maven安装构建示例下载系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们编写了第一个MapReduce，并且成功的运行了Job，Hadoop1.x是通过ant来管理工程的，后来到了
2016-01-24 15:28:57
288
原创 【源】从零自学Hadoop(08)：第一个MapReduce
阅读目录序数据准备wordcountYarn新建MapReduce示例下载系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们的Eclipse插件搞定，那开始我们的MapReduce之旅。
2016-01-24 15:28:54
245
原创 【源】从零自学Hadoop(07)：Eclipse插件
阅读目录序EclipseEclipse插件新建插件项目系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们的第一个Cluster搞定了，按平常的搭建集群来说，应该是至少3个DataNode的，应为默认
2016-01-24 15:28:50
304
原创 【源】从零自学Hadoop(06)：集群搭建
阅读目录序集群搭建监控系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 上一篇，我们把Ambari的环境基本搭建好了，那么我们趁热打铁，打造我们的第一个HDP集群，这样，离我们下一步就越来越近了，在安装中还是会碰到
2016-01-24 15:28:45
286
原创 【源】从零自学Hadoop(05)：Ambari
阅读目录序引入背景Ambari介绍在线安装系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 这里我们选择Ambari作为HDP的生产管理工具，如果我们一个个去配置HDP，很浪费时间，也很没有效率，成功率。生产环
2016-01-24 15:28:40
271
原创 【源】从零自学Hadoop(04)：Linux准备下
阅读目录序搭建环境系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 我们已经准备好了网络访问，防火墙，Hosts,SSH等设置,下面我们根据上篇中的检查列表处理下剩下的内容，包括yum,时间同步，本地仓库等。 我
2016-01-24 15:28:36
223
原创 【源】从零自学Hadoop(03)：Linux准备上
阅读目录序检查列表常用Linux命令搭建环境系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 序 在上一步骤，我们已经准备了4台虚拟机，分别是H30,H31,H32,H33。其中H30为我们的Ambari服务器，H
2016-01-24 15:28:31
264
原创 【源】从零自学Hadoop(02)：环境准备
阅读目录起因虚拟机Linux系统安装系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink 起因 我们对Hadoop有了初步的认知，得有NameNode,DataNode,NameNode和DataNode可以在一个机器
2016-01-24 15:28:27
267
原创 【源】从零自学Hadoop(01)：认识Hadoop
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录序Hadoop项目起源优点核心架构开源实现子项目HDFS流程图系列索引本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。
2016-01-24 15:28:23
413
原创 【源】Centos修改DNS重启或者重启network服务后丢失问题处理
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍起因处理GitHub本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink
2016-01-24 15:28:18
484
原创 初次体验VS2015正式版，安装详细过程。
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍安装其他本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink
2016-01-24 15:28:14
815
原创 多年前写的文本框扩展控件(有ValueChanging事件等)，已放github
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍起因代码使用GitHub本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，Source
2016-01-24 15:28:09
435
原创 多年前写的DataTable与实体类的转换，已放github
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍起因代码UnitTestGitHub本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，
2016-01-24 15:28:05
505
原创 我是怎么处理其他网站恶意爬虫博客园的，希望大家喜欢（第二弹）
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍现象版权处理升级本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink
2016-01-24 15:28:00
304
原创 不同Framework下StringBuilder和String的性能对比，及不同Framework性能比（附Demo）
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto)写的，SourceLink阅读目录介绍环境搭建测试用例MSDN说明我的理解Demo下载本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。文章是哥(mephisto
2016-01-24 15:27:56
223
原创 我是怎么处理其他网站恶意爬虫博客园的，希望大家喜欢
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。阅读目录介绍现象版权处理本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。 介绍 今天才写了个随笔，然后不到一个小时就有个网站进行了爬虫，呵呵好速度，而已百度的搜索排名比博客园还高，不过我加了防伪处理，大家看
2016-01-24 15:27:51
444
原创 Windows服务调试小结（附Demo）
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。阅读目录介绍搭建环境调试方式Demo下载本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。 介绍 有时候不可避免的要建些Windows服务。既然写代码，就需要调试，由于这个东西搞的人不多，每个人调试的方法
2016-01-24 15:27:47
325
原创 WCF绑定和行为在普通应用和SilverLight应用一些对比
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。阅读目录介绍绑定普通应用和SilverLight应用区别本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。 介绍 WCF是构建和运行互联系统的一系列技术的总称，它是建立在Web Service架构上的一个全新
2016-01-24 15:27:42
300
原创 用批处理来自动化项目编译及部署（附Demo）
阅读目录本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。介绍详细处理结论Demo下载 介绍 一个项目从立项开始，可能就已经根据公司的配置模板将目录，文档结构定义出来。有动态库，也有静态库，在没有专门的CMO的时候，往往组长，若干开发人员承担版本发布的工作。次工作即枯燥，又容易出错，那么怎么样
2016-01-24 15:27:37
2051
原创 .NET序列化的一点技巧（附Demo）
阅读目录介绍详细处理结论Demo下载 介绍 序列化是将对象状态转换为可保持或传输的形式的过程。序列化的补集是反序列化，后者将流转换为对象。这两个过程一起保证数据易于存储和传输。.NET Framework 提供了两个序列化技术：二进制序列化保持类型保真，这对于多次调用应用程序时保持对象状态非常有用。例如，通过将对象序列化到剪贴板，可在不同的
2016-01-24 15:27:33
361
原创 XAML中的特殊符号几空白字符处理
阅读目录介绍详细处理Demo下载 介绍 XAML标记语言是基于xml的，所以很多xml中的特殊符号在XAML也是需要处理的。 详细（取自msdn）字符Entity注释&(“and”符)&必须既用于特性值，又用于元素的内容。>（大于号字符）
2016-01-24 15:27:28
625
原创 Managed DirectX中的DirectShow应用（简单Demo及源码)
阅读目录介绍准备工作环境搭建简单Demo显示效果其他Demo下载 介绍 DirectX是Microsoft开发的基于Windows平台的一组API，它是为高速的实时动画渲染、交互式音乐和环境音效等高要求应用开发服务的。 而Managed DirectX 实质上是对DirectX进行了一个轻量级的封装，Microsoft在2003年10月初发
2016-01-24 15:27:24
292
原创 含有SilverLight项目的代码重用
很多时候，我们工程中不只是有SilverLight项目，然而我们想把其他的项目中的工具类，或者实体类复用到SilverLight项目中时，会发现SilverLight项目无法使用。这是个很普遍的现象。 在看GalaSoft.MvvmLight 这个开源项目的时候，我们会发现他有很多共用的类，下面就上图来看下高人们怎么处理的。 处理
2016-01-24 15:27:21
357
原创 Oracle Data Provider for .NET
官方地址：http://www.oracle.com/technetwork/topics/dotnet/index-085163.html 终于有正式版了。不用装客户端，又小，确实好。
2016-01-24 15:27:17
323
原创 IP地址（IPv4）/IPv6地址的正则表达式
原地址:http://pfeishao.blog.163.com/blog/static/18162337020112113130453/Pv4地址正则表达式：^((25[0-5]|2[0-4]\d|[01]?\d\d?)\.){3}(25[0-5]|2[0-4]\d|[01]?\d\d?)$测试环境：Javascript/.Net/C++/JAVA特点：匹配IPv4地址IPv6地址正则表达式
2016-01-24 15:27:12
2017
原创 Silverlight 调用自托管的wcf 报跨域异常的处理
Sileverlight很多时候需要通过wcf和后台，程序进行交互。如果 iis was托管还好，极端的遇到自托管的程序，console,windowsservice,winform,wpf等，就会出现跨域问题。网上很多解决方式。俺在以下博文基础上又总结了点。 以下博文可以先学习下： http://blog.youkuaiyun.com/boyhxy/article/details/52241
2016-01-24 15:27:07
275
原创 关于程序中使用相对路径的小技巧
本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，并给出原文链接，谢谢合作。 很多程序里使用了相对路径，当然，有时候可能不起作用，找不到相对路径。这得从快捷方式说起。快捷方式里有个“起始位置” 这个“起始位置”就是程序运行里的相对路径。直接从程序启动，该程序当前路径就是相对路径。 本文版权归mephisto和博客园共有，欢迎转载，但须保留此段声明，
2016-01-24 15:27:03
677
原创 随机生成数
public string RandomNum(int n) { string strchar = "0,1,2,3,4,5,6,7,8,9,a,b,c,d,e,f,g,h,i,j,k,l,m,n,o,p,q,r,s,t,u,v,w,x,y,z"; string[] VcArray = strchar.Split(','); stri
2016-01-24 15:26:58
273
原创 电话号码正则表达式
电话号码正则表达式在做项目时常常用到判断电话号码的正则表达式，写了一个，可验证如下27种格式：1108888888888888888888888-12388888888-234350871-8888888-123023-88888888-2343586-0871-8888888-1238888888_12388888888_234350871_8888888_123023_888888
2016-01-24 15:26:54
445
《谁说菜鸟不会数据分析》
2015-11-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人