- 博客(40)
- 收藏
- 关注
转载 Jupyter Notebook 的快捷键
Jupyter Notebook 的快捷键Jupyter Notebook 有两种键盘输入模式。编辑模式,允许你往单元中键入代码或文本;这时的单元框线是绿色的。命令模式,键盘输入运行程序命令;这时的单元框线是灰色。命令模式 (按键 Esc 开启)Enter : 转入编辑模式Shift-Enter : 运行本单元,选中下个单元Ctrl-Enter : 运行本单元Alt-Enter : 运行本单元,在...
2018-06-04 14:45:39
180
转载 史上最详细的Hadoop环境搭建
前言Hadoop在大数据技术体系中的地位至关重要,Hadoop是大数据技术的基础,对Hadoop基础知识的掌握的扎实程度,会决定在大数据技术道路上走多远。这是一篇入门文章,Hadoop的学习方法很多,网上也有很多学习路线图。本文的思路是:以安装部署Apache Hadoop2.x版本为主线,来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安装不是目的,通过安装认识Hadoop才是...
2018-06-01 11:12:36
248
转载 Ubuntu终端常用的快捷键
Ubuntu中的许多操作在终端(Terminal)中十分的快捷,记住一些快捷键的操作更得心应手。在Ubuntu中打开终端的快捷键是Ctrl+Alt+T。其他的一些常用的快捷键如下:快捷键功能Tab自动补全Ctrl+a光标移动到开始位置Ctrl+e光标移动到最末尾Ctrl+k删除此处至末尾的所有内容Ctrl+u删除此处至开始的所有内容Ctrl+d删除当前字符Ctrl+h删除当前字符前一个字符Ctrl...
2018-05-30 17:11:27
239
转载 linux命令
常用指令ls 显示文件或目录 -l 列出文件详细信息l(list) -a 列出当前目录下所有文件及目录,包括隐藏的a(all)mkdir 创建目录 -p 创建目录,若无父目录,则创建p(parent)cd 切换目录touch
2017-12-19 10:23:55
199
转载 Hadoop Failed to set permissions of path 错误处理
nutch调试时出现的异常。Exception in thread "main" java.io.IOException: Failed to set permissions of path: \tmp\hadoop-Administrator\mapred\staging\Administrator-4954228\.staging to 0700 at org.apache.hadoo
2017-12-15 16:12:41
296
转载 Intellij IDEA 快捷键整理(TonyCody)
【常规】Ctrl+Shift + Enter,语句完成“!”,否定完成,输入表达式时按 “!”键Ctrl+E,最近的文件Ctrl+Shift+E,最近更改的文件Shift+Click,可以关闭文件Ctrl+[ OR ],可以跑到大括号的开头与结尾Ctrl+F12,可以显示当前文件的结构Ctrl+F7,可以查询当前元素在当前文件中的引用,然后按 F3 可以选择Ctrl+N,可以快速打开类Ct
2017-12-15 11:20:22
185
原创 OutputCollector
OutputCollector 由 Hadoop 框架提供, 负责收集 Mapper 和 Reducer 的输出数据,实现map或者reduce 函数时,只需要简单地将其输出的 对往 OutputCollector 中一丢即可,剩余的事框架自会帮你处理好。
2017-12-15 10:53:59
334
转载 StringTokenizer类的使用
StringTokenizer是一个用来分隔String的应用类,相当于VB的split函数。1.构造函数public StringTokenizer(String str)public StringTokenizer(String str, String delim)public StringTokenizer(String str, String delim, boolean
2017-12-15 10:50:05
177
转载 IntWritable详解
1.Hadoop数据类型如下图: 由上图的Writable层次结构图可以看到绝大多数的数据类型都实现了Writable、WritableComparable接口,在此先分析一下这两个接口情况。自顶下下逐步分析。Writable接口的定义如下:[java] view plain copy "font-family:SimSun;fon
2017-12-15 10:20:49
3493
转载 MapReduce代码实现2
Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前段时间在做MapReduce job 性能调优的工作,需要深入代码研究MapReduce的运行机制,这才对Shuffle探了个究竟。考虑到之前我在看相关资料而看不懂时很恼火,所以在这里
2017-12-07 19:42:16
196
转载 MapReduce代码实现1
三:MapReduce是一种分布式计算模型。Mapreduce框架有默认实现,程序员只需要覆盖map()和reduce()两个函数。MapReduce的执行流程1.Map Task (以一个入门例子的单词计数为例,两行一定行是hello word第二行是hello you中间是制表符) 1.1读取:框架调用InputFormat类的子类读取HDFS中文件数据
2017-12-07 19:41:13
974
转载 MapReduce工作原理图文详解
MapReduce工作原理图文详解前言:前段时间我们云计算团队一起学习了hadoop相关的知识,大家都积极地做了、学了很多东西,收获颇丰。可是开学后,大家都忙各自的事情,云计算方面的动静都不太大。呵呵~不过最近在胡老大的号召下,我们云计算团队重振旗鼓了,希望大伙仍高举“云在手,跟我走”的口号战斗下去。这篇博文就算是我们团队“重启云计算”的见证吧,也希望有更多优秀的文章出炉。汤帅,亮仔,
2017-12-05 11:40:48
194
转载 .net修改映射
百度前20页所说的基本都试过了,但是还是不行,先总结一下这20页所说的问题:关闭防火墙。 这一步很关键,但是并不能解决问题。卸载ipv6。 我也不知道这个到底在最终成功时起不起作用,反正我是卸载了,但是卸载之后还是不行。重装IIS。 这点我并没有做,因为网页直接访问127.0.0.1会弹出IIS7的界面,所以感觉应该不是这个的毛病,如果你只是想在局域网下的其他设备访问还可以尝试这个方法发布
2017-12-02 15:56:46
362
转载 idea快捷键
Ctrl+Shift + Enter,语句完成“!”,否定完成,输入表达式时按 “!”键Ctrl+E,最近的文件Ctrl+Shift+E,最近更改的文件Shift+Click,可以关闭文件Ctrl+[ OR ],可以跑到大括号的开头与结尾Ctrl+F12,可以显示当前文件的结构Ctrl+F7,可以查询当前元素在当前文件中的引用,然后按 F3 可以选择Ctrl+N,可
2017-12-02 10:53:36
157
转载 7个优秀的国内外移动端web框架
淘宝SUI Mobile框架官网地址:http://m.sui.taobao.org/SUI Mobile 是一套基于 Framework7 开发的UI库。它非常轻量、精美,只需要引入我们的CDN文件就可以使用,并且能兼容到 iOS 6.0+ 和 Android 4.0+,非常适合开发跨平台Web App。轻量的UI库SUI Mobile 非常轻量,核心库压缩Gzip后的J
2017-10-31 08:49:47
846
原创 微信授权登录,提示-2,用户取消
微信支付、分享、登陆说明1,查看appid是否配置(离线打包在AndroidManifest.xml配置,云打包在manifest.json配置)2,申请appid时所用证书签名与apk的签名证书必须一致3,申请appid时填写包名与打包时候所填写包名必须一致4,查看提示错误代码、信息5,使用IDE自带HBuilder调试HelloH5中支付模块是否能够成功6,对比客户端j
2017-10-26 15:30:51
2381
转载 [C#]Datatable和json互相转换操作
#region DataTable 转换为Json字符串实例方法/// /// GetClassTypeJosn 的摘要说明/// public class GetClassTypeJosn : IHttpHandler{ /// /// 文件名:DataTable 和Json 字符串互转 /// 版权所有:Copyright (C) Crea
2017-10-23 19:20:38
910
原创 个人找到的阿里巴巴java编译手册
之前看过阿里内部整理的Java开发手册文档,全篇读完以后,整理出一份觉得可能对大家有所帮助的信息~。1.POJO 类中布尔类型的变量,都不要加 is,否则部分框架解析会引起序列化错误。反例:定义为基本数据类型boolean isSuccess;的属性,它的方法也是isSuccess(),RPC 框架在反向解析的时候,“以为”对应的属性名称是 success,导致属性获取不到,进而抛出异
2017-10-14 11:35:27
348
原创 c# JavaScriptSerializer Deserialize 序列化json时 不区分大小写
C# JavaScriptSerializer Deserialize 序列化json时 不区分大小写
2017-10-13 10:19:29
2869
转载 C# 中对象与Json互转的方法整理笔记
前言 原先一直做CS的开发,对Json了解不多,最近转做BS后,才接触到了Json。作为后台与前端页面数据交互的基础,Json的地位非常重要,自然而然Json转换方法的重要性也不言面喻。最开始使用的是同事原来写好的对象转Json的方法,并没有什么问题,不过一次偶然的转换,让我发现这个方法的局限性。当时我尝试将一个包含List属性的对象转成Json,该对象的List属性中有若
2017-10-07 14:40:34
624
转载 winform 控件及其各个属性
1、常用属性(1)Name属性:用来获取或设置窗体的名称,在应用程序中可通过Name属性来引用窗体。(2) WindowState属性: 用来获取或设置窗体的窗口状态。 取值有三种: Normal (窗体正常显示)、Minimized(窗体以最小化形式显示)和 Maximized(窗体以最大化形式显示)。(3)StartPosition属性:用来获取或设置运行时窗体
2017-09-28 14:27:04
1793
转载 html5的localStorage的操作
在客户端存储数据(localStorage &sessionStorage )Html5 提供了两种在客户端存储数据的新方法: localStorage - 没有时间限制的数据存储 sessionStorage - 针对一个 session 的数据存储 之前,这些都是由 cookie 完成的。但是 cookie 不适合大量数据的存储,因为它们由每
2017-09-22 10:37:48
314
转载 html5手机开发cookie的用法总结
首先,如果不跨域,发送Ajax请求,例如:$( "#btn_login" ).on( "click", function( event ) { $.ajax({ type: "POST", url: serverURL + '/user', dataType: 'json',
2017-09-22 09:52:59
10155
转载 给产品经理讲技术:微信的openid和unionid
很想写这样的一篇扫盲贴,刚好利用端午小长假的时间,学堂君跟大家来聊聊微信的openid和unionid 。无论是产品经理、还是H5前端工程师、客户端前端开发人员、后端开发人员,只要进行微信开发就会跟openid和unionid打交道。特别是openid。有些时候,我们在微信里面玩一些H5小游戏或者是进行相关操作的时候,会出现下面的这个界面。这个界面是微信提供给企业开发授权的页面。是
2017-09-19 16:05:23
6417
转载 Quartz.NET 入门,带C#实例
概述Quartz.NET是一个开源的作业调度框架,非常适合在平时的工作中,定时轮询数据库同步,定时邮件通知,定时处理数据等。 Quartz.NET允许开发人员根据时间间隔(或天)来调度作业。它实现了作业和触发器的多对多关系,还能把多个作业与不同的触发器关联。整合了 Quartz.NET的应用程序可以重用来自不同事件的作业,还可以为一个事件组合多个作业。参考官方学习文档:http://w
2017-08-26 13:46:47
347
转载 C# Quartz作业调度配置
什么是Quartz Quartz是一个开源的作业调度框架,Quartz根据用户设定的时间规则来执行作业,使用场景:在平时的工作中,估计大多数都做过轮询调度的任务,比如定时轮询数据库同步,定时邮件通知、定时关闭网上商城的用户还未支付的订单等等。Quartz运用场景 作业场景:公司商城平台中客户下了订单但是超过半个小时未支付就要取消该订单 1) . 数据库中订单主表主要字段如下:
2017-08-26 10:42:44
1307
转载 Map/Reduce原理
Hadoop简介Hadoop就是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce,分布式文件系统HDFS,以及分布式数据库Hbase,同时Hadoop的相关项目也很丰富,包括ZooKeeper,Pig,Chukwa,Hive,Hbase,Mahout,flume等.这里详细分解这里面的概念让大家通过这篇文章了解到底是什么hadoop:
2017-08-25 11:07:22
264
转载 http帮助类
using System;using System.Collections.Generic;using System.Collections.Specialized;using System.IO;using System.Linq;using System.Net;using System.Text;namespace XX.Common.Http{
2017-08-13 09:25:43
345
原创 c# form开机隐藏在系统托盘
在初始化时候加 this.ShowInTaskbar = false; this.WindowState = FormWindowState.Minimized;
2017-08-08 17:38:12
346
原创 脚本新增元素绑定事件
delegate() 方法为指定的元素(属于被选元素的子元素)添加一个或多个事件处理程序,并规定当这些事件发生时运行的函数。使用 delegate() 方法的事件处理程序适用于当前或未来的元素(比如由脚本创建的新元素)。语法$(selector).delegate(childSelector,event,data,function)参数描述c
2017-07-27 14:07:07
214
转载 C#开发微信门户及应用(46)-基于Bootstrap的微信门户应用管理系统功能介绍
C#开发微信门户及应用(46)-基于Bootstrap的微信门户应用管理系统功能介绍在前面介绍很多的微信框架,基本上都采用EasyUI的界面来搭建的微信框架,如随笔《C#开发微信门户及应用(8)-微信门户应用管理系统功能介绍》介绍的一样,不过随着微信的H5应用越来越多,因此转换为更适合做H5页面应用框架的Bootstrap开发框架,本文介绍的整个微信模块都是基于Bootstrap的应用。
2017-07-26 10:53:09
1053
转载 Hadoop学习路线图
按照这个路线图来学习即可。 1、M. Tim Jones的三篇文章: 用Hadoop进行分布式数据处理第1部分(入门):http://www.ibm.com/developerworks/cn/linux/l-hadoop-1/index.html 用Hadoop进行分布式数据处理第2部分(进阶):http://www.ibm.com/developerworks/c
2017-07-22 14:38:23
300
转载 深入理解HTTP协议
http协议学习系列1. 基础概念篇1.1 介绍 HTTP是Hyper Text Transfer Protocol(超文本传输协议)的缩写。它的发展是万维网协会(World Wide Web Consortium)和Internet工作小组IETF(Internet Engineering Task Force)合作的结果,(他们)最终发布了一系列的RFC,RFC 1945定义
2017-06-24 23:50:12
572
转载 及事务四个特性
一.什么是事务 事务是应用程序中一系列严密的操作,所有操作必须成功完成,否则在每个操作中所作的所有更改都会被撤消。也就是事务具有原子性,一个事务中的一系列的操作要么全部成功,要么一个都不做。 事务的结束有两种,当事务中的所以步骤全部成功执行时,事务提交。如果其中一个步骤失败,将发生回滚操作,撤消撤消之前到事务开始时的所以操作。 二.事务的 ACID 事务具有四个特征:原子性( At
2017-06-20 14:33:12
229
转载 springMVC流程
springMVC 的工作原理和机制 工作原理上面的是springMVC的工作原理图:1、客户端发出一个http请求给web服务器,web服务器对http请求进行解析,如果匹配DispatcherServlet的请求映射路径(在web.xml中指定),web容器将请求转交给DispatcherServlet.2、DipatcherServlet接收到这个请求之后
2017-06-05 11:13:53
251
转载 HTTP Session和Cookie工作原理
session的工作原理 术语session 在我的经验里,session这个词被滥用的程度大概仅次于transaction,更加有趣的是transaction与session在某些语境下的含义是相同的。 session,中文经常翻译为会话,其本来的含义是指有始有终的一系列动作/消息,比如打电话时从拿起电话拨号到挂断电话这中间的一系列过程可以称之为一个session。有时候我们可以
2017-06-04 10:51:59
453
转载 post,get区别
GET和POST是HTTP请求的两种基本方法,要说它们的区别,接触过WEB开发的人都能说出一二。最直观的区别就是GET把参数包含在URL中,POST通过request body传递参数。你可能自己写过无数个GET和POST请求,或者已经看过很多权威网站总结出的他们的区别,你非常清楚知道什么时候该用什么。当你在面试中被问到这个问题,你的内心充满了自信和喜悦。你轻轻松松的给出了一个
2017-06-02 21:23:57
194
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人