- 博客(61)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Pycharm 搭建运行 SpartkStreaming +kafka 项目
1. 版本Python 3.5spark-1.6.0-bin-hadoop2.4，hadoop-2.6.5参考https://blog.youkuaiyun.com/lxy6520177/article/details/936344882.SpartkStreaming +kafka 需要导入 spark-streaming-kafka-assembly_2.10-1.6.0....
2019-07-01 14:19:24
1501
原创 Pycharm环境部署pyspark 步骤
1.下载并安装 spark-1.6.0-bin-hadoop2.4， hadoop-2.6.5同时添加相应的环境变量 HADOOP_HOME path 等2. Pycharm 配置 configurations 设置 环境变量 SPARK_HOME PYTHONPATH3.把spark的python支持包复制到相应的路径中，即在安装python 中 环境的...
2019-06-25 17:25:29
3389
转载 Linux下编译安装python3
文章转载于 https://www.cnblogs.com/freeweb/p/5181764.html Linux下大部分系统默认自带python2.x的版本，最常见的是python2.6或python2.7版本，默认的python被系统很多程序所依赖，比如centos下的yum就是python2写的，所以默认版本不要轻易删除，否则会有一些问题，如果需要使用最新的Python3那么我们可以编...
2019-06-15 10:44:14
189
转载 Zookeeper的ZAB协议与Paxos协议区别
摘要 一、联系1. 两者构建的系统都有一个Leader角色，Leader进程负责协调多个Follower进程的运行2. Leader进程都会等待超过半数的Follower进程做出正确的分亏后，才会将一个提案进行提交3. 在ZAB协议中每个Proposal中都包含一个epoch值，用来代表当前的Leader周期...
2019-06-14 17:22:38
3005
转载 HADOOP高可用机制
HA运作机制什么是HAHADOOP如何实现HAHDFS-HA详解HA集群搭建 目标：掌握分布式系统中HA机制的思想掌握HADOOP内置HA的运作机制掌握HADOOP2.x的HA集群机制配置 &nb...
2019-06-13 11:16:44
158
转载 ubuntu与centos的对比和选择
一、分别介绍 CentOS（Community ENTerprise Operating System）是Linux发行版之一，它是来自于Red Hat Enterprise Linux依照开放源代码规定释出的源代码所编译而...
2019-06-12 11:40:36
24754
原创 从头开始搭建 hadoop
所有参考 网址 均给出链接 请自行点击主要参考史上最详细的Hadoop环境搭建https://blog.youkuaiyun.com/hliq5399/article/details/78193113第一部分：Linux环境安装Hadoop是运行在Linux，虽然借助工具也可以运行在Windows上，但是建议还是运行在Linux系统上，第一部分介绍Linux环境的安装、配置、Java JD...
2019-06-11 13:26:32
336
转载 contentresovle
package veryedu.cls9.lession8.contentresovle;public class BookDBMetaData {public static final String AUTHORITY="veryedu.cls9.lession8.provider.mybookprovider";public static final Stri
2014-01-07 23:43:27
519
转载 contentProvider
package veryedu.cls9.lession8.contentprovider;import veryedu.lession8.database2.BookDao;import veryedu.lession8.database2.entity.Book;import android.os.Bundle;import android.app.Activity;
2014-01-07 23:41:55
422
转载 intent1
package veryedu.cls9.lession10.intent;import java.net.URI;import android.net.Uri;import android.os.Bundle;import android.app.Activity;import android.content.ComponentName;import an
2014-01-07 23:37:08
477
转载 intent
package veryedu.cls9.lession10.extra;import android.os.Bundle;import android.app.Activity;import android.content.Intent;import android.view.Menu;import android.view.View;public cla
2014-01-07 23:35:25
430
转载 Listview 2
res/layout/activity_main.xml xmlns:tools="http://schemas.android.com/tools" android:layout_width="match_parent" android:layout_height="match_parent" android:orientation="vertic
2013-12-31 01:36:47
449
转载 ListView
package veryedu.cls9.lession4.listview;import android.os.Bundle;import android.app.Activity;import android.content.Intent;import android.view.Menu;import android.view.View;public c
2013-12-31 01:32:56
499
转载 JSF的URL扩展 PrettyFaces
PrettyFaces是一个JSF1.2和JSF2.0的扩展，用来创建便于书签收藏、漂亮的网址。 PrettyFaces优雅的解决了这个问题，包括诸如功能：网页装载行动，无缝的跟faces的导航整合，动态视图的ID分配和管理参数分析，无需配置，兼容其他JSF框架。配置示例： xmlns="http://ocpsoft.com/prettyfaces-xsd" xmlns:x
2013-10-21 13:09:07
765
转载 JSF配置常用说明
http://www.itzhai.com/jsf-notes-jsf-configuration-file-configuration-instructions-and-common-elements.html传统MVC框架的简化流程图： 所有的Web应用都是基于请求/响应架构的，虽然说JSF不是基于请求/响应的，而是以事件响应机制来进行通信的，可以将视图页面的UI组
2013-10-18 12:55:19
655
转载 JSF web.xml配置 .
jsfserverservletcomponentsresourcesencodinghttp://java.sun.com/xml/ns/javaee"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"xsi:schemaLocation="http://java.sun.com/xml/ns/javaeehtt
2013-10-18 12:54:42
1360
转载 JSF-IDE（eclipse插件）比较 .
eclipse插件jsfeclipsejspmyeclipse文本编辑JSF-IDE（eclipse插件）比较 Plug-In特性ExadelMyEclipse全局角度针对J2EE MVC架构的IDE工具，目前支持JSF、Shale、Struts框架。针对J2EE架构的End t
2013-10-18 12:51:35
2137
转载 《威博文件管理系统》从JSF1.2升级到JSF2的过程
jsfrichfacesjavaeejavajbosstomcat随着JavaEE6规范的推出，计划把《威博文件管理系统》迁移到JavaEE6的基础架构上，在做完《威博文件管理系统》3.1.1版后，决定首先进行，JSF1.2到JSF2的升级迁移，下面就是具体过程： 1、首先确保web.xml的版本如下： Java代码 version="
2013-10-18 12:43:34
1331
转载 JSF中的columnClasses和rowClasses样式类
JSF的标准HTML标签中（Standard HTML Tags）有h:panelGrid、h:dataTable，即实现HTML中的table标签功能。 h:panelGrid、h:dataTable都有两个特殊的CSS样式属性，columnClasses（列样式类）和rowClasses（行样式类），它们不单单是加载一个CSS样式，而是加载一个CSS样式类，并且循环这个样式类，从而丰富了
2013-08-15 23:14:28
3475
转载 eclipse debug (调试) 学习心得
eclipse debug (调试) 学习心得进入debug模式：1、设置断点2、启动servers端的debug模式3、运行程序，在后台遇到断点时，进入debug调试状态=============================作用域 功能 快捷键 全局 单步返回 F7 全局 单步跳过 F6 全局 单步跳入 F5 全局 单步跳入选择
2013-08-09 00:06:33
391
原创 Java JFrame 设计视图&n…
JavaJFrame可以实现本地实例化窗口，通过向JFrame添加各种控件，实现各种相应的功能。 一、创建窗口实例 JFrame myFrame = new JFrame(); 二、设置JFrame的各种属性 myFrame.setLayout(new BorderLayout());---设置窗口中组件的排列方式 myFrame.setTitle("窗口标题")
2013-08-08 23:59:22
680
原创 tarjan算法讲解
具体算法介绍 参考 http://www.byvoid.com/blog/scc-tarjan/首先明确几个概念。强连通图。在一个强连通图中，任意两个点都通过一定路径互相连通。比如图一是一个强连通图，而图二不是。因为没有一条路使得点4到达点1、2或3。强连通分量。在一个非强连通图中极大的强连通子图就是该图的强连通分量。比如图三中子图{1,2,3,5}是一个强连通分量，子图{4}是一个强
2013-08-08 23:59:20
1647
原创 hdu 1269 迷宫城堡&nbsp…
//hdu 1269 迷宫城堡 tarjan算法求极大连通子图#include#include#includeusing namespace std;#define max 11000vector V[max];int n,m,top,index,ans;int instack[max],stack[max],visit[max];int dfn[max],low[max];v
2013-08-08 23:59:17
488
原创 All Your Base 模拟题
2011 ACM ICPC SOUTHCENTRALUSA REGIONALPROGRAMMINGCONTEST 2 - All Your BasePremise: Given a specification for a “base” (well, actually a mixedradix number system), take in
2013-08-08 23:59:15
478
原创 HDU 3901 Wildcard AC主动机通配符…
http://acm.hdu.edu.cn/showproblem.php?pid=3901 题目大意:两个长度不超过100000的字符串, 一个是带有通配符?和*的模式串,问能否匹配. 通配符不超过10个. 解题思路：首先由'*'字符，将模式串分为若干子串。同时对 首尾是否 含有'*' 字符进行特判。在匹配文本中 这些若干子串的匹配必须满足 下一段子串 的文本匹配开始点，为上一段
2013-08-08 23:59:13
645
原创 Hdu 2457 DNA repair (字符串_AC自…
http://acm.hdu.edu.cn/showproblem.php?pid=2457题目的大意：给定n个危险DNA序列，再给一段长度长为L的DNA序列S，DNA序列S中可能包含危险DNA序列，可以改变S中的字符，改变一个算一次操作，问最少操作几次可使S不含危险DNA序列并输出，如果怎么操作都会含有危险DNA序列输出-1。 解题思路：采用AC自动机＋dp。想法比较创新，用给定的n
2013-08-08 23:59:11
416
原创 AC自动机 算法 及模板
算法的详细讲解，请参考http://www.cppblog.com/mythit/archive/2009/04/21/80633.htmlhttp://www.cnblogs.com/destinydesigner/archive/2009/10/15/1584191.html 总结性讲解推荐 AC自动机算法的 模板题 hdu 2222 1.字典树Trie建立一个字典树，作用在于压
2013-08-08 23:59:09
427
原创 字符串 之字典树 算法
字典树（trie树）简介Trie树|字典树的简介Trie,又称字典树、单词查找树,是一种树形结构，用于保存大量的字符串，其核心思想是空间换时间。它的优点是：利用字符串的公共前缀来节约存储空间。相对来说,Trie树是一种比较简单的数据结构.理解起来比较简单,正所谓简单的东西也得付出代价.故Trie树也有它的缺点,Trie树的内存消耗非常大.当然,或许用左儿子右兄弟的方法建树的话,可能会好点.
2013-08-08 23:59:07
553
原创 hdu 1806 Frequent values 线段…
//题意： 给n个数，已经按从大到小顺序排列好，一共有q个询问，每次询问一个区间，问这个区间中出现次数最多的数是什么。 题目数据范围： 数的个数，1 <= n 询问次数，1 <= q 每个数的大小，-100000思路 采用 线段树 求解。每个线段树的节点 保存此区间出现最多的次数，以及出现的数字。需要解决的问题 在于两个子节点信息如何合并到父节点有二
2013-08-08 23:59:05
478
原创 匈牙利算法 二分图
注 此文 转载于 http://www.cnblogs.com/Mu-Tou/archive/2011/08/11/2135405.html 要学习匈牙利算法先要懂得二部图的各种概念。。下面给出由o(∩_∩)o MiYu总结的一般性概念，这些概念很重要，一定要懂。。二分图的基本概念:( 意思就是所有的点分成了2个集合 x, y. 每个集合中的顶点相互间没有边)一个无向图 G =
2013-08-08 23:59:02
494
转载 kmp算法
原文地址：kmp算法作者：子贤的快乐生活 KMP算法在介绍KMP算法之前，先介绍一下BF算法。一.BF算法BF算法是普通的模式匹配算法，BF算法的思想就是将目标串S的第一个字符与模式串P的第一个字符进行匹配，若相等，则继续比较S的第二个字符和P的第二个字符；若不相等，则比较S的第二个字符和P的第一个字符，依次比较下去，直到得出最后的匹配结果。举例说明：S: ababcababaP:
2013-08-08 23:59:00
399
转载 背包问题九讲（转)
原文地址：背包问题九讲（转)作者：heitiantan背包问题九讲第一讲01背包问题第二讲完全背包问题第三讲多重背包问题第四讲混合三种背包问题第五讲二维费用的背包问题第六讲分组的背包问题第七讲有依赖的背包问题第八讲泛化物品第九讲背包问题问法的变化附录：背包问题的搜索解法目录第一讲 01背包问题这是最基本的背包问题，每个物品最多只能放一次。第二讲 完
2013-08-08 23:58:58
540
原创 ZOJ 2864 多条最短路径
好吧，终于可以缓解下这两天的想砍人的情绪了。开始错了之后就跟别人讨论——以为是数据变态（后来某某学长的一句话更是令我们崩溃）：这个小偷能瞬间移动 or 让时光倒流....（有点科幻了）。纠结了半天发先不是这个问题，因为标程都跑不出这些数据来。最后发现是没加代码中的“红色部分”了（去掉这个，pcnt数组就乱了，除了起点之外，各个点的pcnt都会在求最短路径里被初始化）：我喜欢偷懒，喜欢用一
2013-08-08 23:58:54
508
原创 最短路径算法—Bellman-Ford(贝尔曼…
转载相关文章：1.Dijkstra算法：http://www.wutianqi.com/?p=18902.Floyd算法：http://www.wutianqi.com/?p=1903Dijkstra算法是处理单源最短路径的有效算法，但它局限于边的权值非负的情况，若图中出现权值为负的边，Dijkstra算法就会失效，求出的最短路径就可能是错的。这时候，就需要使用其他的算法来
2013-08-08 23:58:52
682
原创 hdu3790-----单源最短路径
最短路径问题TimeLimit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K(Java/Others)Total Submission(s): 2560 Accepted Submission(s):808Problem Description给你n个点，m条无向边，每条边都有长度d和花费p，给你起点s终点t，要求
2013-08-08 23:58:49
425
原创 hdu 1690 Bus System 最短路 floyd
Bus SystemTimeLimit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K(Java/Others)Total Submission(s): 3305 Accepted Submission(s):822Problem DescriptionBecause of the huge population of
2013-08-08 23:58:47
521
原创 hdu 2544 最短路
最短路TimeLimit: 5000/1000 MS (Java/Others) Memory Limit: 32768/32768 K(Java/Others)Total Submission(s): 10185 Accepted Submission(s):4354Problem Description在每年的校赛里，所有进入决赛的同学都会获得一件很漂亮的t-shirt。但是
2013-08-08 23:58:45
467
原创 floyd 最短路算法
Floyd最短路径算法（转）在图论中经常会遇到这样的问题，在一个有向图里，求出任意两个节点之间的最短距离。我们在离散数学、数据结构课上都遇到过这个问题，在计算机网络里介绍网络层的时候好像也遇到过这个问题，记不请了...但是书本上一律采取的是Dijkstra算法，通过Dijkstra算法可以求出单源最短路径，然后逐个节点利用Dijkstra算法就可以了。不过在这里想换换口味，采取Robert
2013-08-08 23:58:43
436
原创 Just a Hook
Just a HookTimeLimit: 4000/2000 MS (Java/Others) Memory Limit: 32768/32768 K(Java/Others)Total Submission(s): 7206 Accepted Submission(s):3451Problem DescriptionIn the game of DotA, Pudge’s me
2013-08-08 23:58:41
494
原创 Balanced Lineup
DescriptionFor the daily milking, Farmer John's N cows (1 ≤ N ≤ 50,000)always line up in the same order. One day Farmer John decides toorganize a game of Ultimate Frisbee with some of the cows. To
2013-08-08 23:58:39
381
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人