大数据学习
关注
分享
扫一扫
山百草
如有错误请评论指正
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
PyCharm导入可运行的自定义模块出现报错提示问题
Pycharm在导入自定义的模块时有红色报错提示,但运行时是正常的,提示错误信息:No module named test1 less... (Ctrl+F1)Inspection info: This inspection detects names that should resolve but don't. Due to dynamic dispatch and duck typin...原创 2019-11-29 01:45:30 · 2012 阅读 · 0 评论 -
Pycharm在创建新的工程时出现"Failed to Create Interpreter"
我遇到一个问题Pycharm在创建工程时,使用Anaconda自带的base(python=3.7)可以正常创建,但是用我自己的环境(envs/python37/python=3.7)的时候就出现下面的问题 : Executed command: D:\Program Files\JetBrains\Pycharm 2018.3.5\helper\packaging_tools.py list E...原创 2019-06-12 22:41:42 · 53313 阅读 · 6 评论 -
SeacureCRT突然连接不上虚拟机的Linux系统的问题
问题描述:前一天晚上使用SeacureCRT连接我的虚拟机的时候还是正常的,但是今天早上打开电脑想再次连接虚拟机的时候发现根本连不上,这个问题以前没有出现过,我也可以确定自己的电脑包括虚拟机什么都没有动,于是我上网百度了一下相关的博客,这位老哥的解决方法给我提供了一个很好的思路,如果有类似情况的小伙伴们可以参考一下,博主地址:secureCRT无法连接centos7解决但是,我的Lin...原创 2019-05-25 11:24:56 · 1065 阅读 · 0 评论 -
HMM与Viterbi算法之间的关系以及Viterbi算法如何能够解决分词问题
最近在学习Viterbi算法的过程中遇到一个很棘手的问题,总是搞不清Viterbi算法在实际应用中到底起到了一个什么作用,这让我心烦不已,好在这位老哥的这篇实例文章给了我极大的帮助,在此感谢一下,也帮转一下,希望能够帮助更多的朋友.(原)https://blog.youkuaiyun.com/jiangzhenkang/article/details/84555947我认真阅读了这篇文章,发现这位老哥...转载 2019-04-02 23:41:07 · 322 阅读 · 0 评论 -
如何在Python中引用zookeeper的py库
(转)https://blog.youkuaiyun.com/ubuntu64fan/article/details/51076950这位老哥在博客中清楚的描述了应该如何操作,但是我需要在他的基础之上简化一下安装,当你安装完c语言的执行命令的时候就可以结束后续的步骤了,后面可以按照我的方法继续配置到了上面这一步就可以了,下面开始通过之前安装的Anaconda来帮你做后续的工作为了便于操作,和简...原创 2019-03-09 00:18:45 · 750 阅读 · 3 评论 -
遇到的MAVEN各种问题以及解决方案
此贴总结各种错误。总结的多了之后会加以分类。 1、解决Maven项目pom.xml文件报xxx\target\classes\META-INF\MANIFEST.MF (系统找不到指定的路径)问题：（只需简单地clean all projects）http://www.cnblogs.com/zhfei/p/5286827.html2、(1)Failed to execute go...转载 2019-02-12 22:54:48 · 8757 阅读 · 0 评论 -
大数据环境搭建之安装Hive以及组件Mariadb(MySQL)
我们在搭建大数据学习环境的时候需要搭建组件Hive以及MySQL(MariaDB)的数据库,Hive的本质就是一个MR的计算框架,它是将SQL语句的代码转化为MR的方式去执行的.我们的元数据是存放在MySQL(MariaDB)中的.而实际的数据是存放在HDFS上的,实现了数据的解耦.首先,安装MariaDB,我们是用yum的方式可以直接安装MariaDB的数据库,CentOS7.x对MySQL...原创 2019-02-06 00:56:02 · 1712 阅读 · 1 评论 -
大数据时代--windows下spark的安装与配置教程(转)
作为一个大数据的小白(Hadoop / Spark / .....)花了两天时间在自己的Win10电脑上安装本地的Spark环境,但是报了很多错,如下图这样的错误??(借用一下网友的错误,我的错误在修改过程中懒得还原了,总之你们遇到的错误和没遇到的错误我都遇到了,笑/cry)D:\hadoop-2.6.0\bin>spark-shelllog4j:WARN No appe...翻译 2019-01-22 23:29:12 · 784 阅读 · 0 评论 -
Linux服务器(主机)配置SSH互信---Warning: Permanently added 'slave2,***' (ECDSA) to the list of known hosts警告
聊聊自己遇到的神坑,实在是哭笑不得,现将其理成笔记发布在博客上以供需要的小伙伴们参考The authenticity of host 'slave2 (192.168.***)' can't be established.ECDSA key fingerprint is SHA256:Jax0HcY18c6EUe9S7BhwvmY02S86nqg5/j8fcV39WxE.ECDSA k...原创 2019-01-20 19:12:53 · 57840 阅读 · 2 评论 -
如何解决Yarn管理页面的ApplicationHistory / History无法跳转到指定页面的问题
在介绍问题之前我先将自己搭建的大数据机器环境介绍一下:这里我是用VM-version12虚拟出了三台集群机器,分别是master --> ip:192.168.153.10, slave1 --> ip:192.168.153.11, slave2 --> 190.168.153.12；在这三台机器上我分别搭建了Hadoop2.x的环境jdk1.8.0_172 等工具。之前我...原创 2019-01-10 16:18:23 · 6097 阅读 · 3 评论