大_G-优快云博客

原创 Anaconda配置清华镜像源

控制台接执行conda config --set show_channel_urls yes生成.condarc文件这个文件在用户目录下，然后用文本编辑器打开，用下面的内容替换之channels: - defaultsshow_channel_urls: truedefault_channels: - https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main - https://mirrors.tuna.tsinghua

2021-11-06 10:03:32 881

原创 tail 命令 tail -f 和 tail -F 的区别

ail 命令可用于查看文件的内容 tail notes.log # 默认显示最后 10 行 tail -n 100 notes.log #显示最后100行数据 tail -n +100 notes.log #显示从第100行开始，直到最后行的数据 tail -f 等同于--follow=descriptor，根据文件描述符进行追踪，当文件改名或被删除，追踪停止 tail -f notes.log 按下（Ctrl+C）组合键停止追踪 ..

2021-10-31 16:40:28 4221

原创 Hive 调优

HIve调优1、Fetch抓取机制我们在刚开始学习hive的时候,都知道hive可以降低程序员的学习成本和开发成本,具体表现就在于可以将SQL语句转换成MapReduce程序运行。但是Hive中对某些情况的查询可以不必使用MapReduce计算。例如：SELECT * FROM employees,在这种情况下，Hive可以简单地读取employee对应的存储目录下的文件，然后输出查询结果到控制台。在hive-default.xml文件中hive.fetch.task.conversion默认是

2021-10-22 17:54:45 508

原创 Hive和Mysql区别对比

Hive和Mysql区别对比角度HiveMysql外表、形式模型、语法角度两者类似两者类似存储数据角度Hive的存储依赖HDFSmysql 存储地数据放在本地文件系统数据更新角度Hive 不支持数据的更新，只能读，不能写Mysql 支持文件的更新索引的角度Hive 在3.0版本之后，删除了索引的功能Mysql 支持索引，适合在线在线查询数据执行的角度Hive底层依赖的是MR，并行计算，延迟高Mysql底层就是它本身的执行引擎，延迟低扩

2021-10-16 20:59:21 899

原创 Python练习,求 1000 以内的所有回文素数

# 任意的整数，当从左向右读与从右向左读是相同的，且为素数时，称为回文素数。求 1000 以内的所有回文素数。# 素数一般指质数。质数是指在大于1的自然数中，除了1和它本身以外不再有其他因数的自然数def fun(): alist = [] for i in range(1,1000): # range 前闭后开 for j in range (2,i): if i % j == 0: # 如果这个数除了1和本身还有其他的因数,则为质数.

2021-08-18 15:29:31 4496

原创 python练习, 打鱼晒网问题

如果一个渔夫从 2011 年 1 月 1 日开始每三天打一次渔，两天晒一次网，编程实现当输入 2011 1 月 1 日以后的任意一天，输出该渔夫是在打渔还是在晒网。import time# 判断是否闰年def leap(b): if ((b % 4 == 0) and (b % 100 != 0) or (b % 400 == 0)): return 1 else: return 0# 计算从2011-1-1 到查询的日期,之间的天数def .

2021-08-18 10:26:16 485