- 博客(25)
- 收藏
- 关注
原创 【Hadoop生态】一文部署:从Ubuntu到可视化
目前的问题是mysql安装好了8.0的 mysql-java-connector5.1.30的 hive也按好了,但是hive不能对mysql操作,升级hive新的元数据单元,报错不能连接mysql。先是从本地导入hdfs,再进入hive,处理后分析后,导入mysql,在复制到本地,在从本地导入hbase。sudo mysql -u root -p #登陆MySQL Shell界面。sudo mysql -u root -p #登陆MySQL Shell界面。hive #启动Hive。
2025-12-23 18:41:08
1027
原创 双系统蓝牙连接问题
本次双系统蓝牙连接冲突问题,是由于两个操作系统对同一蓝牙适配器初始化身份不一致所导致的。通过采取在Linux系统中彻底禁用蓝牙服务的“隔离控制”策略,成功解决了Windows系统下的蓝牙稳定性问题。蓝牙设备通过与主机蓝牙适配器的唯一MAC地址进行配对和识别。一个物理蓝牙适配器在两个操作系统中表现出两个不同的“逻辑身份”,导致信任关系破裂和连接状态不稳定。用户根据自身需求(主要使用Windows的蓝牙功能,对Linux下蓝牙无需求),选择了。该方案被成功执行,系统反馈表明蓝牙服务已被正确停止、禁用和屏蔽。
2025-11-14 19:59:03
891
原创 MySQL认证不一致问题
在数据迁移任务执行过程中,Java程序出现MySQL连接认证失败,但系统级sudo访问正常,暴露出MySQL用户认证机制的不一致性。
2025-11-13 10:51:22
121
原创 Hive到MySQL数据迁移全流程分析报告
在当前大数据平台架构中,需要将Hive数据仓库中经过ETL处理的用户行为数据导入MySQL关系型数据库,支撑业务系统的实时查询和报表展示需求。
2025-11-13 10:49:56
567
原创 第一次启动 HiveServer2 的尴尬之旅:从焦虑到顿悟的技术成长记
现在,当看到那个持续运行的 HiveServer2 进程时,我不再感到焦虑,而是安心 - 因为我知道,它正在那里忠实地等待我的数据查询请求。
2025-11-12 11:30:27
447
原创 HiveServer2 启动耗时分析:从架构设计到性能对比的深度解析
Hive CLI单一职责:只做命令行交互快速启动:按需加载,即时退出资源节俭:最小化内存和线程占用服务可用性:预先分配资源,减少运行时延迟并发处理:线程池、连接池预初始化稳定性优先:完整的错误处理和监控。
2025-11-12 11:09:36
1064
原创 【Hive解决】FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql
报错信息如下:Total MapReduce CPU Time Spent: 0 msec重启所有服务。
2025-11-10 10:51:21
388
原创 关于 schemaTool failed 报错【hive和mysql不连接】问题
【代码】关于 schemaTool failed 报错【hive和mysql不连接】问题。
2025-11-09 11:12:36
303
原创 安装程序向硬盘复制文件时遇到错误:[Errno 5]
这通常是由于 CD/DVD盘片或驱动器有问题,或是硬盘错误造成的。以下措施可能有助于解决问题:清洁盘片、低速刻录或者清洁 CD/DVD驱动器激光头 (清洁工具通常可在电子设备供应商处获得)、检查硬盘是否太旧而需要更换或者把硬盘放置到散热良好的环境中。如果你遇到报ERROR5,并且尝试几次是这样,过程没错的话,你可能跟我的问题一样。解决方法,换一个更好的u盘来做系统盘。
2025-11-07 22:02:06
90
原创 关于安装linux双系统 进入安装过程 报GRUB minal bash
关于找不到引导项,个人问题是:在发生问题后,返回windows查看系统u盘,发现格式化为NTFS的U盘不知道为什么变成exFAT,这是与电脑文件系统不匹配。解决:重新格式化为NTFS再复制iso,再进重启进入安装过程。
2025-11-07 21:59:36
191
原创 学计网有感
我看见,承载着重大新闻的数据包,像沉稳的流星群,划出坚定的轨迹;无数的心跳、无数的目光、无数的创造与遗忘,都在这里,被解构为最纯粹的光子,而后在某个终端,被重新组合成一个颤抖的瞬间,或一个璀璨的念头。它们时而聚散,如星云般旋绕——那是一张被共享的猫猫图片,正以光速在各大洲的心尖上传递着同一种柔软。有的正从我的屏幕中轻盈跃出,像初春的柳絮,带着某个远方清晨的问候;我看到的,是数字时代的星空,是人类全部情感与智慧在量子之海上的壮丽倒影。而我们每一个人,既是这片星空的凝望者,也是构成它的,那一缕温柔的光。
2025-10-22 17:04:16
211
原创 【强化模型的方法5】:模型合作
还可以优化模型团队,让每个模型对其他模型打分,最后将所有打分中最低的模型丢掉。当然,文献中完成的任务是比较低的,对于复杂的任务的完成性还是未知的。并且,多个模型讨论效果是更好的(左图是随着模型讨论个数的增多,性能的表现);这个问题不用担心,更应该担心的是模型很快就讨论结束,因为现阶段模型被质疑之后是很容易退缩的。,将模型A和模型B的结论喂给裁判模型,并询问这两个结果是否达成共识,如果达成共识,那么就结束讨论,否则就继续。或者,可以引入不同的语言模型扮演不用的角色,来完成某一个项目,就像一个公司一样。
2025-07-01 19:37:32
193
原创 强化语言模型使用的方法34-[ ToT Plungins ]
就比如下图中,对同样的数学问题,左边文字接龙,得到的结果是错误的,右边写了一段python代码,直接运行出结果,包正确的。,对于一个很新的资讯,询问GPT,得到的结果是乱回答的。语言模型在每次做文字接龙的时候产生的是一个不同字符的概率分布情况,虽然每次概率分布一样,但掷色子的结果是绝大概率不一样的。再比如,对于之前的谈过的问题:输出‘哈哈哈’100次,GPT-4有一个不同的解法,直接写了一段程式,给出运行结果。,中文称为检索增强生成。语言模型也有不擅长的事情,比如六位数的相乘,得到的结果是不正确的。
2025-06-30 20:24:59
274
原创 【Prompt Engineering】:不训练语言模型而强化模型的方法12
提供给模型教科书对模型表现的影响,这是是否给模型教科书,然后进行翻译任务的打分,总分6分。:表中数据为不同指标,模型评估的正确程度,越大越好,可见先解释再回答,正确率有很大提高。神奇咒语:在通常情况下可以提高语言模型的表现,但对有的模型可能不适用。提供不清楚的资讯:比如将几篇论文提供给它,让它画出一个表格等等等。,2023年有学者拿更强的模型来进行同样原理的实验,得到结论。情绪勒索,不同大语言模型的准确率都有一定程度的提升。,其对应的模型准确率,实验的模型是比较旧的。:对于更多神奇的咒语,可以见这篇。
2025-06-29 21:16:46
298
原创 今天的生成式人工智慧厉害在哪里(以ChatGPT为例)
在这里以ChatGPT为例来说明今天的生成式人工智慧到底有多么多才多艺,但要实先说明,ChatGPT只是语言模型的一种,而语言模型又只是生成式人工智慧的一种,不能说ChatGPT是生成式人工智慧的全部。其二,根据台湾的市名找到在地图上的地方,可以看到13的差别挺大的,而12差别优化了不少,是因为TAIDE模型阅读了大量中文资料,对地名有了更多的了解。我改变不了模型,但是我可以改变我自己:我们无法改变模型的函式,无法改变里面的参数,那么我们可以通过调整自己的问法,来得到更好的结果。然后通过自检,查找原因。
2025-06-28 20:27:42
453
原创 GPT4比GPT3.5强在哪里
的语言模型,将其生成的语言模型作用到文字接龙上(也就是另一个语言模型),如果得到的结果是好的,那就经常使用这个神奇咒语。就比如:下面这个图片中给出不同咒语GPT的准确率,如果没有咒语。用AI来找神奇咒语:这时候需要训练一个。当然也会有很多其他的找神奇咒语的方法。
2025-06-27 19:07:39
285
原创 ChatGPT背后的男人1
其很大的缺陷是不知道人类的需求是什么,只能从网络中学习,不知道回答问题,就像一个未见过的另一个维度。会有人类告诉它说,有人类问你问题,你不要说我不知道,不要乱写,其本质是以后有人问这个问题,需要将对应答案内容的符号的机率提高一些。增强式学习的概念 :对于一个问题,ChatGPT给你两个答案,当其中一个答案好过另一个答案时,这时候,模型需要将比较好的答案提高概率,比较差的答案降低机率。,可以想象为一个函式,里面非常的复杂,里面是一系列的矩阵乘法,并且里面含有数亿个参数,这也更增加了它的复杂性。
2025-06-26 22:27:44
643
原创 什么是生成式人工智慧
选项有限的情况下就不是生成式Ai**生成式人工智慧(Generative AI)**是一个目标,它是让机器产生的复杂的有结构的物件生成式人工智慧是人工智慧的一种,人工智慧是一个虚无缥缈的目标,每个人的想象都不太一样,而生成式人工智慧是众多可能的目标之一,它可以让机器产生一个复杂有结构的物件,比如文字图片一段声音而机器学习:是从资料里面找一个函数,一系列的方法自动找出参数模型是含有大量参数的函数找出大量未知参数的限制,称为训练资料。
2025-06-25 22:40:48
258
原创 素因子分解----“崩溃瞬间”
如题,关于素因子分解问题错误代码,避免跳坑!!!!优快云中有其他正确的文章,搜索框随便搜一下,就可以搜出正解。写了几个小时的思路,摸爬滚打,逐渐完善,但最后还是有问题,真是心有不甘啊,放这纪念一下!!给定某个正整数 N,求其素因子分解结果,即给出其因式分解表达式 N=p1k1⋅p2k2⋯pmkm。
2023-04-17 08:33:08
129
1
原创 计算到任意日期的总天数
编程序实现:输入任意一个日期的年、月、日的值,求出从公元1年1月1日到该日期前一年的年末总共有多少天,到该日期前一个月的月末总共有多少天,到这一天总共有多少天。假定从公元第一天开始,就实施格里高利历法。格里高利历法的置闰规则是400年97闰,也可以概括为:四闰百不闰,四百闰。
2023-04-15 23:55:16
1018
1
原创 统计不同数字字符出现次数
从键盘读入一行字符(约定:字符数≤127字节),统计并显示该行字符中10个数字字符各自出现的次数,没有出现的字符不显示。如果没有数字字符,则输出"None!
2023-04-15 00:07:05
652
1
空空如也
Objective-C 一个语句如何解读?
2023-04-04
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅