- 博客(10)
- 收藏
- 关注
原创 github push失败 invalid authentication data connection timeout
换成了google的dns服务 主dns 8.8.8.8, 副dns 8.8.4.4,没卵用,解析出来还是20.205.243.166这个IP,难不成谷歌的dns也被污染了?网上很多改host的方法都不太想用,感觉没解决根本问题,只是一个workaround。试了下cloudfare的dns服务 1.1.1.1,这个可以。超时,20.205.243.166解析出这个IP。刷新dns缓存也没有用,估计dns被污染了。今天访问github又又又又出网络问题了。
2023-08-21 11:42:24
199
原创 [Scala源码] Scala与Java间集合类型转换的性能分析
关于隐式转换方法,个人的理解就是:提供了一系列类型间的转换供编译器选择。当编译不成功时,编译器会去找合适的隐式方法将类型进行适当的转换从而使得编译通过。在代码中经常会涉及scala和java集合的相互转换,担心其会产生性能上的问题,今天就来看看源码分析一下转换过程带来的代价。: 这里不是传了个方法(有冒号),而是是名调用(call-by-name), 这个参数。,并不会对性能产生什么影响,只是做了个适配/包装(实现java接口的方法),并不存在集。由源码可以看出:对于列表类型的集合类型转换,时间复杂度为。
2023-08-02 23:47:42
304
原创 Win11 host配置 命令行能ping通 浏览器不生效
问题描述之前项目代码都能跑动,但是在打开Yarn界面的时候用host映射就显示正常去ping/访问ip地址是通的这样就很不方便 因为Yarn中Flink任务的Web连接都是默认用host映射名的 每次都需要改解决方案设置 => 网络和Internet => 代理 => 手动设置代理 => 关闭...
2022-03-17 10:19:05
4914
原创 Hive MetaStore java.lang.NoClassDefFoundError: com/facebook/fb303/FacebookService$Iface
问题描述Flink集成Iceberg时 用到HiveCatalog 依赖于Hive MetaStoreFlink任务打包上传到集群运行时 报错类找不到java.lang.NoClassDefFoundError: com/facebook/fb303/FacebookService$Iface具体报错信息如下:org.apache.flink.client.program.ProgramInvocationException: The main method caused an error: Fa
2022-03-15 22:01:32
5927
原创 Iceberg x Flink java.lang.NoClassDefFoundError: org/apache/avro/Logical
java.lang.NoClassDefFoundError: org/apache/avro/Logical导致程序终止
2022-03-15 10:52:11
2941
原创 关于hadoop副本数大于节点数时的存储问题
关于hadoop副本数大于节点数时的存储问题测试1.调整hdfs-site.xml文件的副本参数3.查看实际副本数总结测试1.调整hdfs-site.xml文件的副本参数副本数设置为5### 2.重启hadoop集群 上传文件 web端查看信息三个节点activeweb端显示有5个副本真的有五个吗?3.查看实际副本数使用指令 hdfs fsck /user/da
2021-05-24 20:18:57
467
4
原创 快捷键备忘
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档快捷键备忘一、IDEA快捷键一、IDEA快捷键Ctrl + Alt + B 查看抽象方法的实现方法Shift + Enter 创建新的一行、光标从上一行任意位置切换到下一行Ctrl + Y 删除当前行Ctrl + D 复制光标所在行 或 复制选择内容,并把复制内容插入光标位置下面Shift + F6 改名Ctrl + Alt +L 整理代码格式Ctrl + H 查看类结构图...
2021-05-20 21:11:41
132
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人