- 博客(3)
- 收藏
- 关注
RSS订阅原创 Spark程序排错 DAG Scheduler StackOverflowError
Spark程序排错 DAG Scheduler StackOverflowError场景最近在工作中遇到新的数据ETL场景：数据部分在MySQL库中，主要的细节日志数据使用URL方式存储在阿里云OSS中存储，需要把所有日志数据读出来存储到数据仓库中（日志数据存储方式涉及到私有化部署一些问题导致）。代码如下val dataArr = logInfo .filter(row...
2019-08-13 15:28:40
174
原创 一篇文档搞定元数据管理
一篇文档搞定元数据管理欢迎使用Markdown编辑器好嗨呦你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。新的改变我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：全新的...
2019-07-10 17:24:51
667
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人