- 博客(2)
- 收藏
- 关注
RSS订阅原创 构建ML流水线
以上本质是一个Estimator，在fit()方法运行后，将产生一个PipelineModel,是一个Transformer。#调用之前训练好的PipelineModel的transform()方法，让测试数据顺序通过拟合的流水线，生成预测结果。#定义Pipeline中的各个流水线阶段PipelineStage（转换器和评估器）#按照具体的处理逻辑有序的组织PipelineStage并创建一个Pipeline。给出6-10个句子，作为训练数据，判断依据是有你名字打上标签1，否则打上标签0。
2023-12-05 18:51:21
57
1
原创 Caused by: java.lang.ClassNotFoundException: org.apache.spark.sql.sources.v2.StreamWriteSupport
之所以会报标题错误是因为最后一个代码的packages版本号不对应。Kafka源是流处理最理想的输入源，因为它可以保证实时和容错。以下是一个spark streaming对Kafka源的使用。
2023-11-30 20:59:38
330
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人