python（一）用kettle调python脚本实现将地址切分省.市，并将结果输出到数据库。

已于 2023-05-26 14:52:02 修改
阅读量1.1k 收藏 4
点赞数
文章标签： python 开发语言
于 2023-05-26 14:48:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_42227745/article/details/130885063
版权
本文档介绍了如何使用Python与Kettle配合处理Excel数据。首先，讲解了Python的安装及pip、openpyxl、cpca、xlrd和pymssql等包的安装过程。接着，详细阐述了编写Python脚本从Excel中提取省市区信息以及将内容写入数据库的方法。在Kettle部分，展示了整体job的执行流程，包括从数据库导出到Excel，Python脚本处理，再到数据回写数据库的步骤。最后，针对可能出现的xlrd错误给出了解决方案。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

一.安装python

用的是python3,在官网中下载

默认安装路径：C:\Users\Administrator\AppData\Local\Programs\Python\Python310

二.安装python 需要的包

1.安装pip

1.1方法一

1.进入python.exe所在的目录中的scipts中，我的是这个路径C:\Users\Administrator\AppData\Local\Programs\Python\Python310

双击pip 进行安装

pip3也需要安装一下

 1.2方法二：

win+R 输入cmd

敲命令行

①cdC:\Users\Administrator\AppData\Local\Programs\Python\Python310\Scripts

(python.exe所在目录下的Scripts)

②pip

③pip3

2.安装openpyxl cpca

①cd C:\Users\Administrator\AppData\Local\Programs\Python\Python310(python.exe所在目录)

②pip install openpyxl

③pip install cpca

用于:excle 将地址换成 省，市，区

3.安装xlrd 和pymssql

用于将Excel放到数据库里

最低0.47元/天 解锁文章
小刺猬.
关注
kettle从入门到精通 第六十三课 ETL之kettle kettle调用python脚本的两种方法
zhangjin1222的博客
05-25 966
此处是将python脚本暴露http服务接口，然后在kettle中使用http步骤进行调用。这里不在详细介绍，可以参考之前的http调用文章。kettle中不能直接调用python脚本，可以通过shell脚本和http进行调用pyton服务。最下面的参数可以设置传递给python脚本参数，如设置V1参数。也可以上一步骤的结果作为参数传递给python脚本。# 在这里编写Python脚本的主要逻辑。1、下面是一段简单的无参python脚本。6、下面是一段简单的带参python脚本。
kettle介绍-Step之Script Values/Mod(JavaScript 代码) 一
weixin_43398232的博客
04-15 1502
JavaScript 代码步骤提供了一个用户界面，用户可以编写 JavaScript 代码到脚本区，脚本区域中的每一行代码都会执行一次，该步骤具有两个窗格和一个表Step name：步骤的名称，在单一转换中，名称必须唯一：该步骤中创建的 JavaScript 脚本：插件内置常量，用于数据行流程控制- SKIP_TRANSFORMATION：从输入行集中排除当前行，然后继续处理下一行- ERROR_TRANSFORMATION：从输入行集中排除当前行，生成错误，并且不处理其余所有行。
kettle 调用python脚本
LIJIAN_A1的博客
11-02 1121
请注意，在Kettle中调用Python脚本时，需要确保系统上已经安装了Python，并且在环境变量中设置了Python解释器的路径。此外，如果Python脚本需要任何外部依赖项，也需要确保这些依赖项已经安装在你的系统上。
使用Kettle调用python脚本
最新发布
qq_42528026的博客
04-09 280
最近在摸索使用Kettl的使用，想要用kettl调用python脚本，结果网上的教程都比较复杂，其实操作很简单，新建一个作业（job）,选择【脚本】-->【shell】,在【脚本文件名】处选在要执行的脚本，在【工作路径】选择脚本所在的文件夹即可。
Kettle执行python脚本
大宇进阶之路的博客
11-20 9278
kettle的作业中有一个Shell组件，通过这个组件并选择好python环境，即可执行py文件，示例任务如下： 其中，工作路径选择python.exe的目录，脚本选择相应文件即可。 但是，执行后报错或者发现py文件没有被执行，是什么问题呢？ 原因是需要添加.py文件默认打开方式为python.exe。 添加方式： 控制面板->默认程序 ->按文件类型指定默认应用 选择.py对应的默认应用改为python，我的默认程序是pycharm PS：如果选择默认应该没出来Pyt..
kettle调用python的方法，etl这样也能用。
weixin_44228413的博客
02-22 1144
首先kettle调用python是无法直接调用的，我们可以通过创建ketle工作调用shell脚本，在从bat脚本中写bat脚本来调用python。工作路径填写python.exe所在路径，也就是python环境目录（我这是Anaconda数据分析常用的python环境）。可以通过下面的参数网python脚本里传参数，python需要调用sys模块（我这里没传）。bat脚本内容，前面写后边文件路径的执行程序也就是python的解释器路径。脚本文件名称就填写，编写得bat脚本的路径。
kettle调用python脚本
07-28
- *3* [python（一）用kettle调python脚本实现将地址切分省.市，并将结果输出到数据库。](https://blog.csdn.net/weixin_42227745/article/details/130885063)[target="_blank" data-report-click={"spm":"1018.2226...
浅测评DataX与Kettle
热门推荐
weixin_44411398的博客
05-12 1万+
浅测评DataX与Kettle 两者作为ETL的常用工具，实现数据从多个异构数据源加载到数据库或其他目标地址，是数据仓库建设和维护中的重要一环，也是工作量较大的一块。 DataX与DataX的安装与使用这里就不介绍了，可以看： DataX安装与简单使用 DataWeb的部署与使用 文章目录浅测评DataX与Kettle一、简单介绍二、支持的主流数据源三、操作性KettleDataX四、功能性1.数据同步10万数据量的情况：100万数据量的情况2.数据清洗10万数据的情况100万数据的情况 一、简单介绍 Da
数据集成之 kettle、sqoop、datax、streamSets 比较
weixin_34122810的博客
09-19 6563
2019独角兽企业重金招聘Python工程师标准>>> ...
ETL中的kettel运行python代码,不用配置pyhton的任何环境
云天龙,我命由我不由天!
06-27 3523
ETL中的kettel运行python代码,不用配置pyhton的任何环境 我们知道,有时间,我们在运行kettle的时候,会需要python代码进行辅助工作,或者说,如果一直用kettle会变得非常复杂,而且耗时巨大,成本非常高. 思路:如果kettle运行python大体上有两种方法: 中需要配置python的环境变量,安装python各种配置: 这种方法坏处:是需要专业或者比较专业的人员进行维护,一旦系统进行迁移,或者换一台电脑,一切环境变量得重头开始,设置会出现版本不兼容问题,导致代码运行错误
crontab调用python,python中封装kettle的定时任务调用
08-27
crontab调用python,python中封装kettle的定时任务调用 调用，注意python中导入环境变量 30 0 * * * python /export/quality_kettle/kettle/Resposity/runKettle.py
最新2017 省市区数据爬取，输出SQL，Python 代码
10-16
30分下载下来的资源， 给有需要且没积分的同志们，积分难赚啊 抓取国家统计局区划、城乡划分代码的简易python爬虫源码与爬取结果sql文件，本资源仅用于学习交流，不针对任何网站、软件、个人。
kettle从入门到精通 第八十三课 ETL之kettle kettle调用python且接收返回值
zhangjin1222的博客
08-04 793
看到有个qq群里有个小伙伴求助要实现kettle调用python脚本，然后接收python脚本执行的结果，最后将结果传递到下一个步骤。之前的课程里面介绍的是kettle通过shell步骤调用python脚本，没有接收python返回的结果。当你在 Kettle 中调用 Python 代码时，返回的值（如果没有直接被打印）不会自动被捕获或传递回 Kettle 的上下文。5、将print代码调整为return，文件为test3.py，测试下是否可以正常运行。的值不会出现在 Kettle 的输出中。
已解决kettle启动Python脚本失败报错问题，亲测有效
努力让自己发光，对的人才能迎着光而来
03-03 8516
已解决kettle启动Python脚本失败报错问题，亲测有效
kettle中调用python脚本清洗数据并将结果输入到数据库中
qq_40929755的博客
04-30 3294
1、新建job 2、插入shell脚本 需要设置环境变量，E:\Anaconda3;E:\Anaconda3\Scripts;E:\Anaconda3\Library\bin 需要添加.py文件默认打开方式为python.exe 3、新建转换 首先设置变量以便于动态读取时间戳和动态读取excel文件目录； 在执行sql脚本中需要勾选执行每一行，变量替换，绑定参数？； 在excel输入...
kettle python脚本,定时任务计划设置（python脚本、oracle数据库、kettle转换和作业）...
weixin_39677106的博客
03-23 759
一、python脚本定时任务描述：每天都要执行一个爬虫脚本G:\scripts\ufo.py方法：Step 1.电脑系统搜索框搜索并打开，左侧建立文件夹(可不建)后，在文件夹内创建任务Step 2.在【常规】里面输入名称以及运行设置Step 3.切换到触发器，新建时间间隔规则Step 4.切换到【操作】，新建操作规则方法1：填写运程所需的程序以及脚本文件地址方法2：新建一个bat文件，填写运行程序...
Python利用jieba分词提取字符串中的省市区(字符串无规则)
weixin_42636075的博客
10-12 1464
Python利用jieba分词提取字符串中的省市区(字符串无规则)
kettel 执行 python 脚本
Forter_J的博客
04-15 5223
kettel 执行 python 脚本 前言： 不知道为什么我查找了百度、谷歌等等，基本上没看见一个我想要的答案，所有自行摸索，找到了Kettel执行Python脚本的方法。 1.新建一个作业(Job) 2.依次将 (通用)Start (脚本)Shell (通用)成功 拖向指定区域，并按住Shift键将其连接至下图 3.配置(脚本)Shell 4.保存文件后点击执行即可 最后希望这篇博客帮...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值