- 博客(8)
- 收藏
- 关注
RSS订阅原创 selenium过阿里云滑块验证
阿里云滑块会检测window.navigator.webdriver是否为True，driver需添加下述代码段将window.navigator.webdriver定义为undefined即可driver.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument", { "source": """ Object.defineProperty(navigator, 'webdriver', { get: () => un
2021-03-30 14:58:58
1955
1
原创 自定义kafka的Dockerfile，COPY failed
需在dockerfile目录下添加download-kafka.sh start-kafka.sh broker-list.sh create-topics.sh versions.sh这几个文件，可从github中获取，否者会报错Step 10/16 : COPY download-kafka.sh start-kafka.sh broker-list.sh create-topics.sh versions.sh /tmp/COPY failed: stat /var/lib/docker/tmp
2020-09-17 14:39:57
234
原创 SqlAlchemy中or_的用法
stmt = select([users_table]).where( or_( users_table.c.name == 'wendy', users_table.c.name == 'jack' ) )等价于下面的
2020-07-30 14:37:16
3251
原创 Sqlalchemy中session.close()与engine.dispose()的区别
session.close() 会将连接返回给Engine的连接池，并且不会关闭连接。engine.dispose() 将关闭连接池的所有连接.PS:如果设置poolclass = NullPoolengine将不使用连接池，那么连接将会在 session.close()后直接关闭....
2020-04-17 19:26:19
7103
原创 Pandas高效率插入数据(to_sql进阶用法)
设置create_engine参数:fast_executemany=True，可以提高tosql效率N倍(自己测试七十万条数据插入，设置fast_executemany后的时间仅需两分钟左右，未设置之前跑了一个多小时都没跑完被我手动结束)connection_string = "xxxxxxxxx"engine = create_engine(connection_string,fast_e...
2020-03-17 15:20:18
11318
7
原创 Pandas关闭Sqlalchemy数据库连接
@[Pandas关闭Sqlalchemy数据库连接]Pandas关闭Sqlalchemy数据库连接若要真正关闭链接，则需要采用：conn.dispose()conn = create_engine('mysql+pymysql:user:passwd@host:port/db?charset=etf-8')try: dataIn2File.to_sql(table_name,con...
2020-01-03 11:31:28
2139
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人