- 博客(11)
- 收藏
- 关注
原创 Scrapy框架中改用requests请求
Scrapy框架的请求无论是Request还是FormRequest类型,不管怎么改都不行,不是报错就是响应400,实在解决不了,但是为了框架保持一致,改用requests请求换掉Scrapy的请求。,使用requests.post(url,heards = heards, json = data)能够正常获取响应,但是。做一个爬虫项目,爬取。
2024-09-27 16:28:06
268
原创 python的web工具:自动化框架DrissionPage(比selenium更加灵活,不需要配置浏览器驱动)
最近看到一个好玩的库,声称碾压selenium,怀着好奇的心打开了一个新世界。选动态网页试试收,使用DrissionPage写了一个自动化爬虫(爬取丽人网图片下载到本地)本文包含主要技术(DrissionPage用法,动态页面ajax应对方法,xpath解析,异步协程保存图片)
2024-05-29 19:00:03
1587
1
原创 nc文件处理取值范围。python实现浮点数向上和向下取整
项目遇到一个问题:有一个nc文件,拿到该nc文件所有数据的最大值,最小值范围,最大值向上取整保留两位小数,最小值向下取整保留两位小数,找了一圈没有这个解决方法,最后自己写了一个。ok,等我再用到就来复制粘贴。
2023-11-24 12:18:48
326
1
原创 fastapi Swagger UI报错 :Errors Fetch errorInternal Server Error /api/v1/openapi.json
问题:fastapi定义的无法对输出模型序列化。解决 : 检查最近添加的输出模型 如果不好找。,先在注册路由中逐个排查。
2023-06-25 09:38:21
797
原创 python气象(地理)nc数据处理 使用xarray matplotlib rioxarray库完成nc文件转tif(tiff)文件,绘制地理图片
气象文件nc的处理,绘图
2023-06-15 23:05:07
2827
6
原创 sqlalchemy.exc.ProgrammingError: (psycopg2.ProgrammingError) can‘t adapt type ‘BinaryExpression‘
sqlalchemy.exc.ProgrammingError: adapt type BinaryExpression
2023-02-21 11:16:52
721
原创 python typing.Literal 与sqlalchemy中的Literal
python typing.Literal是用于限制函数传参
2023-01-18 13:59:58
1524
原创 fastapi报错sqlalchemy.exc.InvalidRequestError: ...
id = Column(Integer, primary_key=True, index=True, autoincrement=True, comment="主键")sql=...db.query(Project_Info.project_id)就会报错!这个错误因为sqlalchemy的orm的sql查询,查询字段选用了数据库模型的重定向字段。sql=...db.query(Project_Info.id)就会报错!
2023-01-17 18:48:39
1764
原创 pydantic.error_wrappers. ValidationError
pydantic.error_wrappers. ValidationError
2023-01-17 18:41:02
3905
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人