。️-优快云博客

原创 playwright——实现wb爬取

然后，它创建了一个任务列表，其中每个任务都是调用get_note_info_task方法，用于获取指定微博的信息。接下来，根据爬虫类型的不同，它会执行不同的操作。接着，它创建了一个任务列表，遍历了微博ID列表，为每个微博ID创建了一个异步任务，这些任务调用了get_note_comments方法来获取微博的评论信息。紧接着，它调用了wb_client的get_note_all_comments方法来获取指定微博的所有评论信息，并通过关键词对评论进行筛选和数量限制。

2023-12-25 11:55:59 1403

原创 playwright——实现wb登录

在这个方法中，首先记录了一个日志，然后根据登录类型(login_type)的不同，调用了不同的登录方法。这段代码的作用是根据不同的登录类型来选择不同的登录方式，以开始微博登录过程。然后，它遍历了通过utils.convert_str_cookie_to_dict方法将cookie字符串转换为字典后的结果，将每个cookie以字典形式添加到浏览器上下文中。这段代码的作用是通过提供的cookie字符串来进行微博网站的登录，它将提取的cookie添加到浏览器上下文中，以实现使用cookie进行登录的功能。

2023-12-25 11:47:33 1552

原创 playwright——实现wb客户端

在循环中，你调用了之前定义的get_note_comments方法来获取评论数据，并根据返回的数据更新了max_id和is_end的值。在这个方法中，你构建了请求的URI和参数，并设置了Referer头，然后调用了之前定义的get方法来发送GET请求。在这个方法中，你构建了请求的URI和参数，并调用了之前定义的get方法来发送GET请求。你使用了json.dumps方法将数据转换为JSON格式的字符串，然后调用了之前定义的request方法，发送了POST请求，并返回了响应数据。

2023-12-25 11:44:22 999

原创 playwright——实现抖音登录

asyncio用于异步编程，redis用于缓存数据，playwright用于模拟用户在浏览器中的操作，而tenacity则用于处理网络请求的重试逻辑。首先，代码会记录日志，表示开始使用二维码登录抖音。这段代码的作用是确保登录对话框能够正确弹出，如果没有自动弹出则进行手动操作，以确保后续的登录流程能够正常进行。接着，代码会等待6秒，然后检查当前页面的标题，如果标题中包含"验证码中间页"，则需要再次滑动滑块进行验证。这个方法的作用是启动抖音网站的登录流程，根据不同的登录方式进行相应的操作，并最终检查登录状态。

2023-12-25 09:53:33 2190

原创 playwright——实现dy爬取

接着，它创建了一个抖音客户端对象，并进行了一些登录验证的操作。首先，它检查了是否启用了IP代理，如果启用了，它会创建一个IP代理池，并获取一个代理IP信息。整个过程中，它使用了异步并发的方式来获取指定帖子的评论，并限制了并发数量，以避免请求过多资源。整个过程中，它使用了异步并发的方式来获取指定帖子的详细信息和评论，并进行了相应的更新操作。整个过程中，它使用了异步并发的方式来获取指定帖子的详细信息，并处理了可能出现的异常情况。整个过程中，它使用了异步操作来获取指定帖子的评论，并处理了可能出现的异常情况。

2023-12-25 09:52:48 1483

原创 playwright——实现抖音客户端

它构建了一个包含aweme_id和cursor等参数的字典params，然后设置了Referer头部信息，并调用了类实例的get方法，发送了一个GET请求到"/aweme/v1/web/comment/list/"，并传入了参数params和headers。最后，返回了响应结果。在方法内部，首先构建了请求的参数params，然后设置了Referer头部信息，并调用了get方法发送了一个GET请求，以获取与关键词相关的信息。在初始化方法中，这些参数被赋值给类的属性，以便在类的其他方法中可以访问和使用它们。

2023-12-25 09:35:25 1714

原创 playwright——实现bilibili客户端

调用self.get方法，发送一个GET请求到构造好的URI，并携带params作为参数，同时将enable_params_sign参数设置为False，这可能是为了禁用对参数的签名处理。准备了一个post_data字典，包含了视频ID（oid）、排序方式（mode）、类型（type）、每页数量（ps）和下一页的页码（next）作为参数。这段代码的作用是封装了获取特定视频所有评论的逻辑，通过循环调用获取评论的接口，并根据参数控制是否获取子评论，最终返回获取到的所有评论信息。

2023-12-24 22:56:53 977

原创 playwright——实现bilibili爬取

最后，根据爬虫类型的不同，它会执行搜索或详情爬取操作。接着，它会创建一个任务列表，遍历视频ID列表，为每个视频ID创建一个异步任务，并将这些任务添加到任务列表中。它首先创建了一个信号量来限制并发请求的数量，然后创建了一个任务列表，遍历指定的视频ID列表，为每个视频ID创建一个获取视频信息的任务，并将这些任务添加到任务列表中。在获取了视频的信息之后，它会遍历视频详情列表，如果视频详情不为空的话，就会调用bilibili.update_bilibili_video方法来更新bilibili视频的信息。

2023-12-24 16:43:00 1187

原创 playwright——实现bilibili登录

根据参数名和类型，它可能是用于实现Bilibili网站的登录功能，其中login_type表示登录类型，browser_context和context_page可能是与浏览器操作相关的对象，login_phone是登录手机号，cookie_str是用于登录的cookie字符串。在方法中，首先记录了一条日志，然后根据登录类型的不同，调用了相应的登录方法：如果登录类型是"qrcode"，则调用login_by_qrcode方法；- 最后，函数返回转换后的字符串形式的Cookie和字典形式的Cookie。

2023-12-24 13:13:59 1209

原创 fastapi用户系统模块——“添加字典值”+“获取字典值中最大排序“

这个接口的路径是"/dict/detail/max-order-num/{dict_data_id}"，表示获取字典值中最大排序的操作。这段代码的逻辑是在接收到添加字典值的请求后，首先删除了对应ID的缓存（如果存在），然后在数据库中创建新的字典值记录。这个接口的路径是"/dict/detail"，表示添加字典值的操作。来获取指定字典数据ID的最大排序号，并将结果以JSON格式返回，其中包含了最大排序号。表示一个DictDetailSchema对象，这个对象包含了要添加的字典值的信息。来删除指定ID的缓存。

2023-12-19 10:41:58 390

原创 fastapi用户系统模块——“获取单个字典值”

为True，它会将查询结果转换为字典形式并返回，否则直接返回查询结果。如果查询结果为空，则返回空字典或者None，具体取决于。这个接口的路径是"/dict/detail/{_id}"，表示获取单个字典值的详细信息。这段代码是一个基于FastAPI框架的Python后端接口，使用了路径操作装饰器。这段代码是一个Python函数，它接受一个数据库会话。是路径参数，用来指定要获取的字典值的ID。来获取指定ID的字典值的详细信息，并通过。来进行左连接操作，连接的条件是。来过滤查询的条件，包括。函数获取数据库会话，

2023-12-19 10:39:22 465

原创 fastapi用户系统模块——“获取字典”

在函数内部，首先根据传入的dict_name、dict_type和status参数构建了一个过滤条件filters。这是一个方法，名为get_multi，它接受一个db会话对象和一些可选的查询参数，包括queries、filters、order_bys、to_dict、page和page_size。最后，根据偏移量和限制量对查询对象进行了分页操作，并返回了查询结果的列表形式（如果to_dict为True），或者直接的查询结果列表（如果to_dict为False），以及总数、偏移量和限制量。

2023-12-19 10:34:58 508

原创 fastapi用户系统模块——“通过Key获取单个配置”

@router.get("/config-setting/key/{key}", summary="通过Key获取单个配置")async def getConfigSettingByKey(*, db: Session = Depends(deps.get_db), r: asyncRedis = Depends(deps.get_redis),

2023-12-19 10:13:48 393

原创 fastapi用户系统模块——“通过id获取单个配置”

总的来说，这个路由处理函数的作用是根据提供的配置 ID 从数据库中获取相应的配置信息，并以 JSON 格式返回。总的来说，这个方法的作用是根据提供的 ID 从数据库中获取相应的数据，并根据需要将其转换为字典格式返回。这样的 URL 地址，并且给这个路由起了一个简短的描述叫做 “通过id获取单个配置”。参数的值，如果为 True，则将查询结果转换为字典格式返回，否则直接返回查询结果。最后，函数返回一个 JSON 格式的成功响应，其中包含了获取到的配置信息。的函数，用来从数据库中获取指定 ID 的配置信息。

2023-12-19 10:13:31 421

原创 fastapi用户系统模块——“添加配置”

总的来说，这个路由处理函数的作用是接收客户端提交的配置信息，将其添加到数据库中，并返回一个成功的响应。总的来说，这个方法的作用是根据提供的数据在数据库中创建新的条目，并返回创建的数据库对象。这段代码是一个基于 FastAPI 的路由处理函数，用于添加配置信息。这样的 URL 地址，并且给这个路由起了一个简短的描述叫做 “添加配置”。的函数，用来向数据库中添加新的配置信息，同时指定了创建者的 ID。这行代码刷新数据库对象，以便获取数据库中的最新状态。这行代码提交会话，将新创建的对象写入数据库。

2023-12-19 10:12:46 512

原创 fastapi用户系统模块——“获取字典kv“

如果不存在asyncRedis对象r，就调用curd_dict_data.getByType函数，使用传入的db对象和_type参数来获取数据。在方法内部，首先对status_in进行了处理，如果它是None，就将其设为(0,)。如果找到了符合条件的对象，就构建一个dict_details列表，其中包含了该对象相关联的DictDetails对象的一些属性。这是一个方法，名为getByType，它接受一个db会话对象和一个_type字符串作为参数，并且有一个可选的status_in参数，默认值为None。

2023-12-19 10:12:14 444

原创 fastapi用户系统模块——“获取配置设置列表”

它接受数据库会话(db)以及一些可选的参数，包括查询条件(queries)、筛选条件(filters)、排序条件(order_bys)、是否转换为字典格式(to_dict)、当前页数(page)和每页显示的数据条数(page_size)。接口首先根据传入的参数构建筛选条件，然后调用curd_config_setting.get_multi方法从数据库中获取符合条件的数据。方法首先处理传入的参数，然后根据筛选条件和排序条件构建查询语句，再根据当前页数和每页显示的数据条数进行分页查询。

2023-12-18 16:12:51 476

原创 fastapi用户权限模块——“菜单列表”

它接受一个数据库会话对象（db: Session），一个要创建的对象（obj_in），以及一个创建者的ID（creator_id）。然后将创建者的ID添加到对象数据中，创建一个新的数据库对象，将角色信息关联到这个对象，将对象添加到数据库中，提交更改，并刷新数据库对象。在函数内部，它首先通过依赖注入获取数据库会话和用户信息，然后调用了名为listMenus的函数，该函数接受了数据库会话、用户信息以及查询参数title和status作为参数。如果用户具有相应的角色，则返回用户信息，否则抛出用户权限错误异常。

2023-12-18 10:38:25 522

原创 fastapi用户权限模块——“删除角色权限“

它接受数据库会话（db）、记录的ID（_id）以及删除者的ID（deleter_id）作为参数。它使用了HTTP的DELETE方法，接受一个名为role_id的路径参数，表示要删除的角色的ID。在函数内部，它首先通过依赖注入获取数据库会话和用户信息，然后调用了名为delRole的函数，该函数接受了数据库会话、用户信息和角色ID作为参数。删除的条件是角色的ID为role_id，同时记录删除者的ID为当前用户的ID。这个方法的作用是根据给定的ID来逻辑删除数据库中的记录，并返回更新后的对象。

2023-12-18 10:36:08 127

原创 fastapi用户权限模块——“修改角色权限“

这是一个Python中用于更新数据库记录的方法。它接受数据库会话（db）、记录的ID（_id）、更新数据（obj_in）以及修改者的ID（modifier_id）作为参数。在方法内部，首先将更新数据转换为可JSON序列化的格式，然后将修改者的ID添加到更新数据中。接着，它将更新数据中的字段映射到数据库模型中的字段，并使用query方法来过滤出符合条件的记录，然后对其进行更新。最后，提交数据库会话并返回更新后的对象。这个方法的作用是根据给定的ID和更新数据来更新数据库中的记录，并返回更新后的对象。

2023-12-18 10:34:36 354

原创【无标题】

最后，将新的角色对象添加到数据库中，提交数据库会话的更改，并刷新对象以获取最新的数据库状态，最终返回创建的角色对象。在函数体内部，调用了curd_role.create函数来在数据库中创建一个新的角色，该函数接受数据库会话对象db、角色信息obj，以及创建者的ID …这个方法叫做create，它接受一个数据库会话对象db，以及要创建的对象的数据obj_in和创建者的ID creator_id作为参数。在函数参数中，db是一个数据库会话对象，u是一个用户对象，obj是一个角色信息的模式对象。

2023-12-18 10:31:00 45

原创 fastapi用户权限模块——“查看单个权限角色“

看起来这段代码是一个用于从数据库中获取特定权限角色的方法。它接受一个数据库会话对象db和一个角色ID _id 作为参数。在方法内部，它首先通过查询过滤器找到指定ID的角色，并确保该角色未被删除。然后根据to_dict参数的值，返回角色对象或者将角色对象转换为字典格式。如果转换为字典格式，将包括角色的ID、键、名称、排序号、状态以及角色所关联的菜单信息。如果to_dict为False，那么返回role对象本身；如果to_dict为True，那么返回一个包含特定角色信息的字典。

2023-12-18 10:28:20 124

原创 fastapi用户权限模块——“获取权限最大排序“

在方法内部，首先使用SQLAlchemy的查询功能来获取权限角色表中排序号（order_num）的最大值，并将其命名为max_order_num。然后通过过滤条件self.model.is_deleted == 0来确保只考虑未被删除的角色。最后，返回获取到的最大排序号，如果获取到的值为假（例如None或0），则返回0。这段代码定义了一个名为getMaxOrderNum的方法。它接受一个数据库会话对象db作为参数。总的来说，这个方法的作用是从数据库中获取未被删除的权限角色的最大排序号，并返回该值。

2023-12-18 10:25:41 70

原创 fastapi用户权限模块——“获取权限角色选择列表“

这段代码是一个使用Python的FastAPI框架编写的路由处理函数。它使用了GET方法，处理的路径是"/role/select/list"，作用是获取权限角色的选择列表。在函数体内部，调用了curd_role.getSelectList函数来从数据库中获取权限角色的选择列表，并将结果以JSON格式返回。总的来说，这个函数的作用是获取数据库中的权限角色选择列表，并以JSON格式返回。换句话说，这段代码的作用是从数据库中查询符合条件的权限角色，并按照。是用来指定查询结果的排序顺序的。字段的值进行升序排序。

2023-12-18 10:24:08 272

原创 fastapi用户权限模块——“获取所有权限角色“

@router.get("/role", summary="获取所有权限角色")async def listRole(*, db: Session = Depends(deps.get_db), u: Users = Depends(deps.user_perm(["perm:role:get"])), key: str = Query(""), name

2023-12-18 10:04:41 285

原创 fastapi用户权限模块——“修改用户信息“

在函数体内部，调用了curd_user.update函数来更新数据库中指定ID的用户信息，该函数接受数据库会话对象db、用户ID user_id、以及要更新的用户信息obj，还有一个更新者的ID updater_id。这个函数的作用是在数据库中更新用户的信息。最后，提交了数据库会话的更改。总的来说，这个方法的作用是在数据库中更新指定ID的对象，并记录更新者的ID。在函数参数中，db是一个数据库会话对象，u是一个用户对象，obj是一个用户信息的模式对象，user_id是一个整数，表示要修改信息的用户ID。

2023-12-18 10:02:11 170

原创 fastapi用户权限模块——“修改用户是否活跃的状态“

在方法内部，它调用了super().update方法，传入了数据库会话对象db、一个查询条件_id=user_id，以及一个包含要更新的字段is_active的对象obj_in，还有修改者的ID modifier_id。这个方法叫做update，它接受一个数据库会话对象db，以及要更新的对象的ID（_id）、更新的数据（obj_in）和修改者的ID（modifier_id）作为参数。在函数参数中，user_id是一个整数，db是一个数据库会话对象，u是一个用户对象，obj是一个用户活跃状态的模式对象。

2023-12-18 09:59:11 96

原创 fastapi用户权限模块——“修改指定用户的密码“

总的来说，这段代码是一个用于处理修改指定用户密码的路由处理函数，它接受用户ID和新密码信息，并在数据库中进行相应的修改操作，然后返回一个成功的响应。方法是用于接收新密码信息并在数据库中修改用户密码的功能，它接受用户ID、新密码和修改者ID作为参数，并在数据库中进行相应的更新操作。的函数，用于在数据库中修改指定用户的密码。函数是用于对密码进行哈希处理的功能，它接受密码作为输入，并返回经过哈希处理的密码值。的函数，它接受一个字符串类型的密码作为输入，并返回一个字符串类型的密码哈希值。表示要修改密码的用户ID，

2023-12-18 09:54:52 167

原创 fastapi用户权限模块——“上传头像照片“

总的来说，这段代码是一个用于处理上传用户头像照片的路由处理函数，它接受上传的图片文件，将其写入到指定的路径，并返回一个成功的响应，其中包含了上传后的图片路径。：这是一个装饰器，指定了这个函数处理的HTTP POST请求的路径为"/user/file/avatar"，并提供了一个简短的描述(summary)。：这行代码生成一个新的文件名，通常会使用唯一标识符来避免文件名冲突。最后返回一个包含上传成功的响应，其中包含了上传后的图片路径。：这行代码获取上传的图片文件的文件名。：这行代码构建了图片文件的存储路径。

2023-12-18 09:52:26 450

原创 fastapi用户权限模块——“添加用户“

总的来说，这段代码是一个用于处理HTTP POST请求，向数据库中添加用户信息的路由处理函数。这段代码是一个使用Python的FastAPI框架编写的路由处理函数，用于添加用户信息到数据库中。：这是一个装饰器，指定了这个函数处理的HTTP POST请求的路径为"/user"，并提供了一个简短的描述(summary)。方法是用于接收用户信息并在数据库中创建新用户的功能，它接受用户信息和创建者ID作为参数，并返回新创建的用户对象。：这是一个参数，用于接收用户提交的用户信息，可能是一个包含用户信息的数据结构。

2023-12-18 09:51:02 629

原创 fastapi用户权限模块——“获取用户列表“

总的来说，这段代码是一个用于处理获取用户列表的HTTP GET请求的路由处理函数，它使用了依赖注入、查询参数和返回JSON格式数据的技术。：这是一个装饰器，指定了这个函数处理的HTTP GET请求的路径为"/user"，并提供了一个简短的描述(summary)。方法是用于构建查询条件并在数据库中进行用户搜索的功能，它接受各种条件参数，并返回符合条件的用户数据和总数。函数可能是一个用于在数据库中搜索用户的函数，它接受各种查询参数，并返回符合条件的用户列表。这段代码是一个用于在数据库中搜索用户的函数。

2023-12-18 09:49:12 364

原创 fastapi用户权限模块——“获取用户列表“

接口还接受一系列查询参数，如id、username、email、phone、status、created_after_ts、created_before_ts、page和page_size，用于过滤和分页查询用户信息。它接受多个参数，包括数据库会话（db）、用户ID（_id）、用户名（username）、邮箱（email）、电话（phone）、状态（status）、创建时间戳范围（created_after_ts和created_before_ts）、页码（page）和每页大小（page_size）。

2023-12-17 23:19:04 170 1

原创 fastapi用户权限模块——“获取用户信息“

这段代码是一个使用FastAPI框架编写的Python后端API接口。它使用了GET请求方法，路径为"/user/{user_id}"，用于获取特定用户的信息。在函数内部，它依赖一个数据库会话（db）和一个名为"u"的用户对象（Users），并且需要满足"perm:user:get"和"perm:user:put"这两个权限才能访问。最后，它会调用curd_user.get(db, user_id)来获取用户信息，并将结果以JSON格式返回。

2023-12-17 18:45:19 465 1

原创 fastapi用户登录模块——“获取登录、注册、忘记密码时候时候的验证码“

它定义了一个GET请求的路由"/captcha-code"，用于获取登录、注册、忘记密码等场景下的验证码。在函数内部，它首先检查是否启用了验证码功能（settings.USE_CAPTCHA），如果没有启用，则返回一个空的验证码信息。如果启用了验证码功能，它调用了create_base64_code函数生成了一个包含验证码图片和验证码字符串的base64编码，并生成了一个唯一的key。总的来说，这段代码的作用是根据是否启用了验证码功能，生成相应的验证码信息并存储到Redis中，然后返回给客户端。

2023-12-17 14:13:58 607 1

原创 fastapi用户登录模块——“改变头像“

这段代码接受一个数据库会话（db: Session）、一个ID（_id: int）、一个头像路径（avatar_path: str）和一个修改者ID（modifier_id: int = 0）作为参数。在这个函数中，它首先创建了一个包含要更新的数据的字典update_data，然后根据是否提供了修改者ID来决定是否将修改者ID加入到update_data中。在函数内部，它首先从JWT token数据中获取用户ID，然后读取上传的图片文件的数据，并根据一定的规则生成新的图片文件名和存储路径。

2023-12-17 13:16:00 151 1

原创 fastapi用户登录模块——“获取用户路由树状菜单“

在函数内部，它首先根据当前用户是否为超级用户来调用curd_user.getMenus函数获取相应的菜单数据，然后将菜单数据包装在成功响应中返回。这段代码是一个方法，用于从数据库中获取用户菜单数据。这段代码是一个基于FastAPI的路由处理函数，用于获取用户路由菜单。在整个过程中，它使用了SQLAlchemy的查询构建方式，通过多个表的关联来获取用户的菜单数据。这段代码看起来是用于根据用户权限获取相应的路由菜单数据，并返回给前端应用。这段代码看起来是用于根据用户ID获取相应的菜单数据，并将其整理后返回。

2023-12-17 12:52:37 212 1

原创 fastapi用户登录模块——“验证注册的token“

另外，它依赖一个名为redis的Redis实例，该实例通过deps.get_redis函数获取。这段代码定义了一个函数get_redis，它接收一个Request对象，并返回一个可选的Redis实例。在函数内部，它首先尝试从请求的应用状态中获取Redis实例，如果获取到了则返回该实例，否则返回None。这个函数看起来是用于从请求中获取Redis实例的，它可能会在其他地方被调用以获取Redis实例，以便在处理请求时使用Redis进行数据存储和检索操作。

2023-12-17 12:50:02 406 1

原创 fastapi用户登录模块——“用户注册“

这些方法接收一个数据库会话对象（db: Session）和相应的参数（用户名、邮箱或手机号），然后使用过滤条件来查询数据库中的用户表（Users），并返回查询结果中的第一个用户对象。首先，它将输入对象转换为可序列化的字典（obj_in_data），然后使用get_password_hash函数对密码进行哈希处理，并将哈希后的密码存储到字典中，然后删除原始的密码字段。这段代码是一个创建用户的方法。在这些方法中，使用了ORM（对象关系映射）的方式来查询数据库，这是一种常见的在Python中操作数据库的方法。

2023-12-17 12:20:28 1306 1

原创 fastapi用户登录模块——“修改密码“

在这个接口中，同样使用了依赖注入（Dependency Injection）来获取数据库会话（db）和JWT令牌中的用户数据（token_data），以及接收一个名为"obj"的修改密码数据。在方法内部，首先创建一个包含新密码哈希值的更新数据字典（update_data），然后使用数据库会话执行更新操作，将新密码的哈希值更新到对应用户的记录中。在接口的实现中，首先从JWT令牌中获取用户的ID（user_id），然后调用"curd_user.checkPwd"函数来检查用户输入的旧密码是否正确。

2023-12-17 12:19:01 596 1

原创 fastapi用户登录模块——“获取用户自己的资料“+“修改个人信息“

在这个接口中，同样使用了依赖注入（Dependency Injection）来获取数据库会话（db）和JWT令牌中的用户数据（token_data），以及接收一个名为"obj"的用户信息修改数据。在接口的实现中，首先从JWT令牌中获取用户的ID（user_id），然后调用"curd_user.update"函数来更新数据库中对应用户的信息，传入的参数包括数据库会话（db）、用户ID（user_id）、要修改的用户信息数据（obj）以及修改者的ID（modifier_id）。

2023-12-17 12:09:25 1096 1

空空如也

空空如也