- 博客(5)
- 收藏
- 关注
原创 MySQL优化中的分库分表问题
MySQL优化中的分库分表问题 随着互联网公司中的数据规模不断扩大,相关的数据库查询操作效率开始降低,由此引出了分库分表操作。分库分表分包含了垂直方向和水平方向进行的优化。 垂直方向 垂直方向的分库分表主要依据是字段维度和业务模块相关性。 垂直分表 垂直分表是将一个表中的部分字段数据切分到其他表中。 举个例子,我们平常使用某宝商城浏览商品信息时,首先出现的是商品的列表信息,单独点击某个商品之后才会出现该商品的具体描述信息。从这个情况来讲讲垂直分表,由于商品的“描述信息”字段在商品列表页用不到,且该字段往往较
2020-12-09 17:18:48
255
原创 数据分析——实习僧数据分析岗招聘信息分析
随着互联网技术不断完善,市场竞争日益激烈,粗放经营的企业将很难实现可持续发展。为改变这一现状,越来越多的企业开始对自身数据进行深度分析和挖掘,并以此辅助决策人员进行精细化决策管理。由此,越来越多的数据分析师应运而生。 本人初步踏入这一领域,希望对数据分析实习岗有一定了解,便爬取了实习僧网站上所有数据分析实习相关的岗位信息,并对其进行相关处理分析。 1. 明确分析目的 了解哪些城市、哪些类型的公司...
2020-04-30 18:33:41
1683
1
原创 实习僧——数据分析岗招聘信息爬取 源代码
利用scrapy爬取实习僧网站中数据分析实习岗的所有招聘信息 scrapy框架中的spider代码 import scrapy from shixiseng.items import ShixisengItem from bs4 import BeautifulSoup # 实习僧存在字体反爬,需要进行转换 def replace_response(response): replace_...
2020-04-29 20:59:42
1109
原创 实习僧——数据分析岗招聘信息分析 源代码
爬取实习僧网站所有数据分析相关的岗位信息,对其做数据分析 import pandas as pd import matplotlib.pyplot as plt import seaborn as sns import re import warnings warnings.filterwarnings('ignore') %matplotlib inline # 导入数据 df = pd.r...
2020-04-29 18:05:17
1558
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅