LXWalaz1s1s的博客

目 录1. 问题场景2. `import pymssql`代码案例3. `from sqlalchemy import create_engine`代码案列4.`pyspark` 操作sql server默认就是自动提交1. 问题场景  由于平时博主都是python操作mysql比较多，python处理sql server极为少见，但最近发现python在操作sql server的insert 、update、delete、truncate table等改变表数据内容的DML语句时，必须手动提交；这里

目 录1.场景2.实现1.场景  sql server假设目标表rpt.tbb_student被前端报表无缝链接，或被其它库订阅，则在更新表rpt.tbb_student就不能用全删全插的理念，这个时候就会有个思路有则更新，无则插入的增量理念；  sql server天生就自带这种语法merge into,有的人疑问了，那我直接写两段语句，一段update,一段insert不行吗？答案当然是可以的，只是这种做法相对于merge into效率较低，不够优化，因为这样的两段语句需要扫描表两次，时间复杂度

背 景  场景是这样的,我需要抽取某张表(mytable)数据，但是因为某些原因这张表的数据每次抽取前都需要先吧把其他表的数据先join处理后insert到这张表内；然再ETL到其他目标数据库；  我的思路就是：写个SP来刷新数据；写个Python脚本ETL数据前先调用SP刷新数据，且打印出受影响数量，再ETL到目标服务器；自动化部署脚本。  这里就重点讲讲python调用有返回值的SP的运用，整个SP的语句如下；-- ===================================

  sql server中开窗函数相比于group by用的是少，但是相对于某些功能，开窗函数却能方便简单高效的实现，个人觉得开窗函数这个名字太高雅，不能体现他的功能性，应该叫分区计算，更能体现他的本质  函数样式： 函数名(列1) OVER(partition by 列2 order by 列3)  具体意思就是把一个表里面的数据按照列2的层次分成一小块一小块的区域，，每个区域里面是按照列3...

场 景  最近接到一波机器心跳数据，存回了SQL Server，竟然是时间戳(unix_timestamp),如表1,那这展示出来也不知道是啥时候呀？于是转呗，奇怪，SQL Server还没有自带的函数，这就尴尬了。表1 时间戳样例最后一次心跳时间195921407519277475691927684923实 现  某个时间点A的时间戳（unix_ti...

首先普及下sql server数据库的三种常见文件类型：  .mdf 全称（primary data file）  主要数据文件包含数据库的启动信息，并指向数据库中的其他文件。用户数据和对象可存储在此文件中，也可以存储在次要数据文件中。每个数据库有一个主要数据文件。主要数据文件的建议文件扩展名是 .mdf。   .ndf全称（Secondary data files）  次要数据文件是可选...