python timestamp类型_postgresql的timestamp类型与python的datetime类型之间的坑

本文通过实例分析了Python中timestamp类型与PostgreSQL的timestamp类型在不同时区设置下转换存在的问题,强调了使用datetime.now(tz=timezone.utc)获取带时区时间以及PostgreSQL使用timestampz类型的重要性,以确保数据一致性。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近的项目突然发现一个bug,就是当服务器系统时区是utc时区,而服务器pgsql的时区是+8时区时候,通过python的datetime.now()插入的timestampz值有问题。所以特意做了一个测试。

1 测试前提

1.1 python的datetime类型

首先,要了解python的datetime类型是包括时间与时区的。而通过datetime.now()与datetime.utcnow()获得的时间其tzinfo属性为null,即不带时区属性。要想获得带时区属性的datetime类型,就必须使用datetime.now(tz=timezone.utc)或者datetime.now(tz=timezone(timedelta(hours=8)))。

1.2 pgsql的时间戳类型

然后,pgsql的时间戳类型包括timestamp(无时区), timestampz(有时区)两种。

1.3 测试表与测试代码

为了进行测试,我新建了一张time_test表,然后分别插入pythono的datetime.now(), datetime.utcnow(), datetime.now(timezone.utc)三个值。

#!/usr/bin/env python

# -*- coding: utf-8 -*-

import psycopg2

import logging

from datetime import datetime

from datetime import timezone

def insert():

now = datetime.now()

utcnow = datetime.utcnow()

nowz = datetime.now(tz = timezone.utc)

logging.info('now: %s', now)

logging.info('utcnow: %s', utcnow)

logging.info('now with tz: %s', nowz)

conn = psycopg2.connect(dbname='postgres', user='postgres',

host='127.0.0.1', password='postgres',

port=5432, connect_timeout=5)

cur = conn.cursor()

sql_string = "INSERT INTO time_test (tpz_now, tpz_utcnow, tpz_nowz, tp_now, tp_utcnow, tp_nowz) VALUES \

(%(tpz_now)s, %(tpz_utcnow)s, %(tpz_nowz)s, %(tp_now)s, %(tp_utcnow)s, %(tp_nowz)s)"

cur.execute(sql_string, {'tpz_now': now,

'tpz_utcnow': utcnow,

'tpz_nowz': nowz,

'tp_now': now,

'tp_utcnow': utcnow,

'tp_nowz': nowz})

conn.commit()

cur.close()

conn.close()

pass

if __name__ == '__main__':

logging.basicConfig(format="%(asctime)s %(levelname)5s %(name)s.%(funcName)s - %(message)s",

level=logging.DEBUG)

insert()

2 测试

2.1 系统时区+8,pgsql时区+8

2019-11-26 20:13:22,771 INFO root.insert - now: 2019-11-26 20:13:22.771931

2019-11-26 20:13:22,771 INFO root.insert - utcnow: 2019-11-26 12:13:22.771931

2019-11-26 20:13:22,771 INFO root.insert - now with tz: 2019-11-26 12:13:22.771931+00:00

明显这时候python使用datetime.utcnow()值插入数据库,得到的并不是我们想要的结果。

2.2 系统时区utc, pgsql时区+8

2019-11-26 12:59:26,111 INFO root.insert - now: 2019-11-26 12:59:26.111522

2019-11-26 12:59:26,112 INFO root.insert - utcnow: 2019-11-26 12:59:26.111522

2019-11-26 12:59:26,112 INFO root.insert - now with tz: 2019-11-26 12:59:26.111522+00:00

这时候只有使用datetime.now(timezone.utc)插入数据库得到的才是我们想要的结果。

2.3 系统时区utc,pgsql时区utc

修改postgresql.conf文件中的timezone为'UTC',然后通过命令 pg_ctl  restart  -D 数据库目录 来重启postgresql。

使用如下sql语句检查当前的pgsql时间与时区:select now();  show time zone;2019-11-26 13:36:34,719 INFO root.insert - now: 2019-11-26 13:36:34.719490

2019-11-26 13:36:34,719 INFO root.insert - utcnow: 2019-11-26 13:36:34.719490

2019-11-26 13:36:34,719 INFO root.insert - now with tz: 2019-11-26 13:36:34.719490+00:00

这是最完美的情况,任何一种方式都是我们想要的结果。

2.4 系统时区+8,pgsql时区utc

2019-11-26 21:44:57,208 INFO root.insert - now: 2019-11-26 21:44:57.207524

2019-11-26 21:44:57,208 INFO root.insert - utcnow: 2019-11-26 13:44:57.208525

2019-11-26 21:44:57,208 INFO root.insert - now with tz: 2019-11-26 13:44:57.208525+00:00

这种情况是最混乱的,对于timestampz的时间来说,很明确utcnow与nowz插入的值都是正确的。而对于timestamp类型的时间戳而言,可能开发者自己都不清楚想要的是+8时间还是utc时间。。。

3 结论

python要用datetime.now(tz=timezone.utc)来获取带时区的当前时间,postgresql的时间戳用timestampz。

将 `timestamp` 类型转换成其他字段类型是一个常见的操作,在数据库查询、数据处理或程序设计过程中经常需要进行这种类型的转换。以下是详细的介绍: ### 1. **从 timestamp 转换到字符串 (String)** - 在许多编程语言和 SQL 查询中,可以将时间戳 (`timestamp`) 格式化为可读的日期字符串。 - 示例(SQL): ```sql SELECT DATE_FORMAT(your_timestamp_column, '%Y-%m-%d %H:%i:%s') AS formatted_date FROM your_table; ``` - 示例(Python 使用 Pandas 库): ```python import pandas as pd df['formatted_date'] = pd.to_datetime(df['your_timestamp_column']).dt.strftime('%Y-%m-%d %H:%M:%S') ``` ### 2. **从 timestamp 转换到日期 (Date) 或 时间 (Time)** - 如果只需要提取日期部分或者时间部分,也可以通过函数实现分离。 - 示例(MySQL 提取日期部分): ```sql SELECT DATE(your_timestamp_column) AS date_part FROM your_table; ``` - 示例(PostgreSQL 提取时间部分): ```sql SELECT TIME(your_timestamp_column) AS time_part FROM your_table; ``` ### 3. **从 timestamp 转换到 Unix 时间戳 (Unix Timestamp / 秒数)** - 将标准的时间戳转为自纪元以来的秒数表示形式。 - 示例(MySQL): ```sql SELECT UNIX_TIMESTAMP(your_timestamp_column) AS unix_time FROM your_table; ``` - 示例(Python): ```python import datetime dt = datetime.datetime.fromisoformat('2023-10-05T14:30:00') print(dt.timestamp()) # 输出对应的 Unix 时间戳 ``` ### 4. **从 timestamp 转换到年月日等组件** - 可以单独抽取年份、月份、天数或其他细节信息。 - 示例(SQL Server 获取年份): ```sql SELECT YEAR(your_timestamp_column) AS year_part FROM your_table; ``` --- **总结** 以上是一些常见场景下对 `timestamp` 的转换方法,实际应用时需根据使用的工具(如 Python、SQL 等)、目标需求以及原始数据格式来进行调整。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值