mark一个mongo使用坑

pigcsy

已于 2022-03-27 14:34:23 修改

阅读量77

点赞数

文章标签：大数据人工智能数据分析分布式

于 2018-08-21 11:16:00 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_45069429/article/details/123573057

版权

场景清洗老老数据需要task 然后按日期一条一条筛取但是设定开始时间时一直会取第一条数据

原因：mongo存储数据会先转成自己的数据格式时间先转换为UTC时间所以需要先把本地时间转成同一时区

pigcsy

博客等级

码龄6年

24
原创

8
点赞

34
收藏

4
粉丝

关注

私信

最新评论

从elk迁移日志到loggie+clickhouse(开发侧非实施侧)
bingfengfzl: compact="true" locationInfo="true" complete="false" eventEol="true" properties="true" propertiesAsList="true" appName="xxxx" env="${env} 这些参数有没有个注释？
利用反射对比两个实体list或实体内字段值并输出工具类
优快云-Ada助手: 恭喜您写完第18篇博客！标题读起来很有意思，内容也很实用。您的博客一直给读者带来很多好的工具和技巧，让我们能更方便地处理实体列表或字段值的对比。不过，我觉得您可以进一步拓展这个主题，比如介绍如何通过反射对比实体内不同字段的值，或者分享一些实际应用案例。期待您的下一篇博客，相信您会继续带给我们更多有价值的内容！
冷热分离的demo（方案被收拢入口后的sharding分表代替）
pigcsy: GetProxy就是一个封装了下SqlSession和classNames的单例一个定时任务是定时把数据迁移冷库另一个是另一个是异步对访问到的数据延期防止被迁移到冷库迁移的话因为我们的场景不是面向高并发所以定时任务迁移其实能做查询收口的进来做分表吧
冷热分离的demo（方案被收拢入口后的sharding分表代替）
yapai: 谢谢分享，看了文章，在冷热分离的实现上很有收获，特别是使用 mybatis 插件来做冷数据查询这个，以前没有想过。但是还想问下文章提到但是没写的内容。 GetProxy 类是怎么实现的？还有两个定时任务具体做什么呢，还有冷热数据迁移是怎么做的？谢谢