- 博客(619)
- 收藏
- 关注
RSS订阅原创 13TB的StarRocks大数据库迁移过程
公司有一套StarRocks的大数据库在大股东的腾讯云环境中，通过腾讯云的对等连接打通，通过dolphinscheduler调度datax离线抽取数据和SQL计算汇总，还有在大股东的特有的Flink集群环境，该环境开发了flink开发程序包部署，实时同步数据。 公司业务帆软报表平台有40张左右的报表连接的Starrocks大数据库。Starrocks大数据库整个库大小超过13T...
2024-12-02 11:20:00
963
原创 数据抽取平台pydatax使用案例---11个库项目使用
数据抽取平台pydatax，前期项目做过介绍： 1，数据抽取平台pydatax介绍--实现和项目使用 项目2： 客户有9个分公司，用的ERP有9套，有9个库，不同版本，抽取的同一个表字段长度有不一样，字段可能有多有少，客户ERP核心分公司ERP几个月后有大版本升级。 在2023年12月，当时做这个抽取时，客户只是做一个分公司的，抽取9套其中的一套ERP的...
2024-11-25 11:11:00
667
原创 多年客户金币计算错误解决过程
公司SaaS系统有个给客户的员工发放金币，最后计算金币老是流水和总额对不上，以前负责这块的人做过修改还是不对，后来这负责人离职，接手大数据的事情后，该客户真在用金币这块业务，而且财务用这个结算对账，2023年底客户逼急了，要彻底解决这个问题: 和负责这块的产品经理沟通这块内容，说这个金币计算有历史原因导致流水和总额不对，不确定是谁不对，程序也有bug，但现在要重新计...
2024-11-20 11:08:00
261
原创 MySQL无开通SQL全审计下的故障分析方法
几年前MySQL数据库出现突然的从库延迟故障和CPU爆高时，如何排查具体原因，可能说已在腾讯云的MySQL库里开启了SQL全审计，记录了全部执行的SQL，再通过下面的方法就可以很容易找到原因： 1，实用QPS和TPS高的高效分析方法 但如果没有开通SQL全审计，如何去找原因。当然说可以看慢SQL日志，但这时的慢SQL日志记录的SQL不全，就不好判断分析...
2024-11-18 11:09:00
733
2
原创 历程 | 华为十年：从DBA到副总裁的辛酸与喜悦
导读:当我经过长时间的思考后准备给自己的职业生涯带来一个大的转折，并正式提交了离职报告后，回想在公司的这十年，百感交集。作者：徐家骏 |文章来源：码农徐家骏走入华为：被一张华为人报“骗”到华为1997 年7月16日，我只身提着一个包从深圳宝安机场下飞机，走出机场，天是那么蓝、白云那么低、空气那么潮，仰头望天，对这个城市，对公司、对即将开展的工作和生活、对自己的前途一片茫然。到了科技园，...
2024-11-15 22:06:00
1111
原创 MySQL核心业务大表归档过程
记录一下2年前的MySQL大表的归档，当时刚到公司，发现MySQL的业务核心库，超过亿条的有7张表，最大的表有9亿多条，有37张表超过5百万条，部分表行数如下： 在测试的MySQL环境 ： pt-archiver 工具，测试200的dev实例，5800万条数据，纯删除1000万条数据，花费约9分多钟。 pt-archiver --s...
2024-11-06 14:31:00
722
原创 风水的核心原理
种一德而百善丛生，动一念而乾坤皆变；好文易删，自行复制备存何为风水？“风”就是气氛和场能，“水”就是流动和变化。风水的原理是什么呢？非常核心的四个字——“心生万法”，非常简单，但是大道至简。所有的风水中：第一风水是什么？是人。人的第一风水是什么？是心。人的第二风水是什么？是嘴巴。人的第三风水是什么？是行为。思人恩德，想人好处，这叫聚光。光向上走，表现在脸上，就是微笑。微笑的脸是元...
2024-11-04 16:25:00
571
原创 思考能力的提升从把复杂问题简单化开始
在生活中我们会遇到各种各样的问题。有些问题非常简单；有的却非常复杂，让人们无从下手去解决。但有些看似复杂的问题，只要我们仔细去分析它们，拨开云雾，自然就会见到“青天”。这种分析方法，就是“化繁为简”的思考模式，也就是——简化思考法。当复杂的问题被简化之后，自然就会找到解决的突破口。例如尝试分析一下这道题目：有A、B两个考察团，各乘一辆大客车到野外考察。每辆车上坐的都是100人。他们结伴而行...
2024-10-31 14:38:00
1255
原创 东岳大帝回生宝训
声明：本故事部分虚构，以娱乐为主，绝非宣扬封建迷信思想，请诸位读者明鉴。要是您能从这个小故事中悟出一些道理，那将是作者极大的荣幸。文中图片来源于网络，若有侵权联系必删。 刘嘉会在唐太宗贞观年间官至校书郎，到了唐高宗永徽年间，因为支持反对唐高宗改立武则天为皇后的褚遂良和长孙无忌，引起了唐高宗的憎恶，就随便找了个借口，把他流放到了兰州。刘嘉会在兰州思念家乡的亲人，每天早晚必定要面朝东...
2024-09-22 11:13:00
480
原创 学会灵活地用“中庸”的思想，善思多变，是成功的保证
01、开篇序 孔子说过：“执其两端，用其中。”在实际生活中要能变通地把矛盾转化，“比中而亓”,采用“中庸”的态度与人相处，因势利导，换一种方式去解决矛盾，绝不能“一条道走到黑”,学会灵活地用“中庸”的思想，从而达到的境界。 一切事物都是对立而互补的，阴阳相生相克，变化相辅相成，事件相激相随。固阴阳之道有三： 一是阴道。如黑暗、弯曲、阻碍、阴柔、巧妙等事物阴性的一...
2024-06-20 15:19:00
356
原创 准提法介绍
密宗其他咒子，其他法门就不一定行，有些咒子，如吃了一口大蒜、犯了什么忌讳，这些咒子就不灵了。只有准提法，一切不避讳。密宗修准提法，修到成就了，一法包括一切法是很直捷，不分荤素垢净，真是方便。等，如果是下品下生往生的，连阿弥陀佛都看不到，因为他过去无始以来的业力还没有消除，要到极乐世界花开见佛至不退转地时，业力才慢慢跟着消。密法也是如此，不仅只是带业成就，换言之，密法的力量更严重了，立刻转业成就。在大藏经中，准提法有好几种可供参考，但最好的是唐朝道殿法师的《显密圆通成佛心要》，你们好好研究通了也就成佛有余。
2024-06-14 10:28:10
573
原创 工作疑难问题解决7例
这个大表拆分能完成，不是靠一再的施压力和只看结果，而是真正去了解他们的实际情况，给研发提供方便高效的帮助，大家齐心合力去完成一件事。
2024-05-20 17:23:51
349
原创 报表查询数据异常解决方法
缘起 今天早上一到公司，技术支持的小伙就说一个后台报表，计算的任务完成率超过100%，有异常，客户要用，比较急，要解决这个问题。 解决过程 自从接了上任的报表计算，这个就头疼，没办法硬着头皮查什么原因，报表的SQL比较简单，一个查：接受任务数表a, 一个查：完成任务数表b a和b表，都是直接计算的结果表。 第一步： 看看是...
2024-04-29 15:32:00
584
原创 读懂王阳明的人，不再有烦恼
1508年，明武宗正德三年。由于开罪炙手可热的大宦官刘瑾，挨了四十大板、并被“流放”的王阳明，历经艰难险阻，终于风尘仆仆地抵达“蛮荒之地”——贵州龙场驿。受尽折磨的王阳明，却无暇顾及自身遭遇，而是始终在思考一个哲学问题“人如何才能做圣贤”。久久上下求索而不得，终于在某个夜半时分，他激动地大喊大叫，说出那句“圣人之道，吾性自足，向之求理于事物者误也”，史称“龙场悟道”。贵州龙场...
2024-03-27 15:12:00
838
原创 中医养生的最高境界：养心
中医的最高境界是养生，养生的最高境界是养心。所以，就养生而言，下士养身，中士养气，上士养心。看一个人也一样，观相不如观气，观气不如观心。1，一切药物对治病来说都是治标，不是治本，不管是中医还是西医。因为一切的病都是错误的因产生错误的果。错误的因不除，错误的果就不会绝根。健康的根本在心。一切法从心生。心净则身净。所以得病了，不要向外求，要靠自己自身的修复系统来修复自己的疾病。其实人和动物是一样的...
2024-03-25 18:04:00
438
原创 真正的行善是一种内心的修炼和升华
我渴望通过行善积德，去帮助那些需要帮助的人，去改变那些不公的命运，去照亮那些黑暗的角落。那时的我，如同一位骄傲的船长，驾驶着自己的信念之船，在波涛汹涌的人生海洋中破浪前行。它需要我们用心去感受众生的需求和痛苦，用爱去温暖他们的心灵，用智慧去启迪他们的思想。众生在度我，是因为他们给予了我成长的机会，让我看到了更广阔的世界和更深邃的人生。我们都在用自己的方式去演绎着人生的故事，也都在别人的故事中扮演着重要的角色。随着岁月的流转，我渐渐发现，我所认为的度化众生，其实只是一种自我的幻象。
2024-03-20 11:53:13
186
原创 数据抽取平台pydatax介绍--实现和项目使用
因项目2中：数据仓库使用的GreePlum，datax的驱动用的是gpdbwriter-v1.0.4-hashdata.jar，该驱动自动删除"0x"非法字符，就不存在该错误。项目2： 客户有9个分公司，用的ERP有9套，有9个库，不同版本，抽取的同一个表字段长度有不一样，字段可能有多有少，客户ERP核心分公司ERP几个月后有大版本升级。# 获取分公司库该表的字段，如对比核心库表字段的缺失，使用null as 字段替换，如果多余则废弃，取9个库的最大值，作为目标表字段的字段长度。
2024-02-28 10:11:17
1110
原创 数据抽取平台pydatax介绍
缘起一： 公司现有数据仓库，是通过kettle从mysql抽取到目标库，运行多年，主要有以下问题， 1，效率低：kettle抽取行数少 2，容错性差：一个表抽取出错就导致后续计算会出问题， 3，扩展性差： 对多库多表等支持不好 近300张表抽取，再加上计算，每天都算到7点，还有2个巨大的计算...
2024-02-21 15:58:00
988
原创 中国台湾圣贤堂《天堂游记》和《阴律无情》等鸾书善书下载
校验MD5: 3B4D46E0D78E4D2530C38FAE8763E238 更新日期：2023年11月9日。《天堂游记》, 《地狱游记》, 《人间游记》, 《训女宝箴》《大道康庄》,《大道心德》,《天道奥义》,《道心秘藏》《圣道旅程》, 《理天游记》 , 《在家修行法要》《极乐世界游记》,《宽净法师_西方极乐世界游记》《人间的智慧》,《言行功过录》,《云阴游地府》《活狱现形记》,《生灵的悲凄》,《末法消灾录》个人网上搜集经典修行，鸾书和善书等。
2024-01-15 16:56:42
1428
1
原创 高效发现和解决insert字段长度不够的报错
早上发现执行的PostgreSQL存储过程报错，错误如下：300-value too long for type character varying(100)，一看就是表字段的长度太小，从提示看是，字段是varchar(100)的字段长度不够。看了具体表：看了表字段，有好多个字段是varcahr(100): 如下图： 这么多字段v...
2023-12-31 17:44:00
1342
原创 无心的力量
多年前我认识一位老法师，在江苏的一个偏僻地方山上的寺院里，他老人家那会已经八十多了，虽然是住持，可是他也是一位画僧，天天在寺庙禅房里画画，很多社会上的人都去找他画画结缘。他画的画很有禅意。老和尚按照他的宗派脉络，好像是和弘一法师有关我记得。可是这位老和尚，生性不爱交际，不喜欢讲法布道，庙子也小，自己常常躲在山上乐得清静。我那时通过朋友和他认识了，与他交流觉得他人特别亲切，毫无主持和尚的作派，好...
2023-10-08 18:31:00
67
原创 背诵经咒的秘密--无求而自得
我多年前曾经去峨眉山拜佛，当时我正在学习修行，对背诵经咒等事情非常着迷。自己想逼着自己背诵各类长咒和经文。于是也想在峨眉山上寻访一下高僧大德咨询。上去金顶后就是拜仏，拜完了，却遇上各寺庙里在举办法会，也没有什么门路可以找到大德。只好自己往后山走。因为我以前曾经在茅山昆嵛山等山的后山遇到过老道长，所以在峨眉山我也想碰碰运气。我一个人走向后山，走着走着，走到了一处密林，天光被遮、地上全是苔藓...
2023-10-08 10:37:00
80
原创 《道德经》的八种哲学思维
《道德经》由道家创始人老子所著，虽然只有短短几千字，但是千百年来研究它的人数不胜数，其中的哲理到今天仍旧闪耀着光芒。要说真正能把它的智慧参透，那么从古至今恐怕还没有人可以做到，足见它的智慧有多么强大。 如果说把《道德经》完全参透是难如上青天的问题，那么参悟其中的一些道理还是没有那么难的。《道德经》中有八个思维很重要，这八个思维透露着人生的智慧和命运的哲理，只要读懂了，你的人生道路...
2023-09-08 17:32:00
102
原创 网上语句摘录
中国的文化修行的四个阶段中国的文化是一部丹道金书，是一部次第完整的修行理论体系。中国文化分为四个阶段。 第一个阶段是告诉我们如何做到身心合一，让我们成为一个全然的人，而不是一个烦恼纠结的人、分裂的人。也就是让我们活在当下，人在此，心也在此，而不是人在此，心却飞掉。心飞了，你就是一个分裂的人。一个分裂的人，做什么事情都无法进入状态。如何才能做到身心合一呢？方法很多，也就是在这个阶段产生...
2023-08-21 15:22:00
51
原创 济公活佛说法辑
1、我们为什么要求道？求道有什么好处？道有什么宝贵？这有必要知道个清楚。如果不知为什么要求道，而人拜跟人拜，这称为迷信。一日十二时，一月三十日，一年十二月，一世三十年，一运十二世，一会三十运，一元十二会。一元129600年。 [注1]一元十二会中，以午会气数最旺，好比中午的太阳。从古代人住山洞，进步到现代大楼，冷暖气设备、电视、电唱收音机；从古代人穿树叶，进步到现代五花十色的纺织品；从古代坐...
2023-08-04 15:40:00
570
原创 历代高僧放生诗略解
戒杀放生思想是佛教的根本思想，也是佛教信徒培养慈悲心的根本途径之一。自佛教传入中国以来，历代有很多高僧大德都积极劝导世人戒杀放生，他们创作了大量关于戒杀放生的诗歌。这些诗歌分别从不同方面劝人戒杀放生、茹素护生、救拔异类，以此来培养慈悲心，护惜物命。 一、慧道人《戒杀歌》 慧道人是唐代著名高僧，他所创作的《戒杀歌》在佛门中广为流传，是劝人戒杀放生的著名诗歌。诗云： 世人生儿如掌珍，...
2023-07-28 18:15:00
199
1
原创 邱祖忏悔文
《邱祖忏悔文》是金末元初道教全真道祖师丘处机创作一篇忏悔戒文。这篇文章通过写人从历劫以来，因做了种种“离了道”，“偏了法”的事情而造下了诸多过错，使人诸事不顺，无法称心如意。而人在遇到这种“遭遇”时就要反省自己，并且有幸叨逢正教以后，要好好修行学道，为不堕恶趣，超脱成仙做准备；表达了其教人发愿而利益众生的大同思想。 创作背景 丘处机祖师见诸弟子在诸道观，不思精进修持，以图安逸享...
2023-07-27 10:08:00
1160
原创 杀吃六类灵性动物的业报病症揭示
人其实就是具有灵性的高级动物而已，说一个动物有灵性，其实就是在说这个动物是具有高级意识的，当你伤害了这类动物时，很容易招来他们的报复，因为他们会记住你，并且还会找到你。所谓的灵性动物我们归纳为能快速报业的高级智慧动物。现在大概细分为以下六种：一，龙蛇类，如蛇、蟒、蜥蜴、穿山甲、鳗鱼、黄鳝、泥鳅、洞螈、娃娃鱼、老鱼、海蛇，蛇鱼，鲤鱼(鲤鱼自古在中国都是极其祥瑞的灵物。鲤有龙相，却无龙形，一跃...
2023-07-24 17:40:00
673
原创 邱处机真人成道记
邱处机，是全真七子中最广为人知的一位道长，他是最后一位被重阳真人度化的弟子，也是最年轻的一位。他天资聪颖，似乎成就越大，也注定了磨难越多，邱真人的得道经历了比同门师兄们都要多的磨难和考验。在民间，流传着很多关于他的故事和传奇。在《七真史传》的记载中，我们看到了一个从凡人到神仙的邱真人，他对道的追求，对师的恭敬，对慈悲的坚守，让人在赞叹羡仰之余，不禁生发出更强的向道之心。无心红尘功名...
2023-07-13 15:56:00
374
原创 人要谨记在心的100条生命规律
全阳为仙，全阴为鬼，半阴半阳为人。人的一生就是逐渐衰老，走向“混沌”。没有了阳气(五藏六腑的功能)生命也就停止了。1、记住：睡觉是养生第一要素。睡觉的时间应该是晚21：00——早3：00。因为这个时间是一天的冬季，冬季主藏，冬季不藏，春夏不长，即第2天没精神。2、一切药物对治病来说都是治标,不是治本,不管是中医还是西医。因为一切的病都是错误的因产生错误的果，错误的因不除,错误的果就不...
2023-07-07 17:45:00
67
原创 从数据库优化到治病(3)---度过灾难过程
最近突然想起要写下自己在2018年发生的一系列事情，给自己警示和提醒。 2018年上半年的一天晚上，自己突然做了一个梦，梦中有人跟我说："你今年会有灾难，如果度过去就会活到多少多少岁"，梦里听到灾难，我警觉的说，我已经在一个风水师父里请了护身符了，记得我还把护身符给她看。 因为2018年我犯太岁，特意请了护身符。后来有次我还跟师父的爱人(也是玄学比...
2023-07-07 17:41:00
63
原创 痛苦是让人觉悟的最快方式
这些年，我总在思考一个问题：人生的意义究竟是什么？难道是我们平时所说的成功吗？我见到过很多成功人士，他们生活的并没有我们想象的那么完美。无论一个人取得了什么样的成绩，总有我们看不到的辛苦。也可以说：所谓的成功，无非是换一种方法受苦。人生是一个天平，一个托盘叫“人前富贵”，另一个天平叫“人后受罪”，这两者永远都是平衡的。直到最近我们终于悟到了：人生就是一场修行。而世间那些真正的高人，都...
2023-07-07 11:01:00
69
原创 真武祖师玄天上帝宝训集
祖师宝训集 莫道造恶不报．直待恶贯满盈． 莫道修善无应．直待善果圆成． 若有人间私语．天上听若雷霆． 不可欺心暗室．神目如电光荧． 一劝敬重天地．心香一柱晨昏． 二劝孝敬父母．堂前生佛二尊． 三劝皈依三宝．儒释道教同伦． 四劝修齐布施。报答四重深恩， 五劝善男信女．持斋念佛看经． 六劝州县官吏．治民如水之情． 七劝救济孤滞．四生六道苦轮， 八劝富家布施．...
2023-07-07 10:01:00
594
原创 真正的修行人，应该是越修越顺
常常有人问我，为什么越修行磨难越多、阻力越大？实际上，若真出现这种情况，要么未曾真正开始修行，要么修行中出现偏差。一般来说，修行过程中遇到磨难是很正常的，遇到阻力也是理所当然的。不过，如果修行了很长时间，不仅自己的生活未见改善，而且还处处遭遇阻碍、事业不顺、家庭不和、亲友不睦、身体上还出现各种状况，那真的需要停下来认真思考一番。按理来说，修行之后应该越来越顺才正常，如若不顺，要么...
2023-07-05 16:13:00
85
原创 王德峰-王阳明心学及其现代意义
好，各位朋友很高兴再一次来到这个中智视野这个文化讲台，有些是我的老朋友，有些是新面孔，那么对新朋友们我说一句抱歉的话，我烟瘾极大，讲课不抽烟萎靡不振，请大家原谅，先让我抽一次。我们今天来讲这样一个题目就是：王阳明心学及其当代意义 王阳明这个中国明代的大思想家，在中国本来是家喻户晓，我讲的是本来历史上。在今天是不是家喻户晓妇孺皆知我不了解。王阳明新学的思想和王阳明的著作最重要的是《...
2023-05-15 10:38:00
681
1
原创 夫妻惜缘(心得)
丧偶十年的老居士，揭开夫妻情缘的真正秘密。到底为什么成了夫妻，做夫妻应该怎样做？我认识一位老居士，六十多了，他学佛多年，独自住在一个小城市，我有次去那小城市办事，和他见了一面。和他聊了很久。他的妻子癌症走了十年了，他一直也没有找新的老伴。自己一个人住着，每天出去买个菜，溜一圈，就回家待着。我问候他：你咋不找个伴呢，互相也有个照应。他说：我老婆才刚走，我就找伴，不合适吧。我说：你太...
2023-03-31 11:19:00
78
原创 福报与财富
之前讲过福气，不知道还有多少读者记得，内容大概是这么写的： 谈到福报，我从来不认为福报与财富是划等号的，但是不少的人会将两者联系起来。 没有获得意外之财，那就是没有福报，这种想法是片面的。所谓福报里的福，一般是指五种福气： 第一福气是长寿，能得到这种福报，需要做的是有好生之德，对于生命有敬畏和爱护之心，与此同时，能够布施给他人食物。 第二福气是富贵，如果能够非富且贵，一般来说...
2023-02-22 10:59:00
76
原创 幸福之道
文／耕云先生 讲于一九九三年四月四日 一切的供养，以法供养的功德最为殊胜。为什么说法供养最殊胜呢？因为它最为彻底。一般来说，物质并不能填补心灵的空虚，也不能去除人的无明与烦恼。缺乏物质，人也会活得快乐、幸福；像 孔子 “饭疏食饮水，曲肱而枕之，乐亦在其中矣”， 颜回 “一箪食、一瓢饮，居陋巷，人不堪其忧， 回 也不改其乐”，这都是幸福。因为他们心里有了一个理念，明了人生的真...
2023-01-31 16:28:00
91
原创 济公活佛慈语集
济公活佛慈悲：◎ 修道若脾气毛病不改永远都是众生，要改的地方自己都很清楚，只要用心,每个人 都可达到目标理想的。◎ 道理很好，就是没有办法应用在日常生活当中。所以修道随时随地皆可反省，遇到事情要“当下”觉悟。◎ 人为何会这么多痛苦 ? 就是因为做了太多后悔之事，或自己不满意之事 ， 所以会如此痛苦。◎ 修行不是比学问、地位、是你的真诚奉献 。自己要帮助自己，你才能够改变...
2022-12-31 22:52:00
86
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人