一名极客-优快云博客

原创数据增量同步工具 Zero 支持Redis、Redis-Cluster、ES、Kafka、Mongodb、Postgresql、TiDB、数据审计超高性能 Golang

开源地址 https://github.com/gitstliu/MysqlToAll MysqlToAll 将mysql数据以指定的格式同步到redis、redis-cluster、kafka、es、本地文件系统的工具高性能配置方法 canalconfigs xxx.toml canal配置文件 xxx.pos binlog解析位置文件 config config.toml 输出源配置文件...

2019-07-05 11:56:21 1759

原创生成不重复的ID

基于GO语言开源snowflake算法实现提供HTTP接口 GITHUB地址: https://github.com/gitstliu/idservice 按照一下步骤运行第一步在配置文件中设置 ServicePort, WorkerId, DatacenterId 第二步运行Main方法第三步用POST方法访问 http://{your_address}:{Port}/ids ...

2019-02-22 10:22:03 1353

原创 GO 语言常用工具类-通用方法集合

GO 语言常用工具类-通用方法集合 github: https://github.com/gitstliu/go-commonfunctions 1. PanicHandler 通用Panic处理器 2. InterfacesToStrings 将Interface数组转换为String数组 3. GetFilesWithFolder 获得文件夹下所有文件 4. ObjectToJson 将对象转...

2018-09-18 11:28:58 4449

原创一个基于PYTHON的Log框架类

一个基于PYTHON的Log框架类 Github连接: https://github.com/gitstliu/py-logger import logging.handlers class Logger: logger = None log_level = logging.DEBUG log_file = "sa.log" log_max_byte =...

2018-09-05 17:24:41 17704 1

原创一个基于golang的redis cluster 客户端

用法引入并创建集群 import "github.com/gitstliu/go-redis-cluster" cluster, err := redis.NewCluster( &amp;redis.Options{ StartNodes: []string{"127.0.0.1:7000", "127.0.0.1:7001", "127

2018-09-04 13:19:54 24031 2

原创 golang实现基于snowflake算法的ID生成器

golang实现基于snowflake算法的ID生成器 github链接: https://github.com/gitstliu/go-id-worker Snowflake算法 Snowflake 算法是Twitter的分布式ID自增算法,用于生成可以跨数据中心的全局唯一ID(不连续)。 SnowFlake算法生成id的结果是一个64bit大小的整数。 bit说明 1位...

2018-08-28 10:25:00 27485

原创基于深度学习的分词模块对新闻的分词准确率高达96%以上

基于深度学习的分词模块对新闻的分词准确率高达96%以上 Github 代码链接: https://github.com/gitstliu/Segment 已经训练好的模型,提供http接口服务。如果你不想管原理，只是想使用分词功能，直接下载代码运行就好。基于word2vec和双向RNNS算法,在新闻预料库上进行训练得到模型(训练时间较长,所以如果你没有一块好的GPU,请直接使用) ...

2018-08-28 09:54:12 24451 7

原创基于已有模型的情感分析系统

基于已有模型的情感分析系统代码连接 https://github.com/gitstliu/SentimentAnalysis 基于word2vec算法使用外卖评价数据和酒店评价数据训练出来的情感分析模型使用前需要对语言先分词,分词结果作为系统的输入参数,简单研发即可实现服务接口. 如果本身有分好词的数据集也可以联系作者帮忙训练对应的模型. 创建一个WEB服务 # enc...

2018-08-17 18:01:53 25064

在白板上作画