- 博客(14)
- 收藏
- 关注
原创 OHDSI 相关内容 1
系列文章目录提示:这里可以添加系列文章的所有文章的目录,目录需要自己手动添加例如:第一章 Python 机器学习入门之pandas的使用提示:写完文章后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录系列文章目录前言一、OHDSI简介二、工具介绍1.ATLASCDMAtlas2.读入数据总结前言最近在做的工作涉及到医学科研的内容,接触到了不少行业相关的三方软件,甲方爸爸最近强推OHDSI组织相关的软件.这里对整个研究的内容和过程进行一下记录一、OHDSI简介The Observ
2022-04-20 09:20:49
1252
原创 开发日记 2021-04-08
接昨天,断点续传下载内容.因为要后台执行下载,所以这部分直接使用线程实现直接贴代码,需要注意的内容主要有以下几点最基本的,先写文件后更新游标其次,每次任务启动都需要对比存储的最大文件长度和新请求的文件的长度,以防万一最后,注意清理临时文件.另外,这份代码只适用于服务器端每次请求返回的文件相同,且无认证的情况public class ThreadDownLoad extends Thread { private String taskId; private String file
2021-04-08 11:25:30
473
原创 开发笔记 2021-04-07
这是个思维目录开发需求业务流程梳理服务器端和客户端心跳客户端Docker环境更新开发任务分解开发记录断点续传开发需求今天处于项目需要,需要开发一个Docker镜像推送同步的模块.具体的需求如下:服务器端维护需要推送的Docker镜像,并且可以对其进行任意修改.当镜像版本趋于稳定的时候,服务器端可以通知各个客户端来拉取新版本的镜像.客户端可以选择更新镜像或者不更新,不更新的话,部分新版镜像下使用的功能无法使用客户端在下载镜像的时候需要可以断点续传,并且下载完Image后,自动上传到客户端之后定的
2021-04-07 17:49:11
139
原创 开发日志 2021-04-02
今天Outrider正式版先扯点没用的东西,今天,感觉没干啥东西,之前做的一个功能模块需要在另外一版代码上重现出来,两版代码框架结构差别很大,比起重新写,懒癌发作的我,决定在现有的代码基础上,修改请求和返回的结构做兼容.模块代码当时要求能独立,所以,有不少内容是调用的RestAPI做数据访问.所以修改了REST调用的入参兼容和结果解析以后,工作基本完成.比重写一版代码来的快的多,但是代价是,当前代码多了很多无用的内容几乎起到了混淆的作用...
2021-04-02 17:00:59
100
原创 开发日志2021-04-01
2021-04-01 愚人节,哈哈哈好久没记录一下自己开发里程了,计划从今天起,每天写一写开发的内容.目前再做的内容,用到了开源标注工具 LableStudio.使用的版本是1.0LableStudio说明具体关于工具的说明,这里直接贴官方的Guide文档了功能说明1.0版本的LableStudio有多用户,多项目的功能,但是对于同一个LableStudio实例,多个用户之间的各个项目以及标注的内容是共享的,而实际业务要求,不同用户,只能查看分配给自己的标注内容.业务要求需要有用户的概念,每个
2021-04-01 14:59:25
151
原创 Plink分析执行记录
持续打鱼基础说明基本分析生成二进制PED概要统计:缺失率概要统计:等位基因频率基本的关联分析基因型和其他关联模型分层分析基本格式基础说明使用Plink1.9版本,样例数据为hapmap1运行环境为windows一下内容是基于1.07版的教程,在1.9版本上进行相应的测试,教程地址基本分析所有命令均是进入plink目录下执行,数据文件存放在data目录下,输出为out目录生成二进制PE...
2019-09-19 14:51:35
3606
原创 Elastic 开发记录 三、索引基本查询
博客打鱼党基本查询QueryBuilderQueryBuilder创建QueryBuilders常用方法说明基本查询public void baseQuery() { QueryBuilder builder = QueryBuilders.matchQuery("name", "张"); SearchResponse response = client.pre...
2019-09-05 10:52:56
345
原创 Elastic 开发记录 一、基本环境搭建
博客打鱼党平台环境ElastSearch简介ElasticSearch集群搭建Kibana安装最近手上的一个项目用到了ES相关的东西,研究了一下,简单敲了点可用的代码,在这里记录一下。平台环境ES和Kibana均采用的6.4.2的版本,Java API Client版本采用的和集群相同的版本ElastSearch简介ElasticSearch 是一个分布式、高扩展、高实时的搜索与数据...
2019-08-30 11:22:51
218
原创 Elastic 开发记录 二、索引结构创建及数据插入
博客打鱼党平台环境相关代码创建索引结构Mapping最近手上的一个项目用到了ES相关的东西,研究了一下,简单敲了点可用的代码,在这里记录一下。平台环境ES和Kibana均采用的6.4.2的版本,Java API Client版本采用的和集群相同的版本相关代码创建索引结构Mapping /** * 创建新的ES索引\n * 该方法的作用是根据传入的结构,创建索引结...
2019-08-29 15:18:51
900
原创 Nifi Processor开发 03
个人的一点经验Processor缓存因为Processor执行的时候,并不能很好的支持多线程(1.4.0版及1.8.0版个人测试结果),所以,为了让单个的处理节点性能得到提升,我们需要尽可能的使用缓存,这里个人建议直接使用JVM,可以不依赖其他第三方的内容,但是如果缓存的东西较多的时候,JVM可能不是很合适,推荐Redis等内存数据库。对于第三方的缓存系统,需要关注部署是否简便或者原有环境是否...
2019-04-22 15:42:35
356
原创 Linux 命令整理
软连接ln -s ${sourceFilename} ${linkName}FTP 添加用户并制定目录useradd -d ${targetDir} ${username}passwd ${username}usermod -s /sbin/nologin ${username}修改/etc/vsftpd/vsftpd.conf如下:chroot_local_user=YES#ch...
2019-04-15 11:00:34
129
原创 Nifi自定义Processor开发准备工作
简单整理一下有关Nifi自定义Processor的准备工作。由于Nifi对于开发Processor有自己的一套框架,所以在开发自定义Processor上大致有两条路可以走在原有的基础上进行扩充,这样的方法优点很明显:容易搭建环境;在现有的基础上进行修改,不容易出现依赖问题。缺点也同样明显,首先就是没办法自由的修改项目名称等,因为有已经存在的组件,贸然修改可能会造成更大的问题;依赖冲突,因...
2019-04-10 10:55:10
1283
原创 Nifi Processor开发 02
简单记录一下关于Nifi中,组件属性的定义部分样例代码如下:private static final PropertyDescriptor CATALOG_NAME = new PropertyDescriptor.Builder() .name("catalog").displayName("Catalog Name") .descriptio...
2019-04-09 11:38:21
443
原创 Nifi Processor开发 01
概览案例源码类属性方法onTrigger详解参数获取、解析方式1.获取PropertyDescriptor的输入参数2.获取FlowFile中的Attribute开发常见问题,及解决方法1.flowfile没有转发或者已经转发错误2.关于远程调测以简单的向处理的数据中添加常量为例,简单介绍一下Nifi自定义processor开发的过程案例源码//不需要关注上下文@SideEffectFre...
2019-04-08 15:51:14
751
3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人