关于一个读数据到buffer，另外线程从buffer中提取数据的问题

最新推荐文章于 2021-08-30 11:14:05 发布
最新推荐文章于 2021-08-30 11:14:05 发布 · 949 阅读 · 0
文章标签：

#数据结构 #Oracle #设计模式 #MySQL #工作

本文介绍了一种跨数据库同步方案的设计思路，通过读取源Oracle数据库的最新ID，从目标数据库（如MsSQL、MySQL）中提取更新的数据，并利用多线程与缓冲区确保数据的准确写入。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

现在要设计个简单的java应用程序，其主要工作就是
1、从目标数据库（Oracle）中获取最后的一条数据的ID，赋给MaxID
2、根据1的ID，从其他数据库（如MsSQL、MySQL）提取大于该ID的数据。不同数据库，数据结构不同。
3、将获取的数据写入Buffer中
4、另外的一只线程负责从Buffer中提取数据，提取后先设置MaxID为当前ID，然后将数据写如1中的Oracle，同时从Buffer中删除该条记录

图形结构如下：
|---------------------------------------------------|
读取当前ID值=》读取大于该ID的10条数据=》写入Buffer |
| |
从Buffer中读取值=》设置ID值=》写入目标数据库

过程中保证数据的准确性

我该怎么去设计他们之间的关系，以及采用什么设计模式比较好，便于扩展
stefliy
关注
Python从0到100（一百）：基于Transformer的时序数据建模与实现详解
Hello大家好，我是Dream，如果帮得到你，那我深感荣幸！想进粉丝福利群及免费送书群，直接私信我拉你。交流学习、商务合作：https://bbs.youkuaiyun.com/topics/614347534
06-23 4万+
Transformer for Time Series (TTS-Transformer) 是一种基于自注意力机制的深度神经网络架构，专门针对时序数据处理进行优化设计。它通过多头自注意力机制捕获时序数据中的长距离依赖关系，同时结合位置编码和层归一化等技术，在保持计算效率的同时显著提升了模型对复杂时序模式的建模能力和预测精度。
Buffer数据结构
qq_23542345的博客
03-20 1817
muduo中的Buffer为封装了的vector。vector为一块连续空间，且其本身具有自动增长的性质，它的迭代器为原始指针，使用起来较为方便。 vector另外Buffer有两个data member，指向该vector中的两个元素，这两个index为int类型。 为什么这两个index为int类型？ vector自带自动扩增功能，要是index为指针的话，扩增之后指针会失效，而int类
多线程读写问题循环buffer
08-18
实现多线程读写缓冲区的小例子。一个任务读文件并写入缓冲区，一个任务从缓冲区读内容写到文件，缓冲区可循环。读大文件请稍微改下缓冲区大小。
读完整的数据流
都市无名者的博客
02-08 395
var body = make([]byte, 0) var len = 0 for { var buffer = make([]byte, 1024) n, err := c.Request.Body.Read(buffer) if err != nil && err != io.EOF { gLogger.Error("read http body fail...
多进程双buffer读取并处理
ximikang的博客
12-06 579
题目要求 编写Linux平台下的两个C语言程序实现如下功能： （1）X、Y两个进程相互配合实现对输入文件中数据的处理，并将处理结果写入输出文件。 （2）X进程负责读分块取输入文件，并将输入数据利用共享内存传输给Y进程。 （3）Y进程负责将读入的数据（假定皆为文本数据）全部处理成大写，然后写入输出文件。 （4）为提高并行效率，X、Y两个进程之间创建2个共享内存区A、B。X读入数据到A区，然后用Linux的信号或信号量机制通知Y进程进行处理；在Y处理A区数据时，X继续读入数据到B区；B区数据被填满之后，X进程通
C语言学习笔记——缓冲区(buffer):全缓冲、行缓冲、无缓冲
phily123的博客
08-30 3622
添加链接描述
python 使用多线程创建一个Buffer缓存器的实现思路
01-21
定义一个Buffer类，再其构造函数中创建一个buffer空间（这里最好使用list类型） 我们还需要的定义线程锁LOCK（数据传输和提取的时候会用到） 因为需要两种方法（读数据和取数据），所以我们需要定义两个锁 实现的...
从一个文件中提取很大的数据并将价格按从大到小排序，用c语言解决
12-14
创建一个缓冲区（例如定长的`char buffer[]`），每次从文件中读取一定数量的数据存入缓冲区，然后对缓冲区内的数据进行解析和存储。 ```c #define BUFFER_SIZE 1024 char buffer[BUFFER_SIZE]; size_t bytesRead =...
请用C语言编程：持续接收数据至缓存，每组数据长度为20，每10ms从缓存中提取最先存入的一组数据到buffer并将缓存中该组数据清除，数据缓存先进先出
05-25
以下是一个简单的示例代码，实现了持续接收数据至缓存，以及按照先进先出的顺序从缓存中提取数据到buffer： ```c #include #include #include #include #include #define BUFFER_SIZE 10 // 缓存大小 #define...
GstBuffer *buffer = gst_sample_get_buffer(sample);怎么通过这个函数把第一帧数据保存到本地
最新发布
07-18
好的，用户现在的问题是使用GStreamer中的gst_sample_get_buffer函数将第一帧数据保存到本地。首先，我需要确认用户对GStreamer的基础知识是否了解。他们可能是在开发多媒体应用，需要处理视频帧的保存。 用户提供...
C语言 fread 以二进制形式读取文件中的数据
用技术驱动美好生活！
05-08 2871
函数原型： #include <stdio.h> int fread( void *buffer, size_t size, size_t num, FILE *stream ); #include <stdio.h> #include <string.h> int main(void) { FILE *file1; char name[32]; int age; int ret; file1 = fopen("student.txt", "rb");
C语言fread()函数：读文件函数(从文件流读取数据)
热门推荐
飞翔的小鸟
10-10 1万+
相关函数：fopen, fwrite, fseek, fscanf 头文件：#include 定义函数：size_t fread(void * ptr, size_t size, size_t nmemb, FILE * stream); 函数说明：fread()用来从文件流中读取数据.  参数stream 为已打开的文件指针, 参数ptr 指向欲存放读取进来的数据空间,
数据库系统实现（BUFFER数据下推算法）
昆仑山上一棵草
06-13 372
使用BUFFER CACHE进行数据的处理，KEY进行INSERT的过程中，首先进行PAGE算法，对应到TREENODE上，进行比较，如果大于TREENODE 对应的MAX（TREENODE 的FILE中SEGMENT的数据没有满的情况下，不进行MAX的比较，都可以进行INSERT本LEVEL 的MSGBUFFERLIST 中），继续下一LEVEL的TREENODE的判断，过程进行重复即可。 某Level 的MSGBUFFER的数量超过阀值，需要进行数据的下推，会触发本LEVE...
java bufferwrite覆盖写入文件_运用BufferedWriter把数据写入文件
weixin_32365777的博客
02-28 3394
public class WriteReadFiles {private static Logger log = LoggerFactory.getLogger(WriteReadFiles.class);public boolean writeFile(String content) {String filename = "E:/java_src/MVCDemo3/MVCDemo3/accoun...
一个线程往缓冲区buffer写数据，另外三个读数据，读和写要分开
tkp2014的专栏
06-22 3577
#include #include #include using namespace std; // write线程写了之后，read1、read2、read3才能读，且只有3个线程都读完之后，write函数才能向buffer中写 CRITICAL_SECTION cs; typedef struct { HANDLE h1; HANDLE h2; HANDLE h3; HAN
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值