同步异步阻塞非阻塞

同步:在发出一个功能调用时,在没有得到结果之前,该调用就不返回。必须一件事一件事的做,前一件事做完了才能继续做下一件事。

异步:在发出一个功能调用时,调用者不能立即得到结果。实际处理这个调用的部件在完成后,通过状态、通知或者回调函数来通知客户端。

阻塞:在调用结果返回之前,当前线程被挂起,函数得到结果之后才返回。

非阻塞:在不能立即得到结果之前,该函数不会阻塞当前线程,而会立即返回。

注意:

同步和异步是指Client端访问数据的机制。同步一般指主动请求并等待IO操作完毕的方式,当数据就绪后在读写的时候必须阻塞。异步是指主动请求数据后便可以处理其他任务,随后等待IO操作完毕的通知。

同步和异步主要侧重于访问数据的方式。同步需要主动读取数据,在读写数据的过程中还是会阻塞。异步只需要IO操作完成的通知,并不主动读写数据,由操作系统内核完成数据的读写。

阻塞和非阻塞是Server端访问的数据如果没有就绪,进程需要等待。简单说相当于函数内部的实现区别,也就是未就绪时是直接返回还是等待就绪。

阻塞和同步的区别:对于同步调用来说,很多时候当前线程还是激活的,只是从逻辑上当前函数没有返回而已。阻塞是当前线程被挂起。

一个完整的I/O的两个阶段:

①查看数据是否就绪,即内核等待数据可读

②进行数据拷贝,即内核将数据拷贝到用户线程

同步IO和异步IO的区别:数据拷贝的时候进程是否阻塞,即数据拷贝是由用户线程完成还是内核完成。

阻塞IO和非阻塞IO的区别:反映在IO操作的第一个阶段,查看数据是如何处理的。

                                                                                                                                                                                                                                      

内容概要:文章详细介绍了ETL工程师这一职业,解释了ETL(Extract-Transform-Load)的概念及其在数据处理中的重要性。ETL工程师负责将分散、不统一的数据整合为有价值的信息,支持企业的决策分析。日常工作包括数据整合、存储管理、挖掘设计支持多维分析展现。文中强调了ETL工程师所需的核心技能,如数据库知识、ETL工具使用、编程能力、业务理解能力问题解决能力。此外,还盘点了常见的ETL工具,包括开源工具如Kettle、XXL-JOB、Oozie、Azkaban海豚调度,以及企业级工具如TASKCTLMoia Comtrol。最后,文章探讨了ETL工程师的职业发展路径,从初级到高级的技术晋升,以及向大数据工程师或数据产品经理的横向发展,并提供了学习资源求职技巧。 适合人群:对数据处理感兴趣,尤其是希望从事数据工程领域的人士,如数据分析师、数据科学家、软件工程师等。 使用场景及目标:①了解ETL工程师的职责技能要求;②选择适合自己的ETL工具;③规划ETL工程师的职业发展路径;④获取相关的学习资源求职建议。 其他说明:随着大数据技术的发展企业数字化转型的加速,ETL工程师的需求不断增加,尤其是在金融、零售、制造、人工智能、物联网区块链等领域。数据隐私保护法规的完善也使得ETL工程师在数据安全合规处理方面的作用更加重要。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值