
技术文档
文章平均质量分 59
MarkHD
这个作者很懒,什么都没留下…
展开
-
spark概述
Spark的主要优点包括易用性好(支持Scala、Java和Python等语言编写应用程序)、通用性强(能够无缝集成并提供一站式解决平台)、容错性高以及执行效率高。此外,Spark还具有良好的可扩展性和灵活性,可以根据需求动态调整集群规模,并支持多种数据格式和数据源。在应用场景方面,Spark可以用于数据处理与转换(如清洗、过滤、聚合和转换数据)、构建ETL管道、实时数据流处理以及图计算等多种场景。Spark是一个由Apache软件基金会开发的开源分布式计算框架,它提供了快速、通用的大规模数据处理能力。原创 2024-05-15 09:25:35 · 275 阅读 · 0 评论 -
Hadoop、Spark、HBase与Redis的适用性见解
总结来说,Hadoop、Spark、HBase和Redis各自具有不同的适用性和优势。Hadoop适合处理大规模数据集的离线批处理任务;Spark适用于实时数据分析、机器学习等多种场景;HBase适合存储稀疏表结构的数据;而Redis则适用于需要高速读写性能、低延迟和实时性的场景。在选择使用哪个技术时,需要根据具体的业务需求和场景来综合考虑。Hadoop、Spark、HBase和Redis各自在大数据技术领域具有不同的适用性和优势。原创 2024-05-15 09:24:28 · 508 阅读 · 1 评论 -
大数据技术生态圈简介
此外,大数据技术生态圈还包括一些其他重要的组成部分,如资源调度层(用于管理和调度系统资源)、数据安全保障层(用于保护用户数据的安全和隐私)等。这些组成部分共同构成了大数据技术生态圈的基础架构,为大数据技术的应用和发展提供了有力支持。大数据技术生态圈是一个复杂且庞大的系统,涉及数据的收集、存储、处理、分析和应用等多个环节。原创 2024-05-15 09:21:19 · 716 阅读 · 0 评论 -
mysql 主从复制、读写分离、高可用
MySQL 的主从复制、读写分离和高可用性是数据库架构中常见的概念,它们旨在提高数据库的可靠性、性能和可扩展性。原创 2024-03-18 15:26:19 · 816 阅读 · 0 评论 -
MongoDB工作常用操作命令
这些只是MongoDB的基本命令。MongoDB提供了丰富的命令和功能,可以满足各种复杂的数据库操作需求。如果你想要深入学习MongoDB,建议查阅官方文档或相关教程,了解更多的命令和高级功能。MongoDB的工作常用操作命令主要包括启动与关闭MongoDB服务、进入shell操作以及一些常用的shell命令。这个命令将启动MongoDB的交互式shell,允许你执行各种数据库操作。同样,这个命令也假设你的MongoDB配置文件位于。执行这个命令会关闭正在运行的MongoDB服务。原创 2024-03-16 13:34:58 · 914 阅读 · 0 评论 -
容器只适用于微服务吗?
容器为每个微服务提供了一个独立的运行环境,确保服务之间的隔离性,同时简化了服务的部署和管理。命名空间是一种机制,用于将全局系统资源隔离成独立的空间,每个命名空间都有自己的进程、网络、文件系统等资源,这使得不同的进程或容器可以在不同的环境中运行,实现隔离性。首先,容器是一个轻量级的、可移植的软件包,它包含了应用程序及其所有依赖项,确保应用在任何地方都能以相同的方式运行。这意味着,开发人员可以在本地机器上开发和测试应用,然后将其打包成一个容器,并在生产环境中轻松部署,无需担心环境差异或依赖项冲突的问题。原创 2024-03-16 08:47:32 · 1340 阅读 · 0 评论 -
裸金属服务器是什么?
裸金属服务器(Bare Metal Server)是一种特殊的服务器架构,它结合了传统物理服务器的硬件优势和云计算的虚拟化服务功能。这种服务器直接运行在硬件上,没有中间的虚拟化层,因此能够提供更高的性能和更低的延迟,满足对计算和存储资源有严格要求的业务需求。总的来说,裸金属服务器是一种强大而灵活的计算服务,它结合了物理服务器的稳定性和云计算的弹性优势,为企业和用户提供高效、安全、可靠的计算资源。同时,裸金属服务器还具备云计算的弹性优势,用户可以根据实际需求灵活申请和释放资源,实现按需使用,避免资源浪费。原创 2024-03-15 13:55:55 · 517 阅读 · 0 评论 -
如何降低云计算成本?
综上所述,降低云计算成本需要综合考虑多个方面,包括资源使用、云服务提供商选择、成本监控、技术采用和开发人员效率等。通过不断优化和改进这些方面,可以有效地降低云计算成本并提高业务效益。原创 2024-03-14 14:48:16 · 1809 阅读 · 0 评论 -
如何将服务器数据迁移到另一台服务器?
在数据传输完成后,你需要在目标服务器上恢复备份的数据。这包括将网站文件复制到目标服务器上的网站目录、将数据库恢复到目标服务器上的数据库服务器等。同时,你还需要根据目标服务器的环境和配置,调整相应的配置文件和设置,如网站配置、数据库连接信息、权限设置等。一旦目标服务器准备就绪,你就可以开始将备份的数据从源服务器传输到目标服务器了。接下来,你需要准备目标服务器,确保其系统环境和配置与源服务器相匹配。完成数据恢复和配置后,你需要对目标服务器进行测试和验证,确保数据迁移和配置调整都正确无误。原创 2024-03-14 14:36:40 · 5162 阅读 · 0 评论 -
Perplexity AI 是什么?
Perplexity AI的界面非常简洁,提供了一个搜索框,用户可以在其中输入问题或关键字,Perplexity AI会根据用户的输入提供相关的答案和链接。Perplexity AI的搜索结果非常准确,它可以回答各种问题,包括具体的事物和抽象的概念。此外,Perplexity AI的智能度测试表明,它对具体事物的模糊描述理解不错,配合相关的链接,理解和接受一个概念的难度大大降低了,信息获取的速度也相较在传统浏览器上搜索有了直观感受上的提高。,它的目标是解锁知识的力量,实现信息的发现和共享。原创 2024-03-02 14:14:49 · 4173 阅读 · 0 评论 -
python模型训练简介
在这个示例中,我们加载了一个CSV文件,分离了特征和目标变量,划分了训练集和测试集,创建了一个线性回归模型,并使用训练数据拟合了模型。然后,我们使用模型对测试数据进行预测,并计算了均方误差(MSE)来评估模型的性能。请注意,这只是一个简单的示例,实际的模型训练过程可能涉及更复杂的数据预处理、特征工程、模型选择和调优步骤。原创 2024-03-02 09:26:14 · 630 阅读 · 0 评论 -
数据库与数据仓库关联和区别
数据库(Database)和数据仓库(Data Warehouse)都是用于存储和管理数据的重要工具,但它们之间存在明显的区别和用途。原创 2024-03-02 09:19:53 · 1535 阅读 · 2 评论 -
智能FQA是什么
智能FQA系统通常基于大量的常见问题及其答案进行训练,使用自然语言处理算法来理解和解析用户的问题。一些先进的智能FQA系统还具备上下文理解能力,可以根据之前的对话和用户的意图来提供更准确的回答。它通过分析用户输入的问题,从预先定义的知识库或数据集中找到相应的答案,并返回给用户。随着人工智能和自然语言处理技术的不断发展,智能FQA系统的性能和功能也将不断提升。通过以上步骤,可以实现一个功能完善、性能稳定的智能FQA系统。在实际应用中,还需要根据具体情况进行调整和优化,以满足不同用户的需求和场景。原创 2024-03-01 08:26:16 · 1029 阅读 · 0 评论 -
浅谈人工智能之深度学习
在有监督学习中,训练数据有特征和标记,通过学习找到特征和标记之间的映射关系,并不断调整网络参数以减小预测误差。在无监督学习中,训练数据只有特征,没有标记,网络需要自行学习数据的内在规律和结构。在半监督学习中,训练数据部分有标记,部分无标记,网络需要同时利用有标记和无标记的数据进行学习。深度学习的基本特点是从大量的未标记或半标记的数据中,通过分层的特征变换,学习数据的表示和特征,从而实现对复杂函数的逼近和分类等任务。在学习过程中,需要定期总结所学内容,反思自己的不足和需要改进的地方,及时调整学习计划和策略。原创 2024-03-01 08:21:00 · 1214 阅读 · 0 评论 -
LNMP 架构简介
这四种软件均为免费开源软件,组合到一起,成为一个免费、高效、扩展性强的网站服务系统。其中,Nginx中的PHP是以fastcgi的方式结合Nginx的,可以理解为Nginx代理了PHP的fastcgi。部署LNMP架构的步骤主要包括安装和配置Linux操作系统、Nginx、MySQL和PHP。LNMP代表的就是Linux系统下Nginx+MySQL+PHP这种网站服务器架构。原创 2024-03-01 08:17:45 · 657 阅读 · 0 评论 -
OpenAI的多函数调用(Multiple Function Calling)简介
支持函数调用的新模型,可以根据用户的输入自行判断何时需要调用哪些函数,并且可以根据目标函数的描述生成符合要求的请求参数。这种能力使得开发人员可以使用函数调用,通过GPT实现多种功能,例如在进行自然语言交流时通过调用外部工具来回答问题,或者将自然语言转换为调用API时使用的参数,或者查询数据库时使用的条件等。根据官方博客的描述,函数调用能力允许模型输出一个请求调用函数的消息,该消息中包含所需调用的函数信息以及调用函数时所携带的参数信息。GPT模型生成了一个函数调用请求,指定了要调用的函数名称和参数。原创 2024-02-29 09:45:24 · 739 阅读 · 0 评论 -
第一章 计算机组成与体系结构
例如:以上就是今天要讲的内容,本文仅仅简单介绍了pandas的使用,而pandas提供了大量能使我们快速便捷地处理数据的函数和方法。原创 2023-04-26 16:57:45 · 1228 阅读 · 1 评论 -
外企入职记第一回
今天新入职到新单位(传说中的外企),我还是干我的老本行软件开发。由于口语不好,所以未能入职2级岗位,给定了一个"应用开发高级工程师"的岗位,这是给我新设立的岗位。呵呵,很有“成就感”。万恶的英语啊,不过我励志希望能过利用这个平台锻炼我的口语。入职感受1、外企HR也和一般企业没啥区别,听起来高大上,其实也就那么回事。2、外企的职场规则,听起来高大上,其实需要自己主动接触和感觉,尽快融入到原创 2017-06-15 13:31:34 · 1157 阅读 · 0 评论 -
1024我们的节日(2022)
国家战略把数字化、智能化提到了顶层设计中,大中型企业都在进行数字化专项。给了我们无限的空间,有时感觉这个邻域自己只是懂得冰山一角,青年时经常侃侃而谈,事事都要针轮黑或白,有一种华山论剑,谁于争锋的感觉。现在人到中年后,总是唯唯诺诺,只是为了保住工作,为了钱现实的一塌糊度。在今天这个特殊日子里,我也送给自己一个祝福吧:”涛声依旧人依旧,永远快乐永依旧“,重要的事情说三遍,赚钱保重身体、赚钱保重身体、赚钱保重身体。原创 2022-10-24 18:33:44 · 251 阅读 · 0 评论 -
传统燃油车的智控App远控响应速度优化方向几点思考
本方案通过优化网络环境、更新软件版本和提高用户设备性能等措施,可以有效提升燃油车的App远控响应速度。原创 2023-04-23 13:52:24 · 1371 阅读 · 0 评论 -
大并发场景架构设计浅谈-第一话
负载均衡(Load Balancing)是指将请求分配到多个服务器中的技术,以平均负载处理请求,提高系统的性能、可用性和可伸缩性。当增加了更多的服务器,负载均衡可以确保每台服务器都能以同样的速度处理请求,从而提高系统的可用性和可伸缩性。总之,提高系统的可靠性需要在多个方面进行努力,包括增加系统的冗余、使用负载均衡器、容器化部署、高可用性设计、数据备份和恢复、系统监测和升级等。通过负载均衡,可以提高系统的可用性、性能和扩展性。增加系统可靠性:在大并发场景下,系统的故障率增加,需要设计高可用、容错性强的系统。原创 2023-03-30 13:32:07 · 1233 阅读 · 0 评论 -
车联网TSP的架构浅谈
随着车联网技术的发展,车联网TSP(Telematics Service Provider)在汽车安全、驾驶行为、智能导航等方面发挥着重要的作用。本文将主要讨论车联网TSP的技术架构方面,包括车联网TSP的组成、通信协议、数据管理等方面的内容。原创 2023-03-28 13:32:34 · 11913 阅读 · 0 评论 -
Kafka 和 MQTT消息中间件在车联网TSP使用浅析
Kafka 和 MQTT 是常用的消息传递协议,它们在车联网TSP中主要用于消息队列和消息发布/订阅服务。原创 2023-03-28 13:45:51 · 1928 阅读 · 0 评论 -
智能网联的核心系统Tsp介绍
车联网TSP是车联网系统中不可或缺的一部分,它拥有多项实用功能,为驾驶者带来智能化、安全性、便捷性、舒适性等多重体验。虽然车联网TSP在使用过程中存在一些不足和缺陷,但是通过合理的数据保护和用户隐私保护机制,我们可以更好地发挥车辆联网的作用,同时促进车联网技术的发展和创新。原创 2023-03-28 13:15:06 · 7670 阅读 · 0 评论 -
智能座舱未来技术趋势探讨
智能座舱是汽车工业中的重要技术创新,它不仅能够提高驾驶安全性和舒适性,还可以优化行驶效率,减少能源消耗。未来,智能座舱的发展将呈现以下几个技术趋势。原创 2023-03-20 17:21:55 · 629 阅读 · 0 评论 -
智能网联-远控慢或失败率高可能原因浅析
智能网联是指通过互联网将车辆、道路、交通设施等交通要素进行智能化连接,实现信息共享、协同控制和智能决策,从而提高交通效率、降低交通事故率、减少能源消耗等。智能网联的远控慢或失败率高的原因主要有以下几个方面原创 2023-03-20 17:14:11 · 696 阅读 · 0 评论 -
蓝牙钥匙的PEPS技术原理
PEPS即Passive Entry and Passive Start,是一种被动式进入和被动式启动的技术,它的原理是通过车辆识别设备和钥匙的蓝牙通信实现对车辆的控制。蓝牙钥匙的PEPS技术可以分为两个部分:被动式进入和被动式启动。原创 2023-03-18 11:16:06 · 5338 阅读 · 2 评论 -
车联网中紧急救援的技术
近年来,车联网作为一种新型技术,已经逐渐普及到了人们的生活中。车联网不仅可以为驾驶员提供更加便利的服务,还可以在紧急情况下为驾驶员提供紧急救援服务。本文将从技术角度来探讨车联网中紧急救援的技术。原创 2023-03-18 11:02:28 · 681 阅读 · 0 评论 -
智能网联-浅谈基于PKI的车联网应用服务安全
以上就是今天要讲的内容,本文仅仅简单介绍了PKI在车联网上简单的使用场景,而PKI其它详细应用能力还要随着V2X的应用场景下沉及国家行业规范的合规要求,还有很多需要深入探讨研究领域。原创 2022-10-12 11:26:24 · 2469 阅读 · 0 评论 -
智能汽车-ICALL、BCALL、ECALL都是啥
①E-Call:如遭遇紧急情况,用户可按下该键以最高优先级接通呼叫中心,人工坐席将同时获取客户车辆的重要数据并协助驾驶员脱离危险。②B-Call:一键电话救援,向后台发送求救型号。主要是道路救援。按下该键向汽车联网发送“道路救援”信号,获得拖车等一系列帮助。③I-Call:如前往陌生路段时,按下该键可连接至呼叫中心的人工坐席进行目的地查询与导航。④TBox:是汽车网络通讯的.重要部件,一个带通讯功能的盒子,内含一张SIM卡,配套硬件还有GPS天线、4G天线等,可以提供位置定位、移动网络服务。原创 2022-09-30 15:01:45 · 18877 阅读 · 0 评论 -
智能汽车-AR/VR应用浅析
以上就是今天要讲的内容,本文仅仅简单介绍了AR/VR的基本概念及在汽车中常见使用常用,而AR/VR在汽车行业深入应用还有待继续挖掘。在历次工业革命中,一项重大发明往往能够带来多个产业的崛起。我们目前正经历着人工智能、物联网、生命科学等驱动的第四次工业革命,其中AR/VR也在扮演着重要的角色。尤其是在与我们息息相关的汽车行业中,AR/VR正逐渐渗透于各个环节。AR和VR成为汽车业最强大的驱动力已经不再遥远。原创 2022-09-30 09:14:11 · 1196 阅读 · 0 评论 -
智能汽车应用场景分析-混动车辆怠速充电
以上就是今天要讲的内容,本文仅仅简单介绍了混动车辆怠速充电的简单场景和关键链路业务流,而怠速充电功能的实现涉及整车开发、TBOX与TSP通信协议制定和App之间消息通信。原创 2022-09-22 15:59:41 · 731 阅读 · 0 评论 -
羊了个羊的模式浅薄认知
最近,游戏“羊了个羊”风靡各平台及社交圈,在发挥游戏精神勇敢闯关的同时,我们也邀请各位技术er从技术角度来聊聊“羊了个羊”,让我们在游戏之余,探探技术之乐。原创 2022-09-21 09:29:09 · 1156 阅读 · 0 评论 -
智能汽车-大数据标签系统应用浅谈
以上就是大数据标签系统在智能汽车场景的简单应用,本文仅仅简单介绍了数据标签的定义和浅层次的使用,而数据标签系统是大数据、AI、千人千面个性化能力的基础。原创 2022-09-20 17:13:17 · 1854 阅读 · 0 评论 -
新能源国标接入随想
以上就是新能源国标接入要讲的内容,本文仅仅简单介绍了新能源国标接入思路,而新能源国标接入还有大量的信号细节和规范等,这里简要提供了入门思路。原创 2022-09-17 15:31:09 · 2227 阅读 · 0 评论 -
整车智能-浅谈“车内生命体征检测方案”
以上就是关于“车内生命体征检测方案”的一些方案内容,本文仅仅简单介绍了此功能案例分析,而具体实现是需要车端、云端、App等各端协同开展,此处仅提供了一些思路供大家探讨。原创 2022-09-16 16:47:17 · 10522 阅读 · 0 评论 -
智能网联-远控的基本原理
随着数字化、智能化的时代到来,物联网已经深入到我们生活的方方面面。从衣食住行的智能家居、穿戴设备、车联网、泛太感知万物互联的大背景中,大大提高了工作和生活便利性和智能化水平。那么就从车联网的基础远控来戏说一下它的背后的技术原理(科普层面哦,各位大佬可绕行:))。...原创 2022-08-17 16:46:17 · 2140 阅读 · 0 评论 -
智能网联-最全术语
智能网联-最全术语原创 2022-08-05 10:47:39 · 2385 阅读 · 0 评论 -
话说“数字钥匙”(蓝牙钥匙)
随着电动汽车越来越普及和智能化程度越来越高,数字钥匙已然是车的标准配置,那么我们来聊一聊它的过去、现在和未来。数字钥匙是通过BLE(蓝牙)、NFC、UWB等不同通信技术,将智能手机、NFC智能卡、智能手表和智能手环等智能终端设备变成车钥匙,从而实现无钥匙进入和启动、为他人远程钥匙授权、个性化的车辆设置等便捷功能,实现更加安全的钥匙管理及更加舒适方便的用车体验。数字钥匙会涉及到车、车端蓝牙设备(SDK)、云端钥匙服务、TSP(车联网后台服务)、App(车主App)、数字钥匙App(SDK),它依赖车端、云端、原创 2022-07-04 13:50:34 · 4585 阅读 · 0 评论 -
车联网-数据包定义
车联网数据包定义原创 2022-05-05 10:51:24 · 557 阅读 · 0 评论