建立私有的name service

最新推荐文章于 2024-05-16 12:01:24 发布
原创 最新推荐文章于 2024-05-16 12:01:24 发布 · 799 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#service #引擎 #json #服务器 #byte #扩展

本文介绍了一种轻量级的NameService设计方案，利用线程池处理DNS请求，避免阻塞函数带来的性能瓶颈。该方案支持并发处理大量DNS请求，并通过自定义协议确保请求响应的准确性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

前言: 

  提到dns, 让我们想起了 gethostbyname, gethostbyaddr 相关函数(线程安全的使用 getaddrinfo, getnameinfo), 不过他们都是阻塞函数, 在服务器端我们还需要额外构建一个异步环境来支撑这些阻塞函数运行.

 

需求:

   这几天因为这些阻塞函数导致我想编写一个内部的name service, 开始想得是直接在引擎里开多个线程可以并发的处理大量的dns请求, 不过后来发现这样不但和引擎耦合起来, 还导致了引擎不必要的臃肿(每个引擎额外的开了几个线程), 干脆独立出来, 也方便了其他引擎使用 :)

 

实现原理:

   实现起来非常简单, 大体说下思路, 首先创建好一个线程池, 视CPU核心个数调整线程数量, 可以稍微多一些, 毕竟这些函数都是阻塞函数, 多开几条线程也无所谓并不会引起过高的上下文切换, 线程池自带一个队列缓冲未能执行的请求.

 

   诸如getaddrinfo返回的结果通过协议封装发回给原请求端即可, 不过这里需要注意的是, 协议的定制时需要额外增加一个参数用来记录请求的ID, 因为请求端的逻辑为异步, 为了保证能正确唤醒具体的corotinue, 引擎在发送请求时需要为每次请求生成一个ID, 这里使用内部自增ID或者uuid均可.

 

   协议方面, 引擎使用c+lua搭建, 支持4种协议格式: byte, word, dword, string. 像dns这种复杂的结构直接转换成JSON格式传递过去, 对端再解析即可~ , 这样做的好处是既简化了协议层的复杂度, 又让协议层具备了良好的扩展能力.

   因为name service是上下文无关, 所以其逻辑具备高度并行性,  完全无锁, ok, 简单精巧, 稳定高效.

k8s集群service管理
lyzkks的博客
04-25 1万+
集群service管理包括： 网络代理模式 服务代理 服务发现 发布服务 概述 Service 是对一组提供相同功能的 Pods 的抽象，并为它们提供一个统一的入口。 借助 Service，应用可以方便的实现服务发现与负载均衡，并实现应用的零宕机升级。 Service 通过标签来选取服务后端，一般配合 Replication Controller 或者 Deployment ...
Ubuntu中利用Docker建立一个私有仓库(可以供远程访问)
carson0408的博客
04-02 1116
目录 1.服务器建立仓库 2.客户端访问 本文主要通过在建立本地仓库的基础上建立一个可供远程访问的私有仓库。笔者将按照自己建立的过程进行讲述，并且将在这过程中遇到的问题以及解决方法一并进行讲解。 笔者的思路是在一台Ubuntu系统下的电脑当作服务器建立仓库，然后后面建立成功之后在另一台win10系统的电脑上进行访问以及上传下载测试。 1....
五、Kubernetes(k8s) 中Service 的详解
胖太乙
07-03 2103
在一主多从的k8s集群中， 当我们使用 Deployment 创建某个镜像的多副本时，每个副本都是均匀分配到个个Work 节点上，并且每个Pod 都有自己的内网Ip ，那么问题来了，我们应该用哪个Pod的IP 来访问Pod ? 如果使用某一个Pod的内网ip来访问，那这个Pod 宕机了， 那集群岂不是挂了？k8s 官方对Service 的定义是：将运行在一组 Pods 上的应用程序公开为网络服务的抽象方法。使用 Kubernetes，你无需修改应用程序即可使用不熟悉的服务发现机制。 Kubernetes 为
CDH添加外部HDFS集群nameservice
iture的博客
10-12 1309
如CDH自带HDFS的nameservice为nameservice-dev，现在添加对外部HDFS集群nameservice-test的支持。 在配置项”hdfs-site.xml 的 HDFS 客户端高级配置代码段（安全阀）“中添加配置 <property> <name>dfs.nameservices</name> <value>nameservice-dev,nameservice-test</value> </pro
k8s与DNS--配置私有DNS Zones和Upstream Nameservers
weixin_34336526的博客
08-02 613
许多用户他们想要集成domain name zones（现有域名区域）到Kubernetes DNS 命名空间。例如，混合云用户可能希望在群集内解析其内部“.corp”域地址。其他用户可能具有由非Kubernetes服务发现系统（如Consul）组成的区域。我们很高兴地宣布，在Kubernetes 1.6中，kube-dns增加了对可配置...
Kubernetes的Service类型详解
weixin_72583321的博客
05-16 1782
在 Kubernetes 中，Service 是一种抽象，它定义了一种访问 Pod 的方式，无论这些 Pod 如何变化，Service 都能保持恒定的访问策略。Service 为一组具有相同功能的 Pod 提供统一的访问接口，并且可以决定如何将网络流量分发到这些 Pod 上。通过 Service，您可以以一个固定的 DNS 名称或 IP 地址来访问您的应用，而不必关心后端 Pod 的具体位置。 Service 类型包括ClusterIP、NodePort、LoadBalancer和ExternalName
使用openstack搭建私有云
zheou的博客
04-30 4362
OpenStack 部署 一、环境准备 1、网络环境 主机 IP controller 10.0.0.51 compute1 10.0.0.61 修改hosts文件 cat /etc/hosts 10.0.0.51 controller 10.0.0.61 compute1 关闭selinux、firewalld cat env_set.sh #!/bin/bash systemctl stop firewalld systemctl disable firewalld s
Docker创建镜像和私有仓库建立
m0_49569199的博客
11-26 631
Docker镜像的分层 Docker镜像的创建 Docker镜像 应用发布的标准格式 支撑一个Docker容器的运行 Docker镜像的创建的方法 基于已有镜像创建 基于本地模板创建 基于Dockerfile创建 案例:构建各类Docker镜像服务 案例环境 主机 操作系统 主机名/ip地址 服务器 Centos 7.3 x86-64 Localhost/192.168.254.137 需求描述 基于容器（现有镜像）创建镜像服务 基于模板创建镜像服务 基于Dockerfile
eaibot@ubuntu:~$ ssh hal ssh: Could not resolve hostname hal: Name or service not known
最新发布
03-23
好的，我现在要帮用户解决SSH连接时出现的“Could not resolve hostname hal: Name or service not known”错误。首先，我需要明确这个错误的原因可能是什么。根据常见的SSH问题，这类错误通常和主机名解析有关。...
k8s实践(12)--K8s service服务详解
热门推荐
黄规速博客:学如逆水行舟，不进则退
06-30 1万+
一、集群的服务分类 在K8S运行的服务，从简单到复杂可以分成三类：无状态服务、普通有状态服务和有状态集群服务。下面分别来看K8S是如何运行这三类服务的。 1、无状态服务（Stateless Service）： 1）定义：是指该服务运行的实例不会在本地存储需要持久化的数据，并且多个实例对于同一个请求响应的结果是完全一致的。 2）随意扩容和缩容：这些节点可以随意扩容或者缩容，只要简单的增...
k8s service的yaml定义
yzh_1346983557的博客
02-02 7625
Service： Service有四种type: ClusterIP(默认）、NodePort、LoadBalancer、ExternalName. 其中NodePort和LoadBalancer两类型的Services可以对外提供服务。 engine.yaml： apiVersion: v1 #API的版本号，版本号可以用 kubectl api-versions...
oracle 创建services,oracle service 的创建、使用-基础分析
weixin_39664010的博客
04-08 2075
本文的目的是介绍 oracle 数据库中的 ‘service’的基础知识；本文环境为win7+10.2.0.4，请注意版本的区别；在oracle 8i中，oracle引入了一个新功能：service，它可以为客户端提供一种新的连接方式；Service 是字面翻译是服务，那么在oracle数据库当中，service可以当做是一组客户端或者应用的逻辑组合；每个单独的service 可以设定其自己的属性...
2,改写本章例2.1程序，要求： （1）将数据成员改为私有； （2）将输入和输出的功能改为由成员函数实现； （3）在类体内定义成员函数；
gan920hp的专栏
04-19 1万+
#include using namespace std;class Time{private:int hour;int minute;int sec;public:void sl(){cin>>hour;cin>>minute;cin>>sec;};void sc(){cout<<hour<<":"<<minute<<":"<<sec<<endl;};};int main(){Time t1;c
第4题
gan920hp的专栏
05-10 499
修改 添加 service_name
食肉动物的专栏
06-08 1万+
1.db_name:数据库名称,数据库创建好后不可以修改,除非使用nid(9i之后的版本)更改.   2.oracle_sid: 数据库实例名称,同一个db_name可以对应多个oracle_sid,数据库创建好后会自动在$ORACLE_HOME/dbs创建init+oracle_sid,orapw+oracle_id,spfile+oracle_sid这些文件.   3.service_
5,将本章的例2.4改写为一个多文件的程序： （1）将类定义放在头文件arraymax.h中； （2）将成员函数定义放在源文件arraymax.cpp中； （3）主函数放在源文件filel.cpp中。
gan920hp的专栏
04-19 8189
Arraymax.h#include class Array_max{public:void set_value();void max_value();void show_value();private:int array[10];int max;};Arraymax.cpp#include#include"arraymax.h"using namespace std;void Array_max
基于epoll异步connect实现
Final小屋
05-06 1万+
  这几天写网络爬虫, 结果服务器长时间阻塞在connect上导致不可容忍的并发问题, 于是着手增加一个异步connect接口.  常规的实现手段为配合select进行检测, 不过其性能对于高并发时会有些问题,  如果想做到结构简单合理采用one per one thread的处理方式还会引发过多的线程上下文切换导致不必要的性能浪费, 故放弃使用select来实现.  由于服务器网络库采用epoll实现, 故此接口也基于epoll实现. 查阅了一些资料, 总结一下:  1. 设置socket为nonbloc
判断TCP连接异常
Final小屋
08-04 2725
这阵子突然重新接手做了下关于TCP连接异常中断的检测, 这里的异常中断指的是目标主机断电, 网线被拔等非正常因素.   这个问题已经被处理很多年了, 无非2种基本解决策略:    1. 应用层心跳   2. 开启协议栈提供的keepalive, 这个和操作系统有关 有些操作
gittea私有仓库搭建
12-28
### 如何搭建 Gitea 私有仓库 #### 安装依赖项 为了确保顺利安装 Gitea，在开始前需确认已安装必要的软件包。对于基于 Debian 的系统，如 Ubuntu 或 Raspbian，可以通过以下命令安装所需依赖： ```bash sudo apt update && sudo apt install -y curl git sqlite3 ``` 这一步骤确保了 Git 和数据库支持已经到位[^1]。 #### 下载并安装 Gitea 获取最新版本的 Gitea 可执行文件，并将其放置于合适位置以便全局调用。以 Raspberry Pi (ARM 架构) 为例: ```bash wget -O gitea https://dl.gitea.io/gitea/1.19.0/gitea-1.19.0-linux-armv6 chmod +x gitea sudo mv gitea /usr/local/bin/ ``` 上述操作下载了适用于 ARM v6 处理器架构的预编译二进制文件，并赋予其可执行权限[^4]。 #### 初始化配置向导 首次启动 Gitea 将触发 Web 浏览器中的初始设置流程。通过浏览器访问 `http://<your-ip>:3000` 来完成基本参数设定，比如 SSH 地址应填写 IP 或者域名而非 URL 形式的 HTTP 路径。 #### 设置为服务自动运行 为了让 Gitea 在重启后能继续工作，建议创建 systemd service 文件实现开机自启功能。编辑 `/etc/systemd/system/gitea.service` 并加入如下内容： ```ini [Unit] Description=Gitea (Git with a cup of tea) After=syslog.target After=network.target After=mysql.service mariadb.service mysqld.service postgresql.service [Service] RestartSec=2s Type=simple User=git Group=git WorkingDirectory=/home/git ExecStart=/usr/local/bin/gitea web -c /home/git/custom/conf/app.ini Environment=USER=git HOME=/home/git Restart=always [Install] WantedBy=multi-user.target ``` 保存退出后启用该服务单元： ```bash sudo systemctl daemon-reload sudo systemctl enable --now gitea ``` 此过程使得 Gitea 成功注册成为 Linux 系统的服务之一，从而保障长期稳定运作。 #### 配置 Nginx 反向代理（可选） 如果希望使用更友好的网址代替默认端口号，则可通过 Nginx 实现反向代理。编辑站点配置文件 `/etc/nginx/sites-available/default` 添加相应规则指向 Gitea 后台监听地址： ```nginx server { listen 80; server_name yourdomain.com; location / { proxy_pass http://localhost:3000/; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header X-Forwarded-Proto $scheme; } } ``` 最后记得测试语法正确性并重新加载 Nginx 生效变更： ```bash sudo nginx -t sudo systemctl reload nginx ``` 这样便完成了从外部网络到内部应用层之间的安全连接建立。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值