20. 从零用Rust编写正反向代理,四层反向代理stream(tcp与udp)实现

2024-01-16 10:28

本文主要是介绍20. 从零用Rust编写正反向代理,四层反向代理stream(tcp与udp)实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

wmproxy

wmproxy已用Rust实现http/https代理, socks5代理, 反向代理, 静态文件服务器,四层TCP/UDP转发,内网穿透,后续将实现websocket代理等,会将实现过程分享出来,感兴趣的可以一起造个轮子

项目地址

gite: https://gitee.com/tickbh/wmproxy

github: https://github.com/tickbh/wmproxy

四层代理

四层代理,也称为网络层代理,是基于IP地址和端口号的代理方式。它只关心数据包的源IP地址、目的IP地址、源端口号和目的端口号,不关心数据包的具体内容。四层代理主要通过报文中的目标地址和端口,再加上负载均衡设备设置的服务器选择方式,决定最终选择的内部服务器。

因为四层代理不用处理任何相关的包信息,只需将包数据传递给正确的服务器即可,所以实现相对比较简单。

以下是OSI七层模型的示意图,来源于网上

图片.png

实现方式

双端建立连接,也就是收到客户端的连接的时候,同时建立一条通往服务端的连接,然后做双向绑定即可完成服务。

四层代理还有udp的转发需求,需要同步将udp的数据进行转发,udp的处理方式处理会相对复杂一些,因为当前地址只有绑定一份,但是可能来自各种不同的地址,不同的客户端的(remote_ip, remote_port)我们需要当成一个全新的客户端。

而且有时候无法主动感知是否已经被断开了,所以也必须有超时机制,好在超时的时候能及时释放掉连接,好让系统及时的socket资源。

TCP实现

tcp找到相应的地址,连接,并双向绑定即可

pub async fn process<T>(data: Arc<Mutex<StreamConfig>>,local_addr: SocketAddr,mut inbound: T,_addr: SocketAddr,
) -> ProxyResult<()>
whereT: AsyncRead + AsyncWrite + Unpin + std::marker::Send + 'static,
{let value = data.lock().await;for (_, s) in value.server.iter().enumerate() {if s.bind_addr.port() == local_addr.port() {let addr = ReverseHelper::get_upstream_addr(&s.upstream, "")?;let mut connect = HealthCheck::connect(&addr).await?;copy_bidirectional(&mut inbound, &mut connect).await?;break;}}Ok(())
}
UDP实现

UDP相对比较复杂,下面我们先列举内部的流程图

根据地址连接发送数据到
将Receiver传到以接收数据
否,将数据Sender给
异步读取数据并发送
绑定反向udp端口
客户端
是否第一次
创建异步协程
异步协程中

在stream绑定的时候,要区分出TCP还是UDP的,做分别的绑定

/// stream的绑定,按bind_mode区分出udp或者是tcp,返回相应的列表
pub async fn bind(&mut self) -> ProxyResult<(Vec<TcpListener>, Vec<StreamUdp>)> {let mut listeners = vec![];let mut udp_listeners = vec![];let mut bind_port = HashSet::new();for value in &self.server.clone() {if bind_port.contains(&value.bind_addr.port()) {continue;}bind_port.insert(value.bind_addr.port());if value.bind_mode == "udp" {let listener = Helper::bind_upd(value.bind_addr).await?;udp_listeners.push(StreamUdp::new(listener, value.clone()));} else {let listener = Helper::bind(value.bind_addr).await?;listeners.push(listener);}}Ok((listeners, udp_listeners))
}

我们会对连接做分别的监听,下面是udp的获取是否有新数据:

async fn multi_udp_listen_work(listens: &mut Vec<StreamUdp>,
) -> (io::Result<(Vec<u8>, SocketAddr)>, usize) {if !listens.is_empty() {let (data, index, _) =select_all(listens.iter_mut().map(|listener| {listener.next().boxed()})).await;if data.is_none() {return (Err(io::Error::new(io::ErrorKind::InvalidInput, "read none data")), index)}(data.unwrap(), index)} else {let pend = std::future::pending();let () = pend.await;unreachable!()}
}

此处我们用next,也就是我们实现了 futures_core::Stream接口,用Poll的方式来注册实现有事件的时候来通知。

在tokio中,在read或者write的时候返回Poll::Pending,将会将socket的可读可写注册到底层,如果一旦系统可读可写就会通知该接口,将会重新执行一遍futures_core::Stream

我们将同时可以处理可读可写可发送事件,如果接口超时我们将关闭相应的接口。

impl Stream for StreamUdp {type Item = io::Result<(Vec<u8>, SocketAddr)>;fn poll_next(mut self: std::pin::Pin<&mut Self>,cx: &mut std::task::Context<'_>,) -> std::task::Poll<Option<Self::Item>> {let _ = self.poll_write(cx)?;let _ = self.poll_sender(cx)?;self.poll_read(cx)}
}

下面是主要的StreamUdp

/// Udp转发的处理结构,缓存一些数值以做中转
pub struct StreamUdp {/// 读的缓冲类,避免每次都释放pub buf: BinaryMut,/// 核心的udp绑定端口pub socket: UdpSocket,pub server: ServerConfig,/// 如果接收该数据大小为0,那么则代表通知数据关闭pub receiver: Receiver<(Vec<u8>, SocketAddr)>,/// 将发送器传达给每个子协程pub sender: Sender<(Vec<u8>, SocketAddr)>,/// 接收的缓存数据,无法保证全部直接进行发送完毕pub cache_data: LinkedList<(Vec<u8>, SocketAddr)>,/// 发送的缓存数据,无法保证全部直接进行发送完毕pub send_cache_data: LinkedList<(Vec<u8>, SocketAddr)>,/// 每个地址绑定的对象,包含Sender,最后操作时间,超时时间remote_sockets: HashMap<SocketAddr, InnerUdp>,
}

结果测试

我们自己开一个udp服务端,绑定了本地的8089,我们将接收到的数据前面加上from server:并进行返回,代理端我们绑定了84的端口,并将udp数据转发给8089端:

use tokio::net::UdpSocket;
use std::io;#[tokio::main]
async fn main() -> io::Result<()> {let sock = UdpSocket::bind("0.0.0.0:8089").await?;let mut buf = [0; 1024];loop {let (len, addr) = sock.recv_from(&mut buf).await?;let mut vec = "from server: ".as_bytes().to_vec();vec.extend(&buf[..len]);let _ = sock.send_to(&vec, addr).await?;}
}

客户端我们用nc运行:

图片.png

可以看出两个客户端互相独立,彼此返回的数据均符合预期,正常的接收及返回。

TCP我们绑定了83端口并转发到HTTP的本地端口8080,我们用curl进行测试,符合预期,如图:

图片.png

结语

至此四层的反向代理TCP/UDP均已完成,也符合预期。

点击 [关注][在看][点赞] 是对作者最大的支持

这篇关于20. 从零用Rust编写正反向代理,四层反向代理stream(tcp与udp)实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/612250

相关文章

Java实现检查多个时间段是否有重合

《Java实现检查多个时间段是否有重合》这篇文章主要为大家详细介绍了如何使用Java实现检查多个时间段是否有重合,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录流程概述步骤详解China编程步骤1:定义时间段类步骤2:添加时间段步骤3:检查时间段是否有重合步骤4:输出结果示例代码结语作

使用C++实现链表元素的反转

《使用C++实现链表元素的反转》反转链表是链表操作中一个经典的问题,也是面试中常见的考题,本文将从思路到实现一步步地讲解如何实现链表的反转,帮助初学者理解这一操作,我们将使用C++代码演示具体实现,同... 目录问题定义思路分析代码实现带头节点的链表代码讲解其他实现方式时间和空间复杂度分析总结问题定义给定

Java覆盖第三方jar包中的某一个类的实现方法

《Java覆盖第三方jar包中的某一个类的实现方法》在我们日常的开发中,经常需要使用第三方的jar包,有时候我们会发现第三方的jar包中的某一个类有问题,或者我们需要定制化修改其中的逻辑,那么应该如何... 目录一、需求描述二、示例描述三、操作步骤四、验证结果五、实现原理一、需求描述需求描述如下:需要在

如何使用Java实现请求deepseek

《如何使用Java实现请求deepseek》这篇文章主要为大家详细介绍了如何使用Java实现请求deepseek功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1.deepseek的api创建2.Java实现请求deepseek2.1 pom文件2.2 json转化文件2.2

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

如何通过Python实现一个消息队列

《如何通过Python实现一个消息队列》这篇文章主要为大家详细介绍了如何通过Python实现一个简单的消息队列,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录如何通过 python 实现消息队列如何把 http 请求放在队列中执行1. 使用 queue.Queue 和 reque

Python如何实现PDF隐私信息检测

《Python如何实现PDF隐私信息检测》随着越来越多的个人信息以电子形式存储和传输,确保这些信息的安全至关重要,本文将介绍如何使用Python检测PDF文件中的隐私信息,需要的可以参考下... 目录项目背景技术栈代码解析功能说明运行结php果在当今,数据隐私保护变得尤为重要。随着越来越多的个人信息以电子形

使用 sql-research-assistant进行 SQL 数据库研究的实战指南(代码实现演示)

《使用sql-research-assistant进行SQL数据库研究的实战指南(代码实现演示)》本文介绍了sql-research-assistant工具,该工具基于LangChain框架,集... 目录技术背景介绍核心原理解析代码实现演示安装和配置项目集成LangSmith 配置(可选)启动服务应用场景

使用Python快速实现链接转word文档

《使用Python快速实现链接转word文档》这篇文章主要为大家详细介绍了如何使用Python快速实现链接转word文档功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 演示代码展示from newspaper import Articlefrom docx import

前端原生js实现拖拽排课效果实例

《前端原生js实现拖拽排课效果实例》:本文主要介绍如何实现一个简单的课程表拖拽功能,通过HTML、CSS和JavaScript的配合,我们实现了课程项的拖拽、放置和显示功能,文中通过实例代码介绍的... 目录1. 效果展示2. 效果分析2.1 关键点2.2 实现方法3. 代码实现3.1 html部分3.2