Socket编程权威指南(五)高性能 Socket 编程实战

2024-06-10 11:44

本文主要是介绍Socket编程权威指南(五)高性能 Socket 编程实战,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!


在前几篇文章中,我们深入探讨了 Socket 编程的基础知识以及 I/O 复用模型。现在,是时候把这些理论付诸实践,构建一个真正的高性能网络应用了。本文将展示如何使用 C++ 编写模块化、可扩展的服务器和客户端程序,重点关注性能、可用性、安全性等关键方面,为你打造高水准的编码体验。


一、架构设计


在动手编码之前,我们先来规划一下程序的整体架构。

我们将分别实现一个服务器端类和客户端类,通过面向对象的设计模式,实现代码的模块化和可扩展性。

另外,服务器端将采用 I/O 复用模型,可以高效处理大量并发连接。

服务器端类的主要职责包括:

  • 初始化服务器套接字
  • 绑定地址
  • 监听连接请求
  • 接收连接
  • 读写数据

客户端类:

  • 负责创建客户端套接字

  • 连接服务器

  • 发送数据

  • 接收响应

为了提高程序的可用性,我们还需要在关键环节添加错误处理机制,确保意外情况下资源能安全回收,程序不会崩溃。

同时,通过使用 C++ 11 的现代语言特性,如 lambda 表达式、智能指针等,可以大幅增强代码的安全性和可读性。


二、服务器端实现


服务器端类的核心逻辑在于事件循环,它使用 poll() 函数监视套接字活动,高效地响应每一个就绪事件。

下面是服务器端类的框架代码:

class TcpServer {
public:TcpServer(const std::string& ip, int port): m_ip(ip), m_port(port) {}void start() {// 初始化服务器套接字// ...while (true) {// 使用 poll() 监视套接字活动int nfds = ::poll(m_pollfds.data(), m_pollfds.size(), -1);if (nfds == -1) {// 处理错误continue;}// 处理就绪事件for (auto& pollfd : m_pollfds) {if (pollfd.revents & POLLIN) {if (pollfd.fd == m_listensock) {// 接受新连接} else {// 读取数据}} else if (pollfd.revents & POLLOUT) {// 发送数据}}}}private:std::string m_ip;int m_port;int m_listensock;std::vector<pollfd> m_pollfds;// ...
};

在事件循环中,我们首先调用 poll() 函数获取就绪事件列表。

然后对每一个就绪事件进行处理,如果是监听套接字就绪,则接受新连接;如果是数据套接字就绪,则读取或发送数据。

接下来,我们来实现几个关键函数,包括初始化服务器套接字、接受连接以及读写数据等。

void TcpServer::init_server_socket() {m_listensock = ::socket(AF_INET, SOCK_STREAM, 0);if (m_listensock == -1) {// 处理错误return;}int opt = 1;::setsockopt(m_listensock, SOL_SOCKET, SO_REUSEADDR, &opt, sizeof(opt));struct sockaddr_in addr;memset(&addr, 0, sizeof(addr));addr.sin_family = AF_INET;addr.sin_addr.s_addr = inet_addr(m_ip.c_str());addr.sin_port = htons(m_port);if (::bind(m_listensock, (struct sockaddr*)&addr, sizeof(addr)) == -1) {// 处理错误return;}if (::listen(m_listensock, SOMAXCONN) == -1) {// 处理错误return;}m_pollfds.push_back({m_listensock, POLLIN, 0});
}void TcpServer::accept_connection() {struct sockaddr_in peeraddr;socklen_t peerlen = sizeof(peeraddr);int connfd = ::accept(m_listensock, (struct sockaddr*)&peeraddr, &peerlen);if (connfd == -1) {// 处理错误return;}std::cout << "New connection from " << inet_ntoa(peeraddr.sin_addr) << ":"<< ntohs(peeraddr.sin_port) << std::endl;m_pollfds.push_back({connfd, POLLIN, 0});
}ssize_t TcpServer::read_data(int sockfd, std::string& inbuf) {char buf[1024];ssize_t nbytes = ::recv(sockfd, buf, sizeof(buf), 0);if (nbytes > 0) {inbuf.append(buf, nbytes);}return nbytes;
}ssize_t TcpServer::write_data(int sockfd, const std::string& data) {return ::send(sockfd, data.data(), data.size(), 0);
}

init_server_socket() 函数中,我们创建服务器套接字、设置地址重用选项、绑定地址、进入监听状态,并将监听套接字加入 pollfds 数组。

accept_connection() 函数用于接受新连接,并将新的数据套接字加入 pollfds。

read_data()write_data() 则分别负责读取和发送数据。

需要注意的是,在所有函数中我们都添加了错误处理机制,确保异常情况下资源能正确释放。

你可以根据需要,扩展这些函数的功能,如添加日志记录、连接管理等。


三、客户端实现


相较于服务器端,客户端的实现则相对简单一些,主要包括连接服务器、发送数据和接收响应等操作。

下面是客户端类的代码框架:

class TcpClient {
public:TcpClient(const std::string& ip, int port): m_ip(ip), m_port(port), m_sockfd(-1) {}~TcpClient() {if (m_sockfd != -1) {::close(m_sockfd);}}bool connect() {m_sockfd = ::socket(AF_INET, SOCK_STREAM, 0);if (m_sockfd == -1) {// 处理错误return false;}struct sockaddr_in servaddr;memset(&servaddr, 0, sizeof(servaddr));servaddr.sin_family = AF_INET;servaddr.sin_addr.s_addr = inet_addr(m_ip.c_str());servaddr.sin_port = htons(m_port);if (::connect(m_sockfd, (struct sockaddr*)&servaddr, sizeof(servaddr)) == -1) {// 处理错误return false;}return true;}ssize_t send(const std::string& data) {return ::send(m_sockfd, data.data(), data.size(), 0);}ssize_t receive(std::string& buf) {char temp[1024];ssize_t nbytes = ::recv(m_sockfd, temp, sizeof(temp), 0);if (nbytes > 0) {buf.append(temp, nbytes);}return nbytes;}private:std::string m_ip;int m_port;int m_sockfd;
};

在客户端类中,我们首先实现了 connect() 函数,用于创建套接字并连接到服务器端。

send()receive() 函数则分别用于发送数据和接收响应数据。

与服务器端类似,我们也在客户端类的每个关键环节添加了错误处理机制,并在析构函数中释放套接字资源。

你可以根据实际需求,扩展客户端类的功能,如支持重连、超时控制等。


四、优化


完成了服务器端和客户端的实现后,我们就可以进行性能优化了。

在性能优化方面,我们可以考虑以下几个方面:

1、I/O 模型优化: 虽然 poll() 已经比 select() 更高效,但在大规模并发场景下,它的性能将遭受限制。我们可以尝试使用更高效的 epoll 模型。

2、网络优化: 合理设置 TCP 参数,如发送/接收缓冲区大小、延迟确认等,可以提升网络吞吐量。另外,也可以考虑使用 UDP 代替 TCP,减少协议开销。

3、多线程/多进程: 在多核 CPU 环境下,使用多线程或多进程可以发挥更大的并行能力。不过这也会增加同步开销,需要权衡利弊。

4、异步 I/O: 传统的同步 I/O 模型会导致大量线程阻塞,我们可以尝试使用异步 I/O 或者基于事件驱动的 Reactor 模式。

5、数据压缩: 在网络带宽有限的情况下,使用合适的压缩算法可以减少网络传输量,提升吞吐量。

我们将使用更高效的epoll模型以及基于事件驱动的Reactor模式,并支持多线程以发挥更大的并行能力。

下面是优化后的服务器端代码:

#include <sys/epoll.h>
#include <thread>
#include <mutex>
#include <condition_variable>
#include <queue>
#include <functional>// Reactor模式中的事件处理器接口
class EventHandler {
public:virtual ~EventHandler() {}virtual void handleInput(int sockfd) = 0;virtual void handleOutput(int sockfd) = 0;
};// 服务器端主类
class TcpServer {
public:TcpServer(const std::string& ip, int port, int numThreads): m_ip(ip), m_port(port), m_numThreads(numThreads) {}void start() {// 初始化服务器套接字init_server_socket();// 创建epoll实例m_epollfd = epoll_create1(0);if (m_epollfd == -1) {// 处理错误return;}// 启动工作线程std::vector<std::thread> threads;for (int i = 0; i < m_numThreads; ++i) {threads.emplace_back(&TcpServer::worker_thread, this);}// 事件循环while (true) {// 等待就绪事件int nfds = epoll_wait(m_epollfd, m_events.data(), m_events.size(), -1);if (nfds == -1) {// 处理错误continue;}// 分发就绪事件std::vector<EventHandler*> handlers;for (int i = 0; i < nfds; ++i) {int sockfd = m_events[i].data.fd;if (sockfd == m_listensock) {accept_connection();} else {if (m_events[i].events & EPOLLIN) {handlers.push_back(m_handlers[sockfd].get());}if (m_events[i].events & EPOLLOUT) {handlers.push_back(m_handlers[sockfd].get());}}}// 分发事件给工作线程distribute_events(std::move(handlers));}// 等待工作线程退出for (auto& thread : threads) {thread.join();}}private:void init_server_socket() {// 同前面的实现}void accept_connection() {// 同前面的实现m_handlers[connfd] = std::make_unique<ConnectionHandler>(connfd);struct epoll_event ev;ev.events = EPOLLIN | EPOLLET;ev.data.fd = connfd;epoll_ctl(m_epollfd, EPOLL_CTL_ADD, connfd, &ev);}void worker_thread() {while (true) {EventHandler* handler = nullptr;{std::unique_lock<std::mutex> lock(m_eventQueueMutex);m_eventQueueCond.wait(lock, [this] { return !m_eventQueue.empty(); });handler = m_eventQueue.front();m_eventQueue.pop();}if (handler) {handler->handleInput(handler->getSockfd());handler->handleOutput(handler->getSockfd());}}}void distribute_events(std::vector<EventHandler*>&& handlers) {{std::unique_lock<std::mutex> lock(m_eventQueueMutex);for (auto handler : handlers) {m_eventQueue.push(handler);}}m_eventQueueCond.notify_all();}std::string m_ip;int m_port;int m_numThreads;int m_listensock;int m_epollfd;std::vector<struct epoll_event> m_events;std::unordered_map<int, std::unique_ptr<EventHandler>> m_handlers;std::queue<EventHandler*> m_eventQueue;std::mutex m_eventQueueMutex;std::condition_variable m_eventQueueCond;
};// 连接处理器
class ConnectionHandler : public EventHandler {
public:ConnectionHandler(int sockfd) : m_sockfd(sockfd) {}void handleInput(int sockfd) override {// 读取数据并处理}void handleOutput(int sockfd) override {// 发送数据}int getSockfd() const { return m_sockfd; }private:int m_sockfd;
};

在这个优化后的实现中,我们引入了以下几个关键改进:

1、使用epoll代替poll:epoll是Linux下更高效的I/O复用机制,能够监视更多的文件描述符,并且无需像poll那样在每次调用时重新复制整个文件描述符集合。

2、采用Reactor模式:我们将事件处理逻辑与主循环分离,引入了EventHandler接口,并使用工作线程池来并行处理事件。主循环只负责等待就绪事件并分发给工作线程,而实际的事件处理则在工作线程中完成。

3、支持多线程:通过创建多个工作线程,可以充分利用多核CPU的并行计算能力,提高并发处理能力。工作线程通过条件变量和线程安全队列来获取待处理的事件。

4、使用智能指针管理资源:我们使用std::unique_ptr来管理ConnectionHandler实例,确保在连接关闭时资源能够正确释放。

5、使用EPOLLONESHOT和边缘触发模式:在epoll_ctl中,我们使用EPOLLONESHOT标志和EPOLLET标志,分别表示每次只监视一次事件,以及采用边缘触发模式。这样可以减少不必要的事件通知,提高效率。

通过这些优化,我们的网络服务器将拥有更高的并发处理能力和更好的性能表现。不过,由于引入了多线程,程序的复杂度也有所增加,需要格外注意线程安全和资源管理等问题。


五、socket 编程最佳实践和注意事项


在 C++ 中进行 socket 编程时,遵循最佳实践和注意事项是非常重要的。

以下是一些关键点示例:

1、定义明确的协议

使用固定长度的头部来定义消息结构,例如:

struct Message {size_t length; // 消息长度char type;    // 消息类型char data[];  // 消息数据
};

2、处理粘包和半包问题

接收消息时,根据头部信息读取完整的消息体:

size_t recvMessage(int sockfd, char* buffer, size_t bufferSize) {struct Message messageHeader;size_t bytesRead = recv(sockfd, &messageHeader, sizeof(messageHeader), 0);if (bytesRead == sizeof(messageHeader)) {size_t totalBytes = sizeof(messageHeader) + messageHeader.length;if (totalBytes > bufferSize) {// 缓冲区不足,处理错误return 0;}bytesRead += recv(sockfd, buffer, messageHeader.length, 0);}return bytesRead;
}

3、使用非阻塞 I/O

设置 socket 为非阻塞模式:

int sockfd = socket(AF_INET, SOCK_STREAM, 0);
fcntl(sockfd, F_SETFL, O_NONBLOCK);

4、考虑使用缓冲区

使用 recv 函数读取数据到缓冲区:

char buffer[1024];
ssize_t bytesRead = recv(sockfd, buffer, sizeof(buffer), 0);

5、注意字节序问题

使用 htonshtonl 进行网络字节序转换:

unsigned short port = htons(8080);
unsigned int ip = htonl(INADDR_ANY);

6、异常和错误处理

检查系统调用的返回值,并适当处理错误:

if (sockfd < 0) {perror("socket creation failed");exit(EXIT_FAILURE);
}

7、资源管理

确保关闭 socket 描述符:

close(sockfd);

8、性能优化

禁用 Nagle 算法:

int flag = 1;
setsockopt(sockfd, IPPROTO_TCP, TCP_NODELAY, (char*)&flag, sizeof(flag));

9、多线程和多进程

使用线程安全的方法处理并发:

std::thread clientThread(&handleClient, sockfd);
clientThread.detach();

这些代码示例提供了 C++ socket 编程的一些基本框架和考虑事项。在实际应用中,可能需要根据具体需求进行调整和扩展。


六、结语


需要说明的是,上面的代码只是一个基本框架,你可以根据实际需求进一步扩展和完善,比如添加连接管理、数据缓冲区、日志记录等功能模块。通过不断地探索和实践,相信你一定能掌握高性能网络编程的精髓,构建出卓越的网络应用!

这篇关于Socket编程权威指南(五)高性能 Socket 编程实战的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1048071

相关文章

Python正则表达式匹配和替换的操作指南

《Python正则表达式匹配和替换的操作指南》正则表达式是处理文本的强大工具,Python通过re模块提供了完整的正则表达式功能,本文将通过代码示例详细介绍Python中的正则匹配和替换操作,需要的朋... 目录基础语法导入re模块基本元字符常用匹配方法1. re.match() - 从字符串开头匹配2.

MyBatis分页查询实战案例完整流程

《MyBatis分页查询实战案例完整流程》MyBatis是一个强大的Java持久层框架,支持自定义SQL和高级映射,本案例以员工工资信息管理为例,详细讲解如何在IDEA中使用MyBatis结合Page... 目录1. MyBATis框架简介2. 分页查询原理与应用场景2.1 分页查询的基本原理2.1.1 分

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

JavaScript中的高级调试方法全攻略指南

《JavaScript中的高级调试方法全攻略指南》什么是高级JavaScript调试技巧,它比console.log有何优势,如何使用断点调试定位问题,通过本文,我们将深入解答这些问题,带您从理论到实... 目录观点与案例结合观点1观点2观点3观点4观点5高级调试技巧详解实战案例断点调试:定位变量错误性能分

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Java使用jar命令配置服务器端口的完整指南

《Java使用jar命令配置服务器端口的完整指南》本文将详细介绍如何使用java-jar命令启动应用,并重点讲解如何配置服务器端口,同时提供一个实用的Web工具来简化这一过程,希望对大家有所帮助... 目录1. Java Jar文件简介1.1 什么是Jar文件1.2 创建可执行Jar文件2. 使用java

Python实现精确小数计算的完全指南

《Python实现精确小数计算的完全指南》在金融计算、科学实验和工程领域,浮点数精度问题一直是开发者面临的重大挑战,本文将深入解析Python精确小数计算技术体系,感兴趣的小伙伴可以了解一下... 目录引言:小数精度问题的核心挑战一、浮点数精度问题分析1.1 浮点数精度陷阱1.2 浮点数误差来源二、基础解决

Java实现在Word文档中添加文本水印和图片水印的操作指南

《Java实现在Word文档中添加文本水印和图片水印的操作指南》在当今数字时代,文档的自动化处理与安全防护变得尤为重要,无论是为了保护版权、推广品牌,还是为了在文档中加入特定的标识,为Word文档添加... 目录引言Spire.Doc for Java:高效Word文档处理的利器代码实战:使用Java为Wo

SpringBoot 多环境开发实战(从配置、管理与控制)

《SpringBoot多环境开发实战(从配置、管理与控制)》本文详解SpringBoot多环境配置,涵盖单文件YAML、多文件模式、MavenProfile分组及激活策略,通过优先级控制灵活切换环境... 目录一、多环境开发基础(单文件 YAML 版)(一)配置原理与优势(二)实操示例二、多环境开发多文件版