epoll原理剖析以及reactor模型应用丨网络编程|网络IO|select|poll|socket|reactor多核实现丨c/c++linux服务器开发

select模式的特点： 1.单个进程监测的fd受限制，默认下是1024个文件描述符； 2.轮询式检查文件描述符集合中的每个fd可读可写状态，IO效率会随着描述符集合增大而降低； 3.可以采用一个父进程专门accept，父进程均衡的分配多个子进程分别处理一部分的链接，子进程采用select模型监测自己负责的fd的可读可写。

RPC（Remote Procedure Call），是一个大家既熟悉又陌生的词，只要涉及到通信，必然需要某种网络协议。我们很可能用过HTTP，那么RPC又和HTTP有什么区别呢？RPC还有什么特点，常见的选型有哪些？ 文章相关视频讲解： RPC和微服务Thrift的架构原理 C++架构师学习地址：C/C++Linux服务器开发高级架构师/Linux后台架构师 1. RPC是什么 RPC可以分为两部分：用户调用接口 + 具体网络协议。前者为开发者需要关心的，后者由框架来实现。 举个例子，.

前言 其实我一直弄不明白一点，那就是计算机技术的发展，是让这个世界变得简单了，还是变得更复杂了。 当然这只是一个玩笑，可别把这个问题当真。 然而对于IT从业者来说，这可不是一个玩笑。几乎每一次的技术发展，都让这个生态变得更为复杂。“英年早秃”已经成为一种很普遍的现象。 Rust是近两年呼声比较高的一种新型开发语言。市场占有量并不大，但增长速度极为迅猛。 有人统计过，在计算机行业，平均每33.5天就有一种所谓的新型开发语言面世，这还不包括很多企业内部、项目内部的内置简易流程工具。然而大浪淘沙，如今仍然占

@[前言： 小编从事c方面10多年的工作经验、今天跟大家分享一下我总结出来的一系列 C/C Linux后台服务器开发的学习路线。从Linux开发工程师-Linux后台开发工程师-Linux高级互联网架构师。 上篇写编跟大家分享从Linux开发工程师-Linux后台开发工程师的学习路线，知识点总结。 今天跟大家分享Linux高级互联网架构师学习路线及知识点总结： 首先想要成为高级架构师你得先熟练掌握...

我曾以为像定时器这样基础的功能，操作系统会有一个完备的实现。当需要开启一个定时任务的时候，会有一个优雅的、如下形式的接口： typedef void (*callback)(void*); void setTimeout(unsigned int second,callback cb，void* arg); 可是事与愿违，Linux下不存在这样的接口。文章相关视频讲解： 如何实现分布式定时器及核心原理：如何实现分布式定时器及核心原理 详解Linux网络编程相关的细节处理：详解Linux网络编程相

1|0日志文件系统 对文件系统进行修改时，需要进行很多操作。这些操作可能中途被打断，也就是说，这些操作不是“不可中断”(atomic)的。如果操作被打断，就可能造成文件系统出现不一致的状态。 例如：删除文件时，先要从目录树中移除文件的标示，然后收回文件占用的空间。如果在这两步之间操作被打断，文件占用的空间就无法收回。文件系统认为它是被占用的，但实际上目录树中已经找不到使用它的文件了。 在非日志文件系统中，要检查并修复类似的错误必须对整个文件系统的数据结构进行检查。这个操作可能会花费很长的时间。 为了

这里先举个可能不太恰当，但是很容易理解的例子。比如，平时我们要寄快递，如果东西太大的话，那么就需要拆成几个包裹来邮寄。收件人仅收到个别包裹的时候，东西是不完整的，对应到网络传输中，这种情况就叫半包。只有等接收到全部包裹时，这个东西（传输的信息）才完整，所以半包情况下无法解析出完整的数据，需要等，等接收到全部包裹。那么问题来了，如何知晓已经收到全部包裹了呢？下文我们再作分析。再比如，快过年了，我打算给家里的亲戚送点礼物，给每位长辈送个手表，我们都知道手表的体积不大，并且我家里人都住在一个村，所以把给各长辈的礼

假如你想了解IO多路复用，那本文或许可以帮助你 本文的最大目的就是想要把select、epoll在执行过程中干了什么叙述出来，所以具体的代码不会涉及，毕竟不同语言的接口有所区别。 基础知识 IO多路复用涉及硬件、操作系统、应用程序三个层面，了解这些知识是很有帮助的。 假如已经了解，可直接跳过 Linux系统中断 中断是指计算机在执行期间，系统内发生任何非寻常的或非预期的急需处理事件，使得CPU暂时中断当前正在执行的程序而转去执行相应的事件处理程序，待处理完毕后又返回原来被中断处继续执行或调度.

前言 ​ 高性能是每个程序员的追求，无论写一行代码还是做一个系统，都希望能够达到高性能的效果。高性能架构设计主要集中在两方面： 尽量提升单服务器的性能，将单服务器的性能发挥到极致 如果单服务器无法支撑性能，设计服务器集群方案 ​ 单服务器高性能的关键之一就是服务器采取的网络编程模型。服务器如何管理连接，如何处理请求等。这两个设计点最终都和操作系统的I/O模型及进程模型相关。 I/O模型：阻塞、非阻塞、同步、异步 进程模型：单进程、多进程、多线程。 ​ 我们所说的I/O模型是指网络I/O模型,就是服

网络编程是 Linux C/C++的面试重点，今天我就来聊一聊进程间通信的问题，文章末尾列出了参考资料，希望帮助到大家。篇幅有点长，希望大家耐心阅读。Linux 下的进程通信手段基本上是从 Unix 平台上的进程通信手段继承而来的。如图所示：​其中，最初 Unix IPC 包括：管道、FIFO、信号；System V IPC 包括：System V 消息队列、System V 信号灯、System V 共享内存区；Posix IPC 包括： Posix 消息队列、Posix 信号灯、Posix 共享内存区。

Linux网络编程系列: Linux网络编程篇之Socket编程预备知识 Linux网络编程篇之TCP协议分析及聊天室功能实现 如果对Linux网络编程,对socket通信不是太清楚的同学,强烈推荐看一下上述的预备知识,说不定,就会喜欢上Linux的网络编程世界 本系列会尽量对协议的部分进行介绍, 结合简单应用例子进行掌握学习. ping程序功能实现 效果展示 在这里插入图片描述 ...

1. 前言 　　给最近正在准备秋招的同学或者是想转行，目标岗位是C++后端开发工程师，这个岗位对开发者的要求也比较高，需要的基础知识非常多，刚刚开始准备的时候，感觉也是不知从何入手，现在经过了一段时间的学习，感觉比刚开始的时候好了一些，但是在很多方面还有欠缺，所以写下这篇文章，给你们进行一个总结，也希望能帮助到你们在这条路上不断前行的人。 2. 服务器开发与后台开发的联系和区别 　　服务器是一种高性能的计算机，相对于普通的个人电脑，它的性能往往更强，但是功能也更加单一。服务器开发，就是在服务器上面开发

一、关于I/O模型的问题 　　最近通过对ucore操作系统的学习，让我打开了操作系统内核这一黑盒子，与之前所学知识结合起来，解答了长久以来困扰我的关于I/O的一些问题。 　　1. 为什么redis能以单工作线程处理高达几万的并发请求？ 　　2. 什么是I/O多路复用？为什么redis、nginx、nodeJS以及netty等以高性能著称的服务器其底层都利用了I/O多路复用技术？ 　　3. 非阻塞I/O为什么会流行起来，在许多场景下取代了传统的阻塞I/O？ 　　4. 非阻塞I/O真的是银弹吗？为什么

前言 同步和异步的概念描述的是用户线程与内核的交互方式：同步是指用户线程发起IO请求后需要等待或者轮询内核IO操作完成后才能继续执行；而异步是指用户线程发起IO请求后仍继续执行，当内核IO操作完成后会通知用户线程，或者调用用户线程注册的回调函数。阻塞和非阻塞的概念描述的是用户线程调用内核IO操作的方式：阻塞是指IO操作需要彻底完成后才返回到用户空间；而非阻塞是指IO操作被调用后立即返回给用户一个状态值，无需等到IO操作彻底完成。 异步I/O 在理解异步I/O之前，我们先要知道什么是同步I/O 在阻塞同

本文包含以下内容： epoll是如何工作的 本文不包含以下内容： epoll 的用法 epoll 的缺陷 epoll实现原理由视频讲解： C/C++ Linux服务器开发高级架构学习视频点击：C/C++Linux服务器开发/Linux后台架构师-学习视频教程 epoll原理剖析以及reactor模型应用 基于linux epoll网络编程细节处理 我实在非常喜欢像epoll这样使用方便、原理不深却有大用处的东西，即使它可能已经比较老了 select 和 poll 的缺点 epoll

一、Linux时间类型 在Linux系统当中，时间分为两种类型：格林威治时间和日历时间。 Coordinated Universal Time（UTC）是世界标准的时间，即常说的格林威治标准时间（Greenwich Mean Time，GMT）；UTC与GMT两者几乎是同一概念，都是指格林威治时间，只不过UTC的称呼更为正式一点。两者的区别是UTC是天文学上的概念，而GMT是基于一个原子钟。 ...

本文摘要：本章深入探讨TCP服务器/客户端编程核心问题与解决方案。主要内容包括：TCP粘包问题的三种处理方式（固定长度、长度前缀、TLV协议）；三种并发服务器模型实现（多进程、多线程、epoll事件驱动）；连接管理关键机制（心跳保活、半关闭处理、连接池优化）；以及生产级TCP服务器的调试与实践要点。通过代码示例展示了协议设计、并发控制和资源管理的具体实现方法，为构建高性能网络服务提供系统性指导。

IO永远包含等待和拷贝两个过程，并且等待的时间远远大于拷贝的时间，在实际过程中为了提高IO的效率就需要减少等待的时间。前四种IO都是同步IO，都参与了等待或者拷贝的过程（这里的同步不是进程同步表示先后顺序的，而是表示进程有没有参与这个IO过程，是同步的就说明进程参与了IO过程），而异步IO也应证了这个概念，不关心IO过程，完全交给内核进行等待和拷贝，自己只需要处理即可。select系统调用就是等待多个fd，一旦这多个fd中有一个或以上的fd就绪了，select会通知上层，告诉调用方那些fd可以进行IO了。

摘要 本章详细介绍了Linux非阻塞I/O与事件驱动编程模型。主要内容包括：非阻塞I/O的原理与设置方法（通过fcntl、socket选项等）；非阻塞I/O的返回值处理模式；事件驱动编程模型的核心概念；Reactor与Proactor两种设计模式的对比；基于epoll的事件循环实现；定时器管理技术；信号与I/O的统一处理方法；以及完整的事件驱动框架设计。文中通过代码示例展示了非阻塞I/O的基本使用方式，包括非阻塞读写、connect等操作的正确处理模式，为构建高性能网络应用提供了理论基础和实践指导。