hp-socket 是一套通用的高性能 windows socket 组件包,包含服务端组件(iocp 模型)和客户端组件(event select 模型),广泛适用于 windows 平台的 tcp/udp 通信系统。hp-socket 对通信层实现完全封装,上层应用不必关注通信层的任何细节;hp-socket 提供基于事件通知模型的 api 接口,能非常简单高效地整合到各类应用程序中;另外,为了让大家能更方便的学习 hp-socket,特此精心制作了功能测试示例(test echo)、性能测试示例(test echo-pfm)、pull 模型测试示例(test echo-pull) 和 udp 测试示例(test echo-udp),用户可以通过这几个测试示例入手,迅速掌握组件的设计思想和使用方法。
----------------------------------------------------------------
通用性
- 通信组件的唯一职责就是接受和发送字节流,绝对不能参与上层协议解析等工作;
- 与上层使用者解耦、互不依赖,组件与使用者通过操作接口和监听器接口进行交互,组件实现操作接口为上层提供操作方法;使用者实现监听器接口把自己注册为组件的 listener,接收组件通知。因此,任何使用者只要实现了监听器接口都可以使用组件;另一方面,甚至可以自己重新写一个实现方式完全不同的组件实现给使用者调用,只要该组件遵从组件的操作接口,这也是 dip 设计原则的体现。
可用性
可用性对所有通用组件都是至关重要的,如果太难用还不如自己重头写一个来得方便。因此,组件的操作接口和监听器接口设计得尽量简单易用(通俗来说就是“傻瓜化”),这两个接口的主要方法均不超过 5 个。另外,组件完全封装了所有的底层 socket 通信,上层应用看不到任何通信细节,不必也不能干预任何通信操作,socket 连接被抽象为 connection id,该参数作为连接标识提供给上层应用识别不同的连接。
高性能
作为底层的通用组件,性能问题是必须考虑的,绝对不能成为系统的瓶颈。而另一方面,从实际出发,根据客户端组件与服务端组件的性能要求采用不同的 socket 模型。组件在设计上充分考虑了性能、现实使用情景、可用性和实现复杂性等因素,确保满足性能要求的同时又不会写得太复杂。做出以下两点设计决策:
- 客户端:在单独线程中实现 socket 通信交互。这样可以避免与主线程或其他线程相互干扰;i/o 模型选择 event select 通信模型。
- 服务端:采用 windows 平台效率最高的 iocp 通信模型;利用缓存池技术,在通信的过程中,通常需要频繁的申请和释放内存缓冲区,建立了动态缓存池, 只有当缓存池中没有可用对象时才创建新对象,而当缓存对象过多时则会压缩缓存池;另外,组件的动态内存通过私有堆(private heap)机制分配,避免与 new / malloc 竞争同时又减少内存空洞。
伸缩性
可以根据实际的使用环境要求设置组件的各项性能参数(如:工作线程的数量、各种缓存池的大小、收发缓冲区的大小、socket 监听队列的大小、accep 派发的数目以及心跳检查的间隔等)。
(项目凯发推荐主页:,下载地址:)
*** v3.1.2 更新 ***
> 修改 server 组件的 onclose() / onerror() 事件的触发规则:
------------------ 以前版本的 tcp/udp server 组件中,当关闭一个连接时可能会同时触发一个 onclose() 事件和若干个 onerror() 事件
- 由于存在上述可能性,所以应用程序需要对 onclose() / onerror() 的处理事件代码段进行同步
- 从 v3.1.2 开始,当多个 onclose() / onerror() 事件同时发生时,组件只会向应用程序通知第一个事件,后续事件则忽略
- 因此,应用程序在处理 onclose() / onerror() 事件时不必处理同步,减少了出错的可能和编写同步及检测代码的负担
-
示例代码
/* 示例代码一:*/ /*----------------------------------------------------------------------------*/ isocketlistener::enhandleresult cserverdlg::onclose(connid dwconnid) { // 以前版本:有可能存在并发的 onclose()/onerror(),要把代码放在临界区中并检测返回值 ccriseclock locallock(m_cspkginfo); // <-- 临界区 pvoid pinfo = nullptr; // <-- 检测返回值 if(m_server->getconnectionextra(dwconnid, &pinfo) && pinfo != nullptr) { m_server->setconnectionextra(dwconnid, nullptr); delete pinfo; } } /* 示例代码二:*/ /*----------------------------------------------------------------------------*/ isocketlistener::enhandleresult cserverdlg::onclose(connid dwconnid) { // v3.1.2 版本:只会接收到一个 onclose()/onerror() 事件,能安全地移除临界区代码和检测代码 pvoid pinfo = nullptr; m_server->getconnectionextra(dwconnid, &pinfo); assert(pinfo != nullptr); delete pinfo; }
> 其它更新:
------------------
调整 tcp server 默认参数
1) default_socket_listen_queue : 300 2) default_accept_socket_count : 300 3) default_free_socketobj_pool : 150 4) default_free_socketobj_hold : 450 5) default_free_bufferobj_pool : 300 6) default_free_bufferobj_hold : 900
-
调整 udp server 默认参数
1) default_free_socketobj_pool : 150 2) default_free_socketobj_hold : 450 3) default_free_bufferobj_pool : 300 4) default_free_bufferobj_hold : 900
> 升级说明:
------------------ 使用 hp-socket v3.1.1 及以前版本的应用程序可以安全升级到 hp-socket v3.1.2
*** v3.1.1 更新 ***
> 增加导出纯 c 函数的动态链接库 hpsocket4c.dll:
------------------ 增加代码文件 hpsocket4c.h 和 hpsocket4c.cpp,用于创建 hpsocket4c.dll
- 导出纯 c 函数,让其它语言(如:c/c#/delphi 等)能方便地使用 hpsocket
-
hpsocket4c.dll 使用方法
方法一: ------------------------------------------------------------------------------ (0) (c/c 程序)包含 hpsocket4c.h 头文件 (1) 调用 ::create_hp_xxxlistener() 函数创建监听器对象 (2) 调用 ::create_hp_xxx(plistener) 函数创建 hpsocket 对象 (3) 调用 ::hp_set_fn_xxx_onyyy(plistener, ...) 函数设置监听器的回调函数 (4) 调用相关导出函数操作 hpsocket 对象 (5) ...... ...... (6) 调用 ::destroy_hp_xxx(psocket) 函数销毁 hpsocket 对象 (7) 调用 ::destroy_hp_xxxlistener(plistener) 函数销毁监听器对象 方法二: ------------------------------------------------------------------------------ (1) 应用程序把需要用到的导出函数封装到特定语言的包装类中 (2) 通过包装类封装后,以面向对象的方式使用 hpsocket
-
动态链接库发行版本
(1) x86/hpsocket4c.dll - (32位/mbcs/release) (2) x86/hpsocket4c_d.dll - (32位/mbcs/debug) (3) x86/hpsocket4c_u.dll - (32位/unicode/release) (4) x86/hpsocket4c_ud.dll - (32位/unicode/debug) (5) x64/hpsocket4c.dll - (64位/mbcs/release) (6) x64/hpsocket4c_d.dll - (64位/mbcs/debug) (7) x64/hpsocket4c_u.dll - (64位/unicode/release) (8) x64/hpsocket4c_ud.dll - (64位/unicode/debug)
> 全面启用 buffer pool 缓存机制:
------------------ common/src 增加代码文件 bufferpool.h 和 bufferpool.cpp,实现 buffer pool 缓存机制
- 通过 buffer pool 缓存机制提升内存使用效率,减少动态内存分配和释放操作,避免内存空洞
- ictcpclient 用 citempool 和 titemlist 实现发送缓冲区
- cudpclient 用 citempool 和 titemlist 实现发送缓冲区
- ctcppullclient 用 citempool 和 titemlist 实现发送缓冲区和 pull 缓冲区
- ctcppullserver 用 cbufferpool 和 tbuffer 实现 pull 缓冲区
*** v3.0.2 更新 ***
> 把 hp-socket 编译为动态链接库:
-----------------
- 应用程序可以通过导入源代码或动态链接库方式使用 hp-socket
- 动态链接库使用方法
方法一: ------------------------------------------------------------------------------ (0) 应用程序包含 socketinterface.h 和 hpsocket.h 头文件 (1) 调用 hp_create_xxx() 函数创建 hpsocket 对象 (2) 使用完毕后调用 hp_destroy_xxx() 函数销毁 hpsocket 对象 方法二: ------------------------------------------------------------------------------ (0) 应用程序包含 socketinterface.h 和 hpsocket.h 头文件 (1) 创建 cxxxwrapper 包装器,通过包装器智能指针使用 hpsocket 对象
- 动态链接库发行版本
(1) x86/hpsocket.dll - (32位/mbcs/release) (2) x86/hpsocket_d.dll - (32位/mbcs/debug) (3) x86/hpsocket_u.dll - (32位/unicode/release) (4) x86/hpsocket_ud.dll - (32位/unicode/debug) (5) x64/hpsocket.dll - (64位/mbcs/release) (6) x64/hpsocket_d.dll - (64位/mbcs/debug) (7) x64/hpsocket_u.dll - (64位/unicode/release) (8) x64/hpsocket_ud.dll - (64位/unicode/debug)
*** v3.0.1 更新 ***
> 新增 udp 通信组件:
-----------------
- 新增两个 udp 通信组件:cudpserver 为服务端组件,cudpclient 为客户端组件
- 服务端组件 cudpserver 采用 iocp 通信模型
- 客户端组件 cudpclient 采用 event select 通信模型
- udp 通信组件的接口与原 tcp 通信组件一致,简单实用
- udp 通信组件内置通信线路自动监测机制
- 新增 udp 通信组件示例工程 testecho-udp
> 代码重构与优化:
-----------------
- 规范所有接口、类以及代码文件的命名
- 重构和优化了大量组件代码
- 服务端组件加入读写锁机制,有效平衡处理性能与安全性
- 服务端组件的 socket 对象缓存列表设置了锁定时间,提高访问的安全性
*** v2.2.3 更新 ***
> 连接 id 的数据类型改为 ‘connid’:
-----------------
- 在sockethelper.h 中定义 connid 数据类型(默认:typedef ulong_ptr connid)
- 应用程序可以把 connid 定义为其希望的类型(如:ulong / ulonglong 等)
- 为了便于移植与维护,应用程序的任何地方都应该用‘connid’类型引用连接 id
> 服务端 socket 组件支持为每个连接绑定附加数据:
-----------------
- iserversocket 和 ciocpserver 增加方法 get/setconnectionextra()
- 通过上述两个方法,应用程序可以为每个连接绑定任意附加数据并把数据获取出来
*** v2.2.2 更新 ***
> 优化心跳检测相关功能:
-----------------
- iserversocket 和 iclientsocket 的 get/setkeepalivetimes() 方法改为 get/setkeepalivetime()
- ciocpserver 和 cclientsocket 的默认 keepalivetime 属性改为 5000
- ciocpserver 和 cclientsocket 的默认 keepaliveinterval 属性改为 3000
*** v2.2.1 更新 ***
> pull 模型支持:
-----------------
- isocketlistener 增加 pull 模型数据接收通知方法 onreceive(dwconnid, int)
- 增加 pull socket 接口 ipullsocket,该接口的 fetch(dwconnid, pbuffer, ilength) 方法用于抓取通信数据
> server:
-----------------
- 服务端 socket 接口 isocketserver 改名为 iserversocket
- 增加 pull server socket 监听器抽象类 cpullserversocketlistener
- 增加 pull server socket 接口 ipullserversocket
- 增加 pull server socket 实现类 ciocppullserver
> client:
-----------------
- 客户端 socket 接口 isocketclient 改名为 iclientsocket
- 客户端 socket 实现类 csocketclient 改名为 cclientsocket
- 增加 pull client socket 监听器抽象类 cpullclientsocketlistener
- 增加 pull client socket 接口 ipullclientsocket
- 增加 pull client socket 实现类 cpullclientsocket
3 楼 guaishou 2014-01-19 03:40
2 楼 2014-01-15 10:51
1 楼 ldcsaa 2014-01-14 21:55