高性能 socket 组件 hp-欧洲杯足彩官网

10顶
0踩

hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e(易语言)、java、python 等编程语言接口。hp-socket 对通信层实现完全封装,上层应用不必关注通信层的任何细节;hp-socket 提供基于事件通知模型的 api 接口,能非常简单高效地整合到新旧应用程序中。为了让使用者能方便快速地学习和使用 hp-socket,迅速掌握组件的设计思想和使用方法,特此精心制作了大量 demo 示例,包括 push 模型示例、pull模型示例和性能测试示例等。hp-socket 目前运行在 windows 平台,将来会实现跨平台支持。

----------------------------------------------------------------

通用性

  • 通信组件的唯一职责就是接受和发送字节流,绝对不能参与上层协议解析等工作。
  • 与上层使用者解耦、互不依赖,组件与使用者通过操作接口和监听器接口进行交互,组件实现操作接口为上层提供操作方法;使用者实现监听器接口把自己注册为组件的 listener,接收组件通知。因此,任何使用者只要实现了监听器接口都可以使用组件;另一方面,甚至可以自己重新写一个实现方式完全不同的组件实现给使用者调用,只要该组件遵从组件的操作接口,这也是 dip 设计原则的体现。

可用性

  可用性对所有通用组件都是至关重要的,如果太难用还不如自己重头写一个来得方便。因此,组件的操作接口和监听器接口设计得尽量简单易用(通俗来说就是“傻瓜化”),这两个接口的主要方法均不超过 5 个。另外,组件完全封装了所有的底层 socket 通信,上层应用看不到任何通信细节,不必也不能干预任何通信操作,socket 连接被抽象为 connection id,该参数作为连接标识提供给上层应用识别不同的连接。

高性能

  作为底层的通用组件,性能问题是必须考虑的,绝对不能成为系统的瓶颈。而另一方面,从实际出发,根据客户端组件与服务端组件的性能要求采用不同的 socket 模型。组件在设计上充分考虑了性能、现实使用情景、可用性和实现复杂性等因素,确保满足性能要求的同时又不会写得太复杂。做出以下两点设计决策:

  • 客户端:在单独线程中实现 socket 通信交互,这样可以避免与主线程或其他线程相互干扰;i/o 模型选择 event select 通信模型。每个组件对象管理一个 socket 连接。
  • 服务端:采用高效的 iocp 通信模型;利用缓存池技术,在通信的过程中,通常需要频繁的申请和释放内存缓冲区,建立了动态缓存池, 只有当缓存池中没有可用对象时才创建新对象,而当缓存对象过多时则会压缩缓存池;另外,组件的动态内存通过私有堆(private heap)机制分配,避免与 new / malloc 竞争同时又减少内存空洞。
  • agent:对于代理服务器或中转服务器等应用场景,服务器自身也作为客户端向其它服务器发起大规模连接,一个 agent 组件对象管理多个 socket 连接,与服务端采用相同的技术架构,可以用作代理服务器或中转服务器的客户端部件。

伸缩性

  可以根据实际的使用环境要求设置组件的各项性能参数(如:工作线程的数量、各种缓存池的大小、收发缓冲区的大小、socket 监听队列的大小、accep 派发的数目以及心跳检查的间隔等)。

   (项目凯发推荐主页:,下载地址:)


*** v3.2.1 更新 ***

 > 增加 tcpagent / tcppullagent 通信组件:

-----------------
  1. 对于代理服务器或中转服务器等应用场景,服务器自身也作为客户端向其它服务器发起大规模连接
  2. tcpclient / tcppullclient 基于 event select 通信模型,每个组件对象管理一个 socket,并开启一个线程,不适合上述应用场景
  3. tcpagent / tcppullagent 基于 iocp 通信模型,一个组件对象管理多个 socket,适合用作代理服务器或中转服务器的客户端通信组件
  4. tcpagent / tcppullagent 的使用方式依然简单,提供以下接口方法:
    /* 1) 通知接口方法 */
    onprepareconnect(connid dwconnid, socket socket)
    onconnect(connid dwconnid)
    onsend(connid dwconnid, const byte* pdata, int ilength)
    onreceive(connid dwconnid, const byte* pdata, int ilength)	//(push 模型)
    onreceive(connid dwconnid, int ilength)						//(pull 模型)
    onclose(connid dwconnid)
    onerror(connid dwconnid, ensocketoperation enoperation, int ierrorcode)
    onagentshutdown()
    /* 2) 主要操作方法 */
    start(lpctstr pszbindaddress = nullptr, bool basyncconnect = true)
    stop()
    connect(lpctstr pszremoteaddress, ushort usport, connid* pdwconnid = nullptr)
    send(connid dwconnid, const byte* pbuffer, int ilength)
    disconnect(connid dwconnid, bool bforce = true)
    fetch(connid dwconnid, byte* pdata, int ilength)	//(pull 模型)
  5. 增加 tcpagent / tcppullagent 使用示例:agent-pfm / agent-pull / agent-4c

  6. 增加 tcpagent tcpserver 实现的 http 代理服务器示例:httpproxy

> 增加 hpsocket for java sdk:

-----------------
  1. 提供 java 开发包:hpsocket-3.2.1.jar(通过 jna 实现,目前只支持 windows 平台)
  2. 运行环境:jdk 1.6 ,jvm 运行在 server 模式("java -server",在 client 模式下性能受影响)
  3. mbcs 和 unicode 版本分布位于包 org.jessma.hpsocket.mbcs 和 org.jessma.hpsocket.unicode
  4. hpsocket for java sdk 提供以下通信组件:
    1) tcpserver:tcp 通信服务端组件,支持 push/pull 模型
    2) tcpclient:tcp 通信客户端组件,支持 push/pull 模型
    3) tcpagent :tcp 通信 agent 组件,支持 push/pull 模型
    4) udpserver:udp 通信服务端组件,支持 push 模型
    5) udpclient:udp 通信客户端组件,支持 push 模型
  5. hpsocket4j 的使用方法(以 tcpagent 为例):
    /* 0: 应用程序加入 hpsocket-3.2.1.jar 和 jna-4.1.0.jar */
    /* 1: 创建通信组件对象 */
    tcpagent agent = tcpagent.create(mode.push);
    /* 2: 设置回调函数对象 */
    // (可选)
    agent.setcallbackonprepareconnect(new onprepareconnectimpl());
    // (可选)
    agent.setcallbackonconnect(new onconnectimpl());
    // (必须)push 模型需要设置 onreceive 回调函数对象
    agent.setcallbackonreceive(new onreceiveimpl());
    // (必须)pull 模型需要设置 onpullreceive 回调函数对象
    // agent.setcallbackonpullreceive(new onpullreceiveimpl());
    // (可选)
    agent.setcallbackonsend(new onsendimpl());
    // (必须)
    agent.setcallbackonclose(new oncloseimpl());
    // (必须)
    agent.setcallbackonerror(new onerrorimpl());
    // (可选)
    agent.setcallbackonagentshutdown(new onagentshutdownimpl());
    /* 3:启动通信组件 */
    agent.start("127.0.0.1", false);
    /* 4:连接服务器 */
    agent.connect("localhost", (short)5555, pdwconnid);
    /* 5:处理通信数据 */
    // 响应 onreceive / onpullreceive 事件接收数据
    // 使用 agent.send(dwconnid, data, data.length) 发送数据
    /* 6:关闭通信组件 */
    agent.stop();
    /* 7:销毁通信组件 */
    tcpagent.destroy(agent);
  6. 增加示例工程 testecho-4j,展示 hpsocket4j 的使用方法(包括 pull 模型示例和性能测试示例)

> 优化数据收发策略:

-----------------
  1. server 和 agent 组件提供以下三种数据发送策略
    1)pack - 打包模式(默认):尽量把多个发送操作的数据组合在一起,增加传输效率
    2)safe - 安全模式	  :尽量把多个发送操作的数据组合在一起,控制传输速度,避免缓冲区溢出
    3)direct - 直接模式	  :对每一个发送操作都直接投递,适用于负载不高但要求实时性较高的场合
  2. server 和 agent 组件提供以下两种数据接收策略
    1)serial - 串行模式(默认):顺序触发同一连接的 onreceive 和 onclose/onerror 事件
    2)parallel - 并行模式:在不同的通信线程中同时触发同一连接的 onreceive 和 onclose/onerror 事件

> 其它更新:

-----------------
  1. iserver 的 getclientaddress() 方法改名为 getremoteaddress()
  2. iclient 的 send() 方法删除 “connid dwconnid” 参数
  3. iclient/iserver/iagent 的 send() 方法增加发送数据缓冲区指针偏移量参数 “int ioffset”
  4. 增加 ensendpolicy 枚举类型,iserver/iagent 增加发送模式设置方法 setsendpolicy()
  5. 增加 enrecvpolicy 枚举类型,iserver/iagent 增加接收模式设置方法 setrecvpolicy()
  6. iserver/iagent 增加方法:bool getallconnectionids(),获取所有连接的 connid
  7. iudpserver 增加方法:setpostreceivecount(),设置 receive 预投递数量
  8. enservererror / enclienterror 枚举类型合并为 ensocketerror
  9. ensocketerror / enhandleresult / enfetchresult 枚举类型从原所在类中移到外部
  10. iclient/iserver/iagent 增加方法:bool getpendingdatalength(),获取连接中未发出数据的长度
  11. hpsocket4c.dll 增加方法 sendpart(),支持指定缓冲区指针偏移量
  12. 增加 hpsocket for c# sdk(由 int 2e 提供)
  13. 增加 hpsocket 易语言支持库(由 yecate 提供)
  14. 公共代码包 vc-common-src 更新为 v2.3.5(参考:vc-common-src v2.3.5 的 change log)

> 升级说明:

-----------------
  1. hp-socket v3.2.1 在功能上兼容 hp-socket v3.1.3 及以前版本
  2. 接口有变化,需要根据提示修改程序代码;注意:现有程序不能直接替换 v3.1.3 的 dll
  3. enservererror / enclienterror 枚举类型合并为 ensocketerror,注意一些枚举值发生了变化

*** v3.1.3 更新 ***

 > 增加其它语言 demo:

-----------------
  1. c#
  2. delphi
  3. e 语言

> bug fix:

-----------------
  1. 修复 ip 地址判断错误 bug
     
    1) 客户端连接服务器时,如果服务器 ip 地址满位(12个数字:‘aaa.bbb.ccc.ddd’),ip 地址解析错误
    2) 影响组件:所有 tcp/udp 客户端组件
    3) 影响版本:v3.1.2 及之前所有版本
     
  2. 修复域名或主机名的 ip 地址解析错误 bug
     
    1) 客户端组件通过域名或主机名连接服务器时,可能会解析到错误的 ip 地址
    2) 影响组件:所有 tcp/udp 客户端组件
    3) 影响版本:v3.1.2 及之前所有版本

*** v3.1.2 更新 ***

 > 修改 server 组件的 onclose() / onerror() 事件的触发规则:

-----------------
  1. 以前版本的 tcp/udp server 组件中,当关闭一个连接时可能会同时触发一个 onclose() 事件和若干个 onerror() 事件
  2. 由于存在上述可能性,所以应用程序需要对 onclose() / onerror() 的处理事件代码段进行同步
  3. 从 v3.1.2 开始,当多个 onclose() / onerror() 事件同时发生时,组件只会向应用程序通知第一个事件,后续事件则忽略
  4. 因此,应用程序在处理 onclose() / onerror() 事件时不必处理同步,减少了出错的可能和编写同步及检测代码的负担
  5. 示例代码

    /* 示例代码一:*/
    /*----------------------------------------------------------------------------*/
    isocketlistener::enhandleresult cserverdlg::onclose(connid dwconnid)
    {
    	// 以前版本:有可能存在并发的 onclose()/onerror(),要把代码放在临界区中并检测返回值
    	ccriseclock locallock(m_cspkginfo);	// <-- 临界区
    	pvoid pinfo = nullptr;
    	// <-- 检测返回值
    	if(m_server->getconnectionextra(dwconnid, &pinfo) && pinfo != nullptr)
    	{
    		m_server->setconnectionextra(dwconnid, nullptr);
    		delete pinfo;
    	}
    }
    /* 示例代码二:*/
    /*----------------------------------------------------------------------------*/
    isocketlistener::enhandleresult cserverdlg::onclose(connid dwconnid)
    {
    	// v3.1.2 版本:只会接收到一个 onclose()/onerror() 事件,能安全地移除临界区代码和检测代码
    	pvoid pinfo = nullptr;
    	m_server->getconnectionextra(dwconnid, &pinfo);
    	assert(pinfo != nullptr);
    	delete pinfo;
    }

*** v3.1.1 更新 ***

 > 增加导出纯 c 函数的动态链接库 hpsocket4c.dll:

-----------------
  1. 增加代码文件 hpsocket4c.h 和 hpsocket4c.cpp,用于创建 hpsocket4c.dll
  2. 导出纯 c 函数,让其它语言(如:c/c#/delphi 等)能方便地使用 hpsocket
  3. hpsocket4c.dll 使用方法
    方法一:
    ------------------------------------------------------------------------------
    (0) (c/c   程序)包含 hpsocket4c.h 头文件
    (1) 调用 ::create_hp_xxxlistener() 函数创建监听器对象
    (2) 调用 ::create_hp_xxx(plistener) 函数创建 hpsocket 对象
    (3) 调用 ::hp_set_fn_xxx_onyyy(plistener, ...) 函数设置监听器的回调函数
    (4) 调用相关导出函数操作 hpsocket 对象
    (5) ...... ......
    (6) 调用 ::destroy_hp_xxx(psocket) 函数销毁 hpsocket 对象
    (7) 调用 ::destroy_hp_xxxlistener(plistener) 函数销毁监听器对象
    方法二:
    ------------------------------------------------------------------------------
    (1) 应用程序把需要用到的导出函数封装到特定语言的包装类中
    (2) 通过包装类封装后,以面向对象的方式使用 hpsocket
  4. 动态链接库发行版本
    (1) x86/hpsocket4c.dll		- (32位/mbcs/release)
    (2) x86/hpsocket4c_d.dll	- (32位/mbcs/debug)
    (3) x86/hpsocket4c_u.dll	- (32位/unicode/release)
    (4) x86/hpsocket4c_ud.dll	- (32位/unicode/debug)
    (5) x64/hpsocket4c.dll		- (64位/mbcs/release)
    (6) x64/hpsocket4c_d.dll	- (64位/mbcs/debug)
    (7) x64/hpsocket4c_u.dll	- (64位/unicode/release)
    (8) x64/hpsocket4c_ud.dll	- (64位/unicode/debug)

> 全面启用 buffer pool 缓存机制:

-----------------
  1. common/src 增加代码文件 bufferpool.h 和 bufferpool.cpp,实现 buffer pool 缓存机制
  2. 通过 buffer pool 缓存机制提升内存使用效率,减少动态内存分配和释放操作,避免内存空洞
  3. ictcpclient 用 citempool 和 titemlist 实现发送缓冲区
  4. cudpclient 用 citempool 和 titemlist 实现发送缓冲区
  5. ctcppullclient 用 citempool 和 titemlist 实现发送缓冲区和 pull 缓冲区
  6. ctcppullserver 用 cbufferpool 和 tbuffer 实现 pull 缓冲区

*** v3.0.2 更新 ***

 > 把 hp-socket 编译为动态链接库:

-----------------

  1. 应用程序可以通过导入源代码或动态链接库方式使用 hp-socket
  2. 动态链接库使用方法
    方法一:
    ------------------------------------------------------------------------------
    (0) 应用程序包含 socketinterface.h 和 hpsocket.h 头文件
    (1) 调用 hp_create_xxx() 函数创建 hpsocket 对象
    (2) 使用完毕后调用 hp_destroy_xxx() 函数销毁 hpsocket 对象
    方法二:
    ------------------------------------------------------------------------------
    (0) 应用程序包含 socketinterface.h 和 hpsocket.h 头文件
    (1) 创建 cxxxwrapper 包装器,通过包装器智能指针使用 hpsocket 对象
  3. 动态链接库发行版本
    (1) x86/hpsocket.dll      - (32位/mbcs/release)
    (2) x86/hpsocket_d.dll    - (32位/mbcs/debug)
    (3) x86/hpsocket_u.dll    - (32位/unicode/release)
    (4) x86/hpsocket_ud.dll   - (32位/unicode/debug)
    (5) x64/hpsocket.dll      - (64位/mbcs/release)
    (6) x64/hpsocket_d.dll    - (64位/mbcs/debug)
    (7) x64/hpsocket_u.dll    - (64位/unicode/release)
    (8) x64/hpsocket_ud.dll   - (64位/unicode/debug)

*** v3.0.1 更新 ***

 > 新增 udp 通信组件:

-----------------

  1. 新增两个 udp 通信组件:cudpserver 为服务端组件,cudpclient 为客户端组件
  2. 服务端组件 cudpserver 采用 iocp 通信模型
  3. 客户端组件 cudpclient 采用 event select 通信模型
  4. udp 通信组件的接口与原 tcp 通信组件一致,简单实用
  5. udp 通信组件内置通信线路自动监测机制
  6. 新增 udp 通信组件示例工程 testecho-udp

> 代码重构与优化:

-----------------

  1. 规范所有接口、类以及代码文件的命名
  2. 重构和优化了大量组件代码
  3. 服务端组件加入读写锁机制,有效平衡处理性能与安全性
  4. 服务端组件的 socket 对象缓存列表设置了锁定时间,提高访问的安全性

10
0
评论 共 5 条 请登录后发表评论
5 楼 2014-06-16 15:56
不跨平台基本上没什么发展!
4 楼 2014-06-16 09:06
java 如果能够支持linux就好了.
3 楼 2014-06-10 13:19
不错!非常的好。
2 楼 2014-06-07 09:33
i say yeah
1 楼 ldcsaa 2014-06-05 14:54
anybody say something ...

发表评论

您还没有登录,请您登录后再发表评论

相关推荐

  • hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-socket ...

  • hp-socket 是一套通用的高性能 tcp/udp socket 组件,包括服务端组件、client组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统。提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-socket...

  •  hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-...

  • hp-socket 是一套通用的高性能 tcp/udp socket 组件。包括服务端组件、client组件和 agent 组件。广泛适用于各种不同应用场景的 tcp/udp 通信系统。提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-socket...

  •  hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-...

  •  hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-...

  •  hp-socket 是一套通用的高性能 tcp/udp socket 组件,包括服务端组件、client组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e(易语言)、java、python ...

  • hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-socket ...

  •  hp-socket 是一套通用的高性能 tcp/udp socket 组件,包含服务端组件、客户端组件和 agent 组件,广泛适用于各种不同应用场景的 tcp/udp 通信系统,提供 c/c 、c#、delphi、e、java 等编程语言开发接口。hp-...

  • 回复的主题网址:http://club.zsnet.com/showthread.php?p=1833爱这个痛与快乐的相互牵扯相互渗透的过程每一次的快乐愈是铭心愈发衬的痛苦的遥远每一次的痛愈是刻骨愈发显得快乐的缥缈我们就着样飘摇着在痛与快乐之间渐渐的迷失了方向迷失了曾经的那爱的真谛好了终于有一天我看到了自己明白了自己于是我变得沉默安静谨慎封闭变得不敢言爱因为爱是这样的让我在痛与快乐中飘摇迷惘

  • 单讲自己的快乐是单薄的单讲自己的幸福也是自私的人是社会的人,抛不开。你都知道要说自己“已婚”,说明你背后有着一系列的社会关系,同样,你无法抛开或置之不理。婚外情,如履薄冰一朝事发,与你相关联的人,可能同样被你影响,然后反过来影响你。如果你不在乎这个影响,不在乎这些关系的话,那你追求你的快乐去吧,尽管有不少人把你这种追求叫做“堕落”。如果你看过安妮宝贝的书,你可能会感受到不少故事里面有一种绝望的挣扎

  • 随想(回复社区一网友的贴)现实的迷幻,有如清晰的梦境--当你察觉它是梦境时,它已经成为过去,你已经不能再拥有。清晨的太阳,一如既往的早起--在情感漩涡中的你,是否还是不停的奋力向前?还是已经,学会了随波逐流。每天不停的脚步,是否还是踏着自己心里的节奏?也许,有如在梦里,看到的想到的只是让你难忘的那一丝喜悦。

  • 早春细雨寒,陌路冷风清。岁末无所成,游子归心轻。2005-02-02 中午于办公室bb在休息,黑着灯的办公室。平常困倦的我,心情难明轻或重。外边,寒风、灰天、冷路,前方迷雾一片。屏幕的闪亮,让我记起眼皮的疲软。闭上眼睛看到的就只有黑暗和不知方向地蹦跳的思绪。

  • 爱,就如你梦中绽放的绚丽的玫瑰睁开眼睛你就看到了现实脑里浮现的只有梦中的残影只有你闭上了眼睛放松自然的投入你才可以充分看到它的美

  • 风从我脸庞掠过在我耳边轻问你会留意我来过了吗我别过头看到了秋叶的飘零日子从我指缝溜过我喃喃自语我会留意到谁曾来过有我的眼睛不曾忘记头上飘过朵朵云絮我的脚步不停的为生活奔波但我一直没有忘记为了也许仅是惊鸿一现的你停留你的温暖的问候就如那蓝天上的片片云絮让我心里的喜悦开花

  • 仲秋的季节是成熟的佳期静静守望着漫天金黄的麦田平常生活的点滴播下粒粒爱的种子经过岁月的沉淀情感的催化在此佳期结出希望的果实来让我们一起享受收获的喜悦体验把握住了幸福的感觉籍此佳节祝愿我可爱的bb:永远可爱美丽!

  • 那份爱我静静的等待海风轻轻的撩拨只有披散的长发与它嬉戏空气中微湿的咸味时刻在提醒着我的感觉感觉着我自己的存在渐渐上涨的潮水默默的告诉我太阳出来之前我就该离去太阳出来之前我就要离去人生本就不是一场寂寞而漫长的等待因为另有n份爱

  • 一. 做一做那些你想做却没有时间做的事情.二. 给一个疏于联络的老朋友打电话.三. 忘记过去某个时间让你生气的某个人或某件事.    用记忆中快乐的片段来代替不愉快.四. 与一个闷闷不乐的人共读一则笑话--笑是灵丹妙药.五. 不要轻易许诺.六. 鼓励别人,给予他人帮助.七. 尽量与你家人和朋友在一起.八. 多赞美别人,因为这可能是他最需要的礼物.九. 当你发现做错了事情时,立即道歉.    道歉不

  • 发生过的感情是不可以忘记的因为那已经是你生命的一部分只要你未曾忘记自己你终究要面对或想起你的过去所以越是要提醒自己忘记越是会把记忆刻得更深也所以只能淡忘只能尽量不要去想等到那天即使想起了也心平如镜那时你已经忘记了

global site tag (gtag.js) - google analytics
网站地图