使用 ttcp 作为例子的理由
- 使用了基本的sockets APIs:socket,listen, bind, accept,connect,read/recv,write/send,shutdown,close 等等
- 协议带有格式,不只是字节流,相较于echo具有tcp分包处理等
- ttcp 本身是由 tcp/ip 实现的程序,具有一些典型的行为。可以阅读其代码学习它的一些优秀实现
- 协议简单,可以由多种语言实现,针对测试结果对比个语言实现的runtime开销
- 无并发连接,client与server之间只有一个tcp socket
ttcp 用到的协议
这里粗箭头表示有效载荷的数据,以 1 为例: 这里的 len=8192 对应右侧 结构体 PayloadMessage::length 成员携带的数据,表示第二个成员的 data 的长度。 而length本身占4个字节,因此这一次发送数据长度为 8192+4 。
(注意这里的PayloadMessage::data成员是一个柔性数组,大小由运行时写入的数据为准,所以这里需要一个length成员记录data的长度)
可以注意到,ttcp发送数据会有一个Ack应答,相对于netcat只发送不接收而言,理论上讲ttcp检测出的带宽要慢于netcat测出的结果,特别对于网络有延迟的情况而言,发送数据和Ack都会有延迟产生。
代码:https://github.com/chenshuo/muduo.git
- 直线型的阻塞IO示例:
- muduo/examples/ace/ttcp/ttcp_blocking.cc (C with sockets API)
- recipes/tpc/ttcp.cc (C++ with a thin wrapper)
- muduo-examples-in-go/examples/ace/ttcp/ttcp.go (Go)
- 非阻塞IO库示例:
- muduo/examples/ace/ttcp/ttcp.cc
以上示例都不支持并发连接,前三个示例每个连接起一个线程来处理就可以支持并发,第四个在设计上收到最后一条消息就退出,将退出语句注释掉可以支持并发。
ttcp 代码分析 及 测试角度
C服务端(接收函数)注解:
void receive(const Options& opt)
{int sockfd &#61; acceptOrDie(opt.port); struct SessionMessage sessionMessage &#61; { 0, 0 }; if (read_n(sockfd, &sessionMessage, sizeof(sessionMessage)) !&#61; sizeof(sessionMessage)) {perror("read SessionMessage");exit(1);} sessionMessage.number &#61; ntohl(sessionMessage.number); sessionMessage.length &#61; ntohl(sessionMessage.length);printf("receive number &#61; %d\nreceive length &#61; %d\n", sessionMessage.number, sessionMessage.length);const int total_len &#61; static_cast<int>(sizeof(int32_t) &#43; sessionMessage.length); PayloadMessage* payload &#61; static_cast<PayloadMessage*>(::malloc(total_len));assert(payload);for (int i &#61; 0; i < sessionMessage.number; &#43;&#43;i) {payload->length &#61; 0;if (read_n(sockfd, &payload->length, sizeof(payload->length)) !&#61; sizeof(payload->length)) {perror("read length");exit(1);}payload->length &#61; ntohl(payload->length);assert(payload->length &#61;&#61; sessionMessage.length); if (read_n(sockfd, payload->data, payload->length) !&#61; payload->length) {perror("read payload data");exit(1);}int32_t ack &#61; htonl(payload->length);if (write_n(sockfd, &ack, sizeof(ack)) !&#61; sizeof(ack)){perror("write ack");exit(1);}}::free(payload);::close(sockfd);
}
C&#43;&#43;客户端&#xff08;发送函数&#xff09;代码注解&#xff1a;
void transmit(const Options& opt)
{InetAddress addr(opt.port); if (!InetAddress::resolve(opt.host.c_str(), &addr)) {printf("Unable to resolve %s\n", opt.host.c_str());return;}printf("connecting to %s\n", addr.toIpPort().c_str());TcpStreamPtr stream(TcpStream::connect(addr)); if (!stream){printf("Unable to connect %s\n", addr.toIpPort().c_str());perror("");return;}if (opt.nodelay) {stream->setTcpNoDelay(true);}printf("connected\n");double start &#61; now();struct SessionMessage sessionMessage &#61; { 0, 0 };sessionMessage.number &#61; htonl(opt.number);sessionMessage.length &#61; htonl(opt.length);if (stream->sendAll(&sessionMessage, sizeof(sessionMessage)) !&#61; sizeof(sessionMessage)){perror("write SessionMessage");return;}const int total_len &#61; sizeof(int32_t) &#43; opt.length;PayloadMessage* payload &#61; static_cast<PayloadMessage*>(::malloc(total_len));std::unique_ptr<PayloadMessage, void (*)(void*)> freeIt(payload, ::free); assert(payload);payload->length &#61; htonl(opt.length);for (int i &#61; 0; i < opt.length; &#43;&#43;i){payload->data[i] &#61; "0123456789ABCDEF"[i % 16];}double total_mb &#61; 1.0 * opt.length * opt.number / 1024 / 1024;printf("%.3f MiB in total\n", total_mb);for (int i &#61; 0; i < opt.number; &#43;&#43;i){int nw &#61; stream->sendAll(payload, total_len); assert(nw &#61;&#61; total_len);int ack &#61; 0;int nr &#61; stream->receiveAll(&ack, sizeof(ack)); assert(nr &#61;&#61; sizeof(ack));ack &#61; ntohl(ack);assert(ack &#61;&#61; opt.length); }double elapsed &#61; now() - start; printf("%.3f seconds\n%.3f MiB/s\n", elapsed, total_mb / elapsed);
}
多维性角度的性能测试研究&#xff1a;
在直线型的阻塞IO示例中提供了三种语言实现的服务端/客户端&#xff0c;我们可以从下面几种角度进行性能的测试。
- 从机器角度&#xff1a;选取不同的机器分别充当服务器/客户端的角色&#xff0c;进行性能测试。
- 从语言角度&#xff1a;选取不同的语言实现的服务器/客户端的角色&#xff0c;进行性能测试。
- 从消息角度&#xff1a;选取不同number与length的组合&#xff08;如n*l 不变&#xff0c;参考反比例函数&#xff09;&#xff0c;进行性能测试。
- 除此之外&#xff0c;干扰性能的因素还有网络的拥堵情况&#xff0c;数据延迟等也可考虑在内。