粘包/拆包
TCP是基于字节流的,没有边界,并且没有表示数据长度的字段,在使用TCP传输数据时,有粘包,拆包现象发生的可能。
现象:
假设客户端向服务端连续发送了两个数据包,用packet1和packet2表示:
- 接收端只收到一个数据包,但是由于TCP是不会出现丢包的,所以这一个数据包中包含了发送端发送的两个数据包的信息,这种现象称为粘包。这种现象由于接收端不知道这两个数据包的界限,所以对于接收端来说很难处理。
-
接收端收到了两个数据包,但是这两个数据包可能不是完整的,即发生了拆包又发生了粘包。
原因:
拆包
-
要发送的数据大于TCP发送缓冲区剩余空间大小,将会发生拆包
-
待发送数据大于MSS(最大报文长度),TCP在传输前将进行拆包
粘包
- 要发送的数据小于TCP发送缓冲区的大小,TCP将多次写入缓冲区的数据一次发送出去,将会发生粘包
-
接收端没有及时读取接收缓冲区中的数据,将发生粘包
方法
解决问题的关键在于如何给每个数据包添加边界信息。
-
发送端给每个数据包添加包首部,首部中应该至少包含数据包的长度,接收端在收到数据后,通过读取该字段,便知道每一个数据包的实际长度。
-
发送端将每个数据包封装成固定长度。
-
可以在数据包之间设置边界,如添加特殊符号。
客户端代码
#ifndef _EasyTcpClient_hpp_
#define _EasyTcpClient_hpp_
#ifdef _WIN32
#define WIN32_LEAN_AND_MEAN
#define _WINSOCK_DEPRECATED_NO_WARNINGS
#include<windows.h>
#include<WinSock2.h>
#pragma comment(lib,"ws2_32.lib")
#else
#include<unistd.h> //uni std
#include<arpa/inet.h>
#include<string.h>
#define SOCKET int
#define INVALID_SOCKET (SOCKET)(~0)
#define SOCKET_ERROR (-1)
#endif
#include <stdio.h>
#include "MessageHeader.hpp"
class EasyTcpClient
{
SOCKET _sock;
public:
EasyTcpClient()
{
_sock = INVALID_SOCKET;
}
virtual ~EasyTcpClient()
{
Close();
}
//初始化socket
void InitSocket()
{
#ifdef _WIN32
//启动Windows socket 2.x环境
WORD ver = MAKEWORD(2, 2);
WSADATA dat;
WSAStartup(ver, &dat);
#endif
if (INVALID_SOCKET != _sock)
{
printf("<socket=%d>关闭旧连接...\n", _sock);
Close();
}
_sock = socket(AF_INET, SOCK_STREAM, IPPROTO_TCP);
if (INVALID_SOCKET == _sock)
{
printf("错误,建立Socket失败...\n");
}
else {
printf("建立Socket=<%d>成功...\n", _sock);
}
}
//连接服务器
int Connect(const char* ip, unsigned short port)
{
if (INVALID_SOCKET == _sock)
{
InitSocket();
}
// 2 连接服务器 connect
sockaddr_in _sin = {};
_sin.sin_family = AF_INET;
_sin.sin_port = htons(port);
#ifdef _WIN32
_sin.sin_addr.S_un.S_addr = inet_addr(ip);
#else
_sin.sin_addr.s_addr = inet_addr(ip);
#endif
printf("<socket=%d>正在连接服务器<%s:%d>...\n", _sock, ip, port);
int ret = connect(_sock, (sockaddr*)&_sin, sizeof(sockaddr_in));
if (SOCKET_ERROR == ret)
{
printf("<socket=%d>错误,连接服务器<%s:%d>失败...\n", _sock, ip, port);
}
else {
printf("<socket=%d>连接服务器<%s:%d>成功...\n", _sock, ip, port);
}
return ret;
}
//关闭套节字closesocket
void Close()
{
if (_sock != INVALID_SOCKET)
{
#ifdef _WIN32
closesocket(_sock);
//清除Windows socket环境
WSACleanup();
#else
close(_sock);
#endif
_sock = INVALID_SOCKET;
}
}
//处理网络消息
int _nCount = 0;
bool OnRun()
{
if (isRun())
{
fd_set fdReads;
FD_ZERO(&fdReads);
FD_SET(_sock, &fdReads);
timeval t = { 0,0 };
int ret = select(_sock + 1, &fdReads, 0, 0, &t);
//printf("select ret=%d count=%d\n", ret, _nCount++);
if (ret < 0)
{
printf("<socket=%d>select任务结束1\n", _sock);
Close();
return false;
}
if (FD_ISSET(_sock, &fdReads))
{
FD_CLR(_sock, &fdReads);
if (-1 == RecvData(_sock))
{
printf("<socket=%d>select任务结束2\n", _sock);
Close();
return false;
}
}
return true;
}
return false;
}
//是否工作中
bool isRun()
{
return _sock != INVALID_SOCKET;
}
//缓冲区最小单元大小
#ifndef RECV_BUFF_SZIE
#define RECV_BUFF_SZIE 10240
#endif // !RECV_BUFF_SZIE
//第二缓冲区 消息缓冲区
char _szMsgBuf[RECV_BUFF_SZIE * 10] = {};
//消息缓冲区的数据尾部位置
int _lastPos = 0;
//接收缓冲区
char _szRecv[RECV_BUFF_SZIE] = {};
//接收数据 处理粘包 拆分包
int RecvData(SOCKET cSock)
{
// 5 接收数据
int nLen = (int)recv(cSock, _szRecv, RECV_BUFF_SZIE, 0);
//printf("nLen=%d\n", nLen);
if (nLen <= 0)
{
printf("<socket=%d>与服务器断开连接,任务结束。\n", cSock);
return -1;
}
//将收取到的数据拷贝到消息缓冲区
memcpy(_szMsgBuf + _lastPos, _szRecv, nLen);
//消息缓冲区的数据尾部位置后移
_lastPos += nLen;
//判断消息缓冲区的数据长度大于消息头DataHeader长度
while (_lastPos >= sizeof(DataHeader))
{
//这时就可以知道当前消息的长度
DataHeader* header = (DataHeader*)_szMsgBuf;
//判断消息缓冲区的数据长度大于消息长度
if (_lastPos >= header->dataLength)
{
//消息缓冲区剩余未处理数据的长度
int nSize = _lastPos - header->dataLength;
//处理网络消息
OnNetMsg(header);
//将消息缓冲区剩余未处理数据前移
memcpy(_szMsgBuf, _szMsgBuf + header->dataLength, nSize);
//消息缓冲区的数据尾部位置前移
_lastPos = nSize;
}
else {
//消息缓冲区剩余数据不够一条完整消息
break;
}
}
return 0;
}
//响应网络消息
virtual void OnNetMsg(DataHeader* header)
{
switch (header->cmd)
{
case CMD_LOGIN_RESULT:
{
LoginResult* login = (LoginResult*)header;
printf("<socket=%d>收到服务端消息:CMD_LOGIN_RESULT,数据长度:%d\n", _sock, login->dataLength);
}
break;
case CMD_LOGOUT_RESULT:
{
LogoutResult* logout = (LogoutResult*)header;
//printf("<socket=%d>收到服务端消息:CMD_LOGOUT_RESULT,数据长度:%d\n", _sock, logout->dataLength);
}
break;
case CMD_NEW_USER_JOIN:
{
NewUserJoin* userJoin = (NewUserJoin*)header;
//printf("<socket=%d>收到服务端消息:CMD_NEW_USER_JOIN,数据长度:%d\n", _sock, userJoin->dataLength);
}
break;
case CMD_ERROR:
{
printf("<socket=%d>收到服务端消息:CMD_ERROR,数据长度:%d\n", _sock, header->dataLength);
}
break;
default:
{
printf("<socket=%d>收到未定义消息,数据长度:%d\n", _sock, header->dataLength);
}
}
}
//发送数据
int SendData(DataHeader* header)
{
if (isRun() && header)
{
return send(_sock, (const char*)header, header->dataLength, 0);
}
return SOCKET_ERROR;
}
private:
};
#endif
服务器代码
#ifndef _EasyTcpServer_hpp_
#define _EasyTcpServer_hpp_
#ifdef _WIN32
#define WIN32_LEAN_AND_MEAN
#define _WINSOCK_DEPRECATED_NO_WARNINGS
#include<windows.h>
#include<WinSock2.h>
#pragma comment(lib,"ws2_32.lib")
#else
#include<unistd.h> //uni std
#include<arpa/inet.h>
#include<string.h>
#define SOCKET int
#define INVALID_SOCKET (SOCKET)(~0)
#define SOCKET_ERROR (-1)
#endif
#include<stdio.h>
#include<vector>
#include"MessageHeader.hpp"
//缓冲区最小单元大小
#ifndef RECV_BUFF_SZIE
#define RECV_BUFF_SZIE 10240
#endif // !RECV_BUFF_SZIE
class ClientSocket
{
public:
ClientSocket(SOCKET sockfd = INVALID_SOCKET)
{
_sockfd = sockfd;
memset(_szMsgBuf, 0, sizeof(_szMsgBuf));
_lastPos = 0;
}
SOCKET sockfd()
{
return _sockfd;
}
char* msgBuf()
{
return _szMsgBuf;
}
int getLastPos()
{
return _lastPos;
}
void setLastPos(int pos)
{
_lastPos = pos;
}
private:
// socket fd_set file desc set
SOCKET _sockfd;
//第二缓冲区 消息缓冲区
char _szMsgBuf[RECV_BUFF_SZIE * 10];
//消息缓冲区的数据尾部位置
int _lastPos;
};
class EasyTcpServer
{
private:
SOCKET _sock;
std::vector<ClientSocket*> _clients;
public:
EasyTcpServer()
{
_sock = INVALID_SOCKET;
}
virtual ~EasyTcpServer()
{
Close();
}
//初始化Socket
SOCKET InitSocket()
{
#ifdef _WIN32
//启动Windows socket 2.x环境
WORD ver = MAKEWORD(2, 2);
WSADATA dat;
WSAStartup(ver, &dat);
#endif
if (INVALID_SOCKET != _sock)
{
printf("<socket=%d>关闭旧连接...\n", (int)_sock);
Close();
}
_sock = socket(AF_INET, SOCK_STREAM, IPPROTO_TCP);
if (INVALID_SOCKET == _sock)
{
printf("错误,建立socket失败...\n");
}
else {
printf("建立socket=<%d>成功...\n", (int)_sock);
}
return _sock;
}
//绑定IP和端口号
int Bind(const char* ip, unsigned short port)
{
//if (INVALID_SOCKET == _sock)
//{
// InitSocket();
//}
// 2 bind 绑定用于接受客户端连接的网络端口
sockaddr_in _sin = {};
_sin.sin_family = AF_INET;
_sin.sin_port = htons(port);//host to net unsigned short
#ifdef _WIN32
if (ip) {
_sin.sin_addr.S_un.S_addr = inet_addr(ip);
}
else {
_sin.sin_addr.S_un.S_addr = INADDR_ANY;
}
#else
if (ip) {
_sin.sin_addr.s_addr = inet_addr(ip);
}
else {
_sin.sin_addr.s_addr = INADDR_ANY;
}
#endif
int ret = bind(_sock, (sockaddr*)&_sin, sizeof(_sin));
if (SOCKET_ERROR == ret)
{
printf("错误,绑定网络端口<%d>失败...\n", port);
}
else {
printf("绑定网络端口<%d>成功...\n", port);
}
return ret;
}
//监听端口号
int Listen(int n)
{
// 3 listen 监听网络端口
int ret = listen(_sock, n);
if (SOCKET_ERROR == ret)
{
printf("socket=<%d>错误,监听网络端口失败...\n", _sock);
}
else {
printf("socket=<%d>监听网络端口成功...\n", _sock);
}
return ret;
}
//接受客户端连接
SOCKET Accept()
{
// 4 accept 等待接受客户端连接
sockaddr_in clientAddr = {};
int nAddrLen = sizeof(sockaddr_in);
SOCKET cSock = INVALID_SOCKET;
#ifdef _WIN32
cSock = accept(_sock, (sockaddr*)&clientAddr, &nAddrLen);
#else
cSock = accept(_sock, (sockaddr*)&clientAddr, (socklen_t *)&nAddrLen);
#endif
if (INVALID_SOCKET == cSock)
{
printf("socket=<%d>错误,接受到无效客户端SOCKET...\n", (int)_sock);
}
else
{
NewUserJoin userJoin;
SendDataToAll(&userJoin);
_clients.push_back(new ClientSocket(cSock));
printf("socket=<%d>新客户端加入:socket = %d,IP = %s \n", (int)_sock, (int)cSock, inet_ntoa(clientAddr.sin_addr));
}
return cSock;
}
//关闭Socket
void Close()
{
if (_sock != INVALID_SOCKET)
{
#ifdef _WIN32
for (int n = (int)_clients.size() - 1; n >= 0; n--)
{
closesocket(_clients[n]->sockfd());
delete _clients[n];
}
// 8 关闭套节字closesocket
closesocket(_sock);
//------------
//清除Windows socket环境
WSACleanup();
#else
for (int n = (int)_clients.size() - 1; n >= 0; n--)
{
close(_clients[n]->sockfd());
delete _clients[n];
}
// 8 关闭套节字closesocket
close(_sock);
#endif
_clients.clear();
}
}
//处理网络消息
int _nCount = 0;
bool OnRun()
{
if (isRun())
{
//伯克利套接字 BSD socket
fd_set fdRead;//描述符(socket) 集合
fd_set fdWrite;
fd_set fdExp;
//清理集合
FD_ZERO(&fdRead);
FD_ZERO(&fdWrite);
FD_ZERO(&fdExp);
//将描述符(socket)加入集合
FD_SET(_sock, &fdRead);
FD_SET(_sock, &fdWrite);
FD_SET(_sock, &fdExp);
SOCKET maxSock = _sock;
for (int n = (int)_clients.size() - 1; n >= 0; n--)
{
FD_SET(_clients[n]->sockfd(), &fdRead);
if (maxSock < _clients[n]->sockfd())
{
maxSock = _clients[n]->sockfd();
}
}
///nfds 是一个整数值 是指fd_set集合中所有描述符(socket)的范围,而不是数量
///既是所有文件描述符最大值+1 在Windows中这个参数可以写0
timeval t = { 1,0 };
int ret = select(maxSock + 1, &fdRead, &fdWrite, &fdExp, &t); //
//printf("select ret=%d count=%d\n", ret, _nCount++);
if (ret < 0)
{
printf("select任务结束。\n");
Close();
return false;
}
//判断描述符(socket)是否在集合中
if (FD_ISSET(_sock, &fdRead))
{
FD_CLR(_sock, &fdRead);
Accept();
}
for (int n = (int)_clients.size() - 1; n >= 0; n--)
{
if (FD_ISSET(_clients[n]->sockfd(), &fdRead))
{
if (-1 == RecvData(_clients[n]))
{
auto iter = _clients.begin() + n;//std::vector<SOCKET>::iterator
if (iter != _clients.end())
{
delete _clients[n];
_clients.erase(iter);
}
}
}
}
return true;
}
return false;
}
//是否工作中
bool isRun()
{
return _sock != INVALID_SOCKET;
}
//缓冲区
char _szRecv[RECV_BUFF_SZIE] = {};
//接收数据 处理粘包 拆分包
int RecvData(ClientSocket* pClient)
{
// 5 接收客户端数据
int nLen = (int)recv(pClient->sockfd(), _szRecv, RECV_BUFF_SZIE, 0);
//printf("nLen=%d\n", nLen);
if (nLen <= 0)
{
printf("客户端<Socket=%d>已退出,任务结束。\n", pClient->sockfd());
return -1;
}
//将收取到的数据拷贝到消息缓冲区
memcpy(pClient->msgBuf() + pClient->getLastPos(), _szRecv, nLen);
//消息缓冲区的数据尾部位置后移
pClient->setLastPos(pClient->getLastPos() + nLen);
//判断消息缓冲区的数据长度大于消息头DataHeader长度
while (pClient->getLastPos() >= sizeof(DataHeader))
{
//这时就可以知道当前消息的长度
DataHeader* header = (DataHeader*)pClient->msgBuf();
//判断消息缓冲区的数据长度大于消息长度
if (pClient->getLastPos() >= header->dataLength)
{
//消息缓冲区剩余未处理数据的长度
int nSize = pClient->getLastPos() - header->dataLength;
//处理网络消息
OnNetMsg(pClient->sockfd(), header);
//将消息缓冲区剩余未处理数据前移
memcpy(pClient->msgBuf(), pClient->msgBuf() + header->dataLength, nSize);
//消息缓冲区的数据尾部位置前移
pClient->setLastPos(nSize);
}
else {
//消息缓冲区剩余数据不够一条完整消息
break;
}
}
return 0;
}
//响应网络消息
virtual void OnNetMsg(SOCKET cSock, DataHeader* header)
{
switch (header->cmd)
{
case CMD_LOGIN:
{
Login* login = (Login*)header;
printf("收到客户端<Socket=%d>请求:CMD_LOGIN,数据长度:%d,userName=%s PassWord=%s\n", cSock, login->dataLength, login->userName, login->PassWord);
//忽略判断用户密码是否正确的过程
LoginResult ret;
SendData(cSock, &ret);
}
break;
case CMD_LOGOUT:
{
Logout* logout = (Logout*)header;
printf("收到客户端<Socket=%d>请求:CMD_LOGOUT,数据长度:%d,userName=%s \n", cSock, logout->dataLength, logout->userName);
//忽略判断用户密码是否正确的过程
LogoutResult ret;
SendData(cSock, &ret);
}
break;
default:
{
printf("<socket=%d>收到未定义消息,数据长度:%d\n", cSock, header->dataLength);
//DataHeader ret;
//SendData(cSock, &ret);
}
break;
}
}
//发送指定Socket数据
int SendData(SOCKET cSock, DataHeader* header)
{
if (isRun() && header)
{
return send(cSock, (const char*)header, header->dataLength, 0);
}
return SOCKET_ERROR;
}
void SendDataToAll(DataHeader* header)
{
for (int n = (int)_clients.size() - 1; n >= 0; n--)
{
SendData(_clients[n]->sockfd(), header);
}
}
};
#endif // !_EasyTcpServer_hpp_
在server端添加高精度计时器
#ifndef _CELLTimestamp_hpp_
#define _CELLTimestamp_hpp_
#include<chrono>
using namespace std::chrono;
class CELLTimestamp
{
public:
CELLTimestamp()
{
update();
}
~CELLTimestamp()
{}
void update()
{
_begin = high_resolution_clock::now();
}
/**
* 获取当前秒
*/
double getElapsedSecond()
{
return getElapsedTimeInMicroSec() * 0.000001;
}
/**
* 获取毫秒
*/
double getElapsedTimeInMilliSec()
{
return this->getElapsedTimeInMicroSec() * 0.001;
}
/**
* 获取微妙
*/
long long getElapsedTimeInMicroSec()
{
return duration_cast<microseconds>(high_resolution_clock::now() - _begin).count();
}
protected:
time_point<high_resolution_clock> _begin;
};
#endif // !_CELLTimestamp_hpp_