nodejs与javascript的关系 node.js与javascript
论文探讨了Node.js服务器端使用socket.write()与C语言客户端使用recv()进行TCP通信时,客户端recv()可能出现阻塞的根本原因文章。核心问题是TCP是一个字节流协议,而不是消息协议,recv()无法自动识别消息边界。将详细解释这一机制,并提出通过实现消息帧定(消息) Framing)来解决阻塞问题,确保跨TCP通信的稳定性和可靠性,实现连续数据传输而消耗关闭连接。TCP字节流特性与recv()的阻塞行为
在tcp/ip网络编程中,一个常见的误解是认为tcp传输是“消息”或“数据包”。然而,tcp(传输控制协议)本质上是一个字节流(byte) Stream)协议。这意味着数据被视为一个连续的字节序列,而不是离散的、有边界的消息单元。当node.js服务器使用socket.write(buffer.from("123"))传输数据时,将字节数据传输到输出状态。而c语言客户端的recv(socket_fd, buffer, 3, 0) 函数,其行为是尝试从设备接收指定数量的字节,如果可用字节不足,它会阻塞,直到有更多数据到达或连接被对端关闭。
原始问题中,客户端的 GetData 函数在 while ((bytes_read = recv(socket_fd, buffer offset, BUFFER_SIZE, 0)) gt; 0) 循环中持续调用recv。这个循环会一直执行,直到recv返回0(表示对端关闭了写入端)或返回-1(表示发生错误)。如果服务器调用socket.write()发送数据,而不调用socket.e nd()来关闭其写入端,那么客户端的recv循环将永远等待,因为它不知道“消息”何时结束,从而导致连接“卡住”。
相比之下,当服务器调用socket.end(Buffer.from("123") "))时,socket.end()不仅发送数据,还会立即关闭设备的写入端。这会向客户端发送一个FIN(结束)包,当客户端的recv函数检测到这个FIN包时,它会返回0,从而终止GetData函数中的w hile循环,使得该函数能够返回。然而,方式的缺点是每次数据传输后都需要关闭连接,这对于需要持续通信的应用场景来说是不太必要的,因为它会引入大量的连接建立和关闭头部。解决方案:消息帧定(Message)帧)
为了在TCP字节流上实现可靠的、连续的消息传输,而消耗每次发送后关闭连接,必须在应用层引入消息帧定(Message)消息帧定值是指在发送数据时,为每个逻辑消息添加额外的元数据(如长度信息或特定分隔符),以便接收方能够准确识别消息的起始和结束。
常用的消息帧定策略有两种:
立即学习“C免费学习笔记(深入)”;长度连通(长度)前缀):在实际消息内容之前添加一个固定长度的字段,用于指示后续消息内容的字节长度。这是最常用且健壮的方法。分隔符(Delimiters):在消息的添加一个或多个特殊字节序列作为结束消息的标记。这种方法需要保证消息内容本身不包含该分隔符,否则会导致解析错误。
对于Node.js和C语言的跨平台通信,长度纵向方式是更推荐的选择,因为它避免了字符编码和特殊字节冲突的问题。实现长度纵向消息帧定
1. 服务器端(Node.js)实现
服务器在发送任何数据之前,首先计算数据的字节长度,然后将这个长度值编码为一个固定大小的字节序列(例如,一个32位无符号整数,占用4个字节),作为后续与实际数据一起发送。
// Node.js 服务器端示例 const net = require('net');const server = net.createServer((socket) =gt; { console.log('客户端已连接。'); socket.on('data', (data) =gt; { // 假设客户端也发送了带长度的数据 console.log('从客户端收到:', data.toString()); }); socket.on('end', () =gt; { console.log('客户端已断开连接。'); }); socket.on('error', (err) =gt; { console.error('套接字错误:', err); }); // 示例:发送消息 function sendMessage(message) { const messageBuffer = Buffer.from(message, 'utf8'); const messageLength = messageBuffer.length; // 一个 4 字节的缓冲区来存储长度 const lengthBuffer = Buffer.alloc(4); lengthBuffer.writeUInt32BE(messageLength, 0); // 使用大端字节序写入长度 // 将长度Buffer和消息Buffer拼接起来发送 socket.write(Buffer.concat([lengthBuffer, messageBuffer])); console.log(`发送消息: quot;${message}quot; (length: ${messageLength})`); } // 模拟发送多条消息 setTimeout(() =gt; sendMessage(quot;Hello from Node.js server!quot;), 1000); setTimeout(() =gt; sendMessage(quot;这是第二条消息。quot;), 2000); setTimeout(() =gt; sendMessage(quot;更长的消息,用于测试客户端的缓冲区处理。这条消息故意变长,以演示客户端应如何正确处理较大的数据块。quot;), 3000);});const PORT = 3000;server.listen(PORT, () =gt; { console.log(`服务器列表
宁在端口${PORT}`);});登录后复制
2. 客户端(C语言)实现
客户端需要分两步接收数据:首先读取固定长度的远端(例如4个字节),解析出消息的实际长度;然后根据这个长度值,读取循环的字节,直到接收到完整的消息。
// C 语言客户端示例 (GetData 函数改进)#include lt;stdio.hgt;#include lt;stdlib.hgt;#include lt;string.hgt;#include lt;unistd.hgt;#include lt;arpa/inet.hgt;#include lt;sys/socket.hgt;#define LENGTH_PREFIX_SIZE 4 // 长度右边的字节数(例如:32位无符号整数)#define INITIAL_BUFFER_SIZE 1024 // 婚纱大小//辅助函数:从设备精确读取指定字节数ssize_t read_exact(int socket_fd, void *buffer, size_t length) { size_t Total_read = 0; ssize_t bytes_read; while (total_read lt; length) { bytes_read = recv(socket_fd, (char *)缓冲区total_read,长度-total_read, 0); if (bytes_read lt;= 0) { // 连接关闭 (bytes_read == 0) 或错误 (bytes_read == -1) if (bytes_read == 0) { fprintf(stderr, quot;连接被对等方关闭。\nquot;); } else { perror(quot;recv errorquot;); } return -1; // 返回错误或连接关闭信号 } Total_read = bytes_read; } return total_read;}char *GetData(int socket_fd) { uint32_t message_length_net; // 网络字节序的消息长度 uint32_t message_length_host; // 主机字节序的消息长度 // 1. 读取4字节的消息长度 if (read_exact(socket_fd, amp;message_length_net, LENGTH_PREFIX_SIZE) == -1) { return NULL; // 读取长度失败 } // 将网络字节序转换主机字节序 message_length_host = ntohl(message_length_net); printf(quot;预期消息长度: u bytes\nquot;, message_length_host); if (message_length_host == 0) { // 如果消息长度为0,则直接返回一个空字符串或处理空消息
char *empty_buffer = (char *)malloc(1); if (empty_buffer == NULL) { perror(quot;malloc failed forempty bufferquot;); return NULL; }empty_buffer[0] = '\0'; returnempty_buffer; } // 2.根据解析出的长度分布佛并读取内容消息 char *buffer = (char *)malloc(message_length_host 1); // 1 for null 终止符 if (buffer == NULL) { perror(quot;malloc failed for message bufferquot;); return NULL; } if (read_exact(socket_fd, buffer, message_length_host) == -1) { free(buffer); return NULL; // 读取消息内容失败 } buffer[message_length_host] = '\0'; // 添加字符串结束符 return buffer;}// 客户端主函数示例int main() { int sock = 0; 结构体sockaddr_in serv_addr; char *received_data; if ((sock = socket(AF_INET, SOCK_STREAM, 0)) lt; 0) { perror(quot;套接字创建错误quot;); return -1; } serv_addr.sin_family = AF_INET; serv_addr.sin_port = htons(3000); // 替换为你的服务器端口if (inet_pton(AF_INET, quot;127.0.0.1quot;, amp;serv_addr.sin_addr) lt;= 0) { // 替换为你的服务器IP perror(quot;无效地址/不支持地址quot;); return -1; } if (connect(sock, (struct sockaddr *)amp;serv_addr, sizeof(serv_addr)) lt; 0) { perror(quot;连接Failedquot;); return -1; } printf(quot;已连接到服务器。\nquot;); // 循环接收多条消息 for (int i = 0; i lt; 3; i) { // 假设接收3条消息
消息 receive_data = GetData(sock); if (received_data != NULL) { printf(quot;收到消息 d: \quot;s\quot;\nquot;, i 1, receive_data); free(received_data); // 释放内存 } else { fprintf(stderr, quot;接收消息 d 失败或连接关闭。\nquot;, i 1); break; //退出循环,通常意味着连接已关闭或发生错误 } } close(sock); return 0;}登录后复制事项注意事项与最佳实践字节序(Endianness):在跨平台通信中,一定要注意字节序问题。不同的CPU架构可能使用大端字节序(Big-Endian)或小端字节序(Little-Endian)。为了保证兼容性,通常规定使用网络字节序(Network Byte) Node.js的writeUInt32BE默认使用大端,C语言则使用htons/ntohs和htonl/ntohl等函数进行主机字节序与网络字节序的转换。错误处理:recv函数可能返回0(连接关闭)或-1(错误)。在实际应用中,必须对这些返回值进行适当的语言处理,例如关闭设备、记录错误日志或尝试重连。 相位管理:C 客户端:GetData 函数中使用了 malloc 来动态分配接收消息的曼哈顿。在每次调用GetData并使用完成返回的数据后,一定要使用free()释放内存,占据内存浪费。大消息处理:如果消息可能非常大,一次性分配所有内存可能无法使用或效率低下。read_exact函数已经处理了分超过块读取,但如果消息大小可用内存,仍需要更高级的流式处理或分块处理。机制粘包与拆包:TCP的字节流特性导致数据可能“粘”在一起(多个小消息合并成一个recv),也可能“拆”开(一个大消息被分散多个recv) )。消息帧定为了解决这个问题。客户端的read_exact函数通过循环读取,确保接收到完整的长度连接和消息体问题,从而正确处理粘包和拆包。心跳机制:对于保持长时间的连接,实现心跳机制来检测连接是否仍然可以主动,防止由于网络中断而导致的僵尸连接。高级协议:对于比较复杂的应用,可以考虑使用现有的应用层协议(如HTTP、WebSocket、Protobuf等),它们已经内置了消息帧设置和错误处理机制,可以最大程度简化开发总结
Node.js与C语言进行TCP通信时,理解TCP的字节流特性是构建健壮应用的关键。直接依赖recv()来判断消息结束是不可靠的,因为它只能等待数据或连接关闭。通过在应用层实现消息帧定,特别是采用长度远程的方式,可以有效地解决recv()阻塞问题,实现服务器和客户端之间连续、可靠的数据流传输,而无需间隔地建立和关闭连接。这不仅提高了通信效率,也使得跨语言的TCP应用开发更加灵活和稳定。
以上就是Node.js与C语言TCP通信中的数据流处理与消息帧定的详细内容,更多请关注乐哥常识网其他相关文章!