unix网络编程时关于字节序的问题

在《unix网络编程》中，当写到套接字地址结构中关于IP和网络端口字节序转换的问题，所谓字节序是指计算机在存储多字节类型数据时，将这个类型中的低位数据存储在内存地址结构中的高位地址还是地位地址，比如一个整形数字，有四个字节，假如用1234表示这个数字（比喻），如果在内存中的形式为从高位到地位4321，则就为大端，如果在内存从高位到低位为1234则为小段。但是在网络通信中，书中只是设置了套接字地址结构中的IP地址和端口的字节序（将他们设置为大端，因为网络字节序为大端），但是在网络真正传输数据时，并没有对数据进行字节序变换，那么两个电脑如何知道对端传来的数据到底是打断还是小端呢？

猜想：正因为网络编程中对IP数据和端口进行字节序调整，这是因为在网络传输过程中，路由等设备在堆网络数据转发时，需要读取数据中的IP数据和端口号，所以网络传输时中必须设置IP地址和端口号的字节序，这样，在转发时才能正确的恢复出网络地址和端口号，至于数据的大端传输和小端传输，可能在内核将数据发送到网络时，将数据的字节序统一转换为大端字节序，在从网络中读取数据时，将网络数据（大端）统一转换为本机的字节序。但是这样还有一个问题就是效率问题，如果两个对端都是小端，则在发送和接受时都需要转换字节序。还有一种可能就是，在网络中传输的都是字符，只有一个字节不需要字节序转换。