请问：关于connect函数

netpro

现在我的一个客户端程序和服务器程序采用流套接字连接，当使用connect函数连接主机端时，总是出现几路连接同时连时，有一路和两路连要等个三秒左右才连上的情况，就是说我的客户端需要有多路连接主机端，有几路很快就连接上了，有一路要等三秒才连上，造成有一路连接慢。用监听可以看出时间上的差异。
请问这是socket的机制问题（监听数，连接响应或其他）还是我程序调用的问题。
注：我服务器端使用一监听线程来接受客户端连接，一有客户端连上，主机就开一个新的线程与之通信。