Sockets no conectan

[soser]

Bien, espero no equivocarme de foro,bueno en si el problema que tengo es que estoy haciendo un programa de sockets en C en ubuntu, y pues al ejecutarlo sobre una maquina el cliente y servidor funcionan bien al mandarse mensajes, sin embargo al intentarlo con dos maquinas usando cable ethernet me marca "conection refused" y pues la duda es si es problema del codigo, es necesario cambiarle algo,o es problema al conectar las computadoras?
Desde ya gracias