Configuracion de los socket para enviar MUCHOS datos.

[Tab3r]

Hola.

Estoy inmerso en un proyecto bastante complejo de computacion distribuida en C. Nos basamos en maquinas linux heterogeneas.

El problema viene al enviar alrrededor de 1000000 de long double... esto no provoca ningun error pero si que los datos no lleguen (me explico, el buffer de recepcion se llena hasta que a un nivel se llena pero de ceros).

Se que el problema que arrastro es por los buffer de recepcion y envio... con setoptsock podria arreglarlo, pero no encuentro ninguna documentacion completa...

¿Alguien sabe del tema?

[_Leo_]

Asumo que se trata de socket TCP.
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[holylance]

con la sinceridad que me caracteriza, te digo que no tengo idea, perome gustaría tenerla...
con respecto a eso ahora te voy a decir lo que pienso pero seguro que es medio fruta lo que te voy a decir :p

bueno, primero, ¿como es eso de que se llena de ceros?, es decir:
1 te llegan menos long doubles y se te llena de ceros el buffer?
2 te llegan menos long doubles y te queda el buffer lleno de ceros a partir de algun indice en el buffer, pero eso no molesta?

si los datos no llegan, no llegan, tenes que poder darte cuenta de que no llegaron, no pidas memoria de a un millon de long doubles :p , pedi dinámicamente (como le estoy dando a la fruta hoy!).No entiendo cual es el problema de que no te lleguen los doubles, tenes que esperarlos, pone un timeout y listo, supongo que eso estara todo implementado ya...
como ves sigo mandando fruta, fuera de joda, no entiendo pero me gustaría, no me explicas mas a fondo che?

[_Leo_]

Lo más importante es saber si es TCP. Dado que el protocolo se encarga de particionar los paquetes en forma automática y tiene un sistema de control de errores completo, con lo cual lo que describe es muy extraño. La cosa es completamente diferente si tratan de hacer eso en UDP. En ese caso sería imposible enviar esa cantidad de datos en un paquete.
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[Tab3r]

Me voy a autoresponder... Pero antes os aclaro.

Tengo un array VARIABLE de "long double" que se llena con datos en cada ejecucion. La longitud media es de 150.000 elementos dentro del array. Se hacen muuuchos calculos sobre cada elemento, por lo que estamos haciendo una plataforma cliente-servidor con sockets TCP (aunque creo que nos vamos a pasar a UDP por razones de velocidad) para distribuir el calculo. Mediante hilos, creo X sockets por cada hosts que vaya a recibir un trozo de array para calcular.

El problema surgia cuando pasabamos de mas de 333 a cada uno de los hosts... hasta un punto se llenaba de numeros pero al llegar a la posicion 120, TODO ERAN CEROS... ¿Porque?... 2 dias mirando foros en ingles y al final vi en un ejemplo algo tal que asi:

[holylance]

de vuelta y con humildad, no tengo idea por que esa linea tiene la culpa/magia, pero odio cuando una sola linea tiene la culpa de que todo ande mal, hace poco habia hecho una rutina para calcular una cosa con conjuntos y comome faltaba una linea no andaba nada...lo peor era que vos leias el codigo y parecia que todo estaba bien...

[_Leo_]

Bueno, finalmente estás poniendo los buffers de recepción y envío en cero. La verdad dudo que sea una buena idea, pero todo es posible.

Puede que el problema esté en que el la primer capa del protocolo no tenga memoria suficiente para guardar tanto en su buffer. Pero sería mejor, antes que negarle la posibilidad de que haga ese proceso, particionar la información y hacer varias llamas a send() con partes de la información y reconstruirla del otro lado. En UDP la cosa se les va a poner mucho más complicada.
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[Tab3r]

[_Leo_]

¿Querés decir que no podés enviar ni un simple byte?
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[Tab3r]

[_Leo_]

No sé cómo estabas utilizando antes la función recv() ya que lo expuesto ahora es lo básico que se necesita para que funcione con TCP.
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[Tab3r]

[_Leo_]

¿Sin hacer un bucle?
_________________
_Leo_
drk.com.ar

clasdix.com.ar

[Tab3r]