Intenté leer la documentación en http://docs.python.org/dev/library/multiprocessing.html pero todavía estoy luchando con el multiprocesamiento de cola, agrupación y bloqueo. Y por ahora pude construir el siguiente ejemplo.
Con respecto a la cola y la agrupación, no estoy seguro de haber entendido el concepto correctamente, así que corrígeme si me equivoco. Lo que estoy tratando de lograr es procesar 2 solicitudes a la vez (la lista de datos tiene 8 en este ejemplo), entonces, ¿qué debo usar? Pool para crear 2 procesos que pueden manejar dos colas diferentes (2 como máximo) o debería usar Queue para procesar 2 entradas cada vez? El bloqueo sería imprimir las salidas correctamente.
import multiprocessing
import time
data = (['a', '2'], ['b', '4'], ['c', '6'], ['d', '8'],
['e', '1'], ['f', '3'], ['g', '5'], ['h', '7']
)
def mp_handler(var1):
for indata in var1:
p = multiprocessing.Process(target=mp_worker, args=(indata[0], indata[1]))
p.start()
def mp_worker(inputs, the_time):
print " Processs %s\tWaiting %s seconds" % (inputs, the_time)
time.sleep(int(the_time))
print " Process %s\tDONE" % inputs
if __name__ == '__main__':
mp_handler(data)