Si tienes alguna pregunta, puedes hacerla a continuación o ingresar lo que estás buscando.
Tengo un proyecto con algunas carpetas de paquetes, cada una de las cuales contiene una definición de clase para una funcionalidad (por ejemplo, la clase DataProcess). Y hay un script principal en el directorio raíz del proyecto que puede acceder a todas esas carpetas de paquetes. El script principal crea . . . Read more
Tengo 1 GPU y 32 CPUs disponibles en mi máquina. ¿Es posible en Ray utilizarlos de forma separada? Por ejemplo, ¿asignar una tarea con 1 CPU y otra tarea con 1 GPU? Si uso python tune.run(trainer_fn, num_samples=32, resources_per_trial={"GPU": 1, "CPU": 1}, … Eso sólo ejecuta un entrenamiento porque sólo hay . . . Read more
Sabemos que en el caso de una Box (acción continua) en el Espacio de Acción, la correspondiente Distribución de Acción es DiagGaussian (distribución de probabilidad). Sin embargo, quiero usar TorchDeterministic (Distribución de Acción que devuelve directamente los valores de entrada). Este es el código, tomado de https://github.com/ray-project/ray/blob/a91ddbdeb98e81741beeeb5c17902cab1e771105/rllib/models/torch/torchactiondist.py#L372: class TorchDeterministic(TorchDistributionWrapper): “””Distribución . . . Read more