es.davy.ai

Preguntas y respuestas de programación confiables

¿Tienes una pregunta?

Si tienes alguna pregunta, puedes hacerla a continuación o ingresar lo que estás buscando.

Tag: AMAZON-GUARDDUTY

Contar la frecuencia de cada palabra en una línea de texto-Pyspark

He creado un RDD con esta forma en PySpark: [(0, (‘This’, 1)), (0, (‘is’, 1)), (0, (‘the’, 1)), (0, (‘100th’, 1)), (0, (‘Etext’, 1)), (0, (‘file’, 1)), (0, (‘presented’, 1)), (0, (‘by’, 1)), (0, (‘Project’, 1)), (0, (‘Gutenberg,’, 1)), (0, (‘and’, 1)), (1, (‘is’, 1)), (1, (‘presented’, 1)), (1, (‘in’, . . . Read more

Error de PicklingError para llamada recursiva en Pyspark

Necesito implementar una función recursiva que utilice rdd (escribiré una función que enviará algo para ser calculado al clúster y luego enviará algunos cálculos a otros trabajadores). Da un error de PicklingError debido a llamar a una función que utiliza sc: PicklingError: No se pudo serializar el objeto: Excepción: Parece . . . Read more