apache-pig

11El calor

2Respuesta

problema cerdo con una cuerda dividida (STRSPLIT)

i han H1 siguiente tupla, quieren strsplit sus $ 0 en tupla, pero siempre tiene mensaje de error: DUMP H1: (item32;item31;,1) m = FOREACH H1 GENERATE STRSPLIT($0, ";", 50); ERROR 1000: Error durin

6El calor

2Respuesta

¿Cómo manejas los archivos de entrada vacíos o faltantes en Apache Pig?

Nuestro flujo de trabajo utiliza un clúster elástico AWS de AWS para ejecutar series de trabajos Pig para manipular una gran cantidad de datos en informes agregados. Lamentablemente, los datos de entr

6El calor

1Respuesta

Ejecución de la consulta de Pig sobre los datos almacenados en Hive

Me gustaría saber cómo ejecutar las consultas de Pig almacenadas en el formato Hive. He configurado Hive para almacenar datos comprimidos (usando este tutorial http://wiki.apache.org/hadoop/Hive/Compr

8El calor

1Respuesta

¿Cómo utiliza Pig Hadoop Globs en una declaración de 'carga'?

Como tengo noted previously, Pig no soporta bien los archivos vacíos (0 bytes). Desafortunadamente, hay muchas maneras de crear estos archivos (incluso within Hadoop utilitities). Pensé que podría sol

8El calor

1Respuesta

Max/Min para conjuntos completos de registros en PIG

Tengo un conjunto de registros que estoy cargando desde un archivo y lo primero que tengo que hacer es obtener el máximo y el mínimo de una columna. En SQL Me gustaría hacer esto con una subconsulta c

5El calor

3Respuesta

¿Cómo recorto una fila de encabezado de los archivos procesados por Hadoop's Pig?

Estoy tratando de analizar los archivos de datos separados por tabulaciones generados por nuestros servicios usando Elastic Map Reduce de Amazon a través de un programa Pig. Las cosas van bien, except

6El calor

2Respuesta

¿Puedo dividir un comando en varias líneas en Apache Pig Latin?

Tengo algunas líneas muy largas como expresiones de Apache Pig (latín). ¿Hay alguna forma de dividir estos en múltiples líneas? He intentado una barra diagonal inversa en vano, tan pronto como se pres

5El calor

6Respuesta

Uso de la cláusula IN con PIG FILTER

¿El PIG admite la cláusula IN? filtered = FILTER bba BY reason not in ('a','b','c','d'); o debería dividirlo en varias unidades operativas? Gracias!

7El calor

5Respuesta

¿Puedo generar bolsas anidadas usando declaraciones anidadas de FOREACH en Pig Latin?

Digamos que tengo un conjunto de datos de reseñas de restaurantes: User,City,Restaurant,Rating Jim,New York,Mecurials,3 Jim,New York,Whapme,4.5 Jim,London,Pint Size,2 Lisa,London,Pint Size,4 Lisa

19El calor

7Respuesta

¿Cómo puedo analizar JSON en Pig?

Tengo un montón de archivos de registro gzip en s3 que tienen 3 tipos de líneas de registro: b, c, i. i y C son tanto de un solo json nivel: {"this":"that","test":"4"} Tipo b es profundamente json a