Constellation Knowledge Network - Conocimiento de adivinación - Función UDF personalizada, guardada desde Hive a mongodb.

Función UDF personalizada, guardada desde Hive a mongodb.

(Puede depurar la función UDF a través de la herramienta Idea y se proporcionará una referencia en el segundo paso).

1.

2. Acerca de la clase auxiliar de Mongo

3. Clase de entrada MongoStorageHandler de función definida por el usuario

Preparación: primero, coloque el paquete jar de función UDF preparado y la carga relacionada. el paquete de dependencia al servidor (puede seleccionar la herramienta WinSCP en Windows). Por ejemplo, la función UDF se carga en el directorio /home/username/tmp y los paquetes dependientes están en /home/username/tmp/lib.

1. Configure la configuración remota en idea (como se muestra en la Figura 1):

2. Habilite el modo de depuración de la unidad de Hive:

Depuración de la unidad de Hive

p>

3. En este momento estamos escuchando en el puerto 8000 (dirección de monitoreo: Transporte DT _ Socket de 8000) e iniciamos el modo de depuración del control remoto configurado en idea

4. Ingrese el siguiente nombre de función personalizada del comando (sign_func):

5. Llame a la función personalizada sign_func:

Bien, vaya a mongodb para verificar si los datos están almacenados en la biblioteca mongo.

上篇: Información personal de Hu Yanbin 下篇: Por favor, dale un buen nombre al maestro.
Artículos populares