PaginatedJsonQueryElasticsearch 2025.10.9.21

Bundle

org.apache.nifi | nifi-elasticsearch-restapi-nar

Description

Un processeur qui permet à l’utilisateur d’exécuter une requête paginée (avec agrégations) écrite avec Elasticsearch JSON DSL. Il utilisera le contenu du FlowFile pour la requête, à moins que l’attribut QUERY ne soit renseigné. Les requêtes de type « recherche après » ou « point dans le temps » doivent comporter un champ « tri » valide.

Balises

elasticsearch, elasticsearch7, elasticsearch8, elasticsearch9, json, page, query, read, scroll

Exigences en matière d’entrées

REQUIRED

Prend en charge les propriétés dynamiques sensibles

false

Propriétés

Propriété

Description

Aggregation Results Format

Format de la sortie des agrégations.

Aggregation Results Split

Générer en sortie un FlowFile contenant toutes les agrégations ou un FlowFile pour chaque agrégation.

Aggregations

Une ou plusieurs agrégations de requêtes (ou « aggs »), en syntaxe JSON. Exemple : {« items »: {« terms »: {« field »: « product », « size »: 10}}}

Client Service

Un service client Elasticsearch à utiliser pour l’exécution des requêtes.

Champs

Champs des documents indexés à récupérer, dans la syntaxe JSON. Exemple : [« user.id », « http.response.* », {« field »: « @timestamp », « format »: « epoch_millis »}]

Index

Le nom de l’index à utiliser.

Max JSON Field String Length

Longueur maximale autorisée pour une valeur de chaîne lors de l’analyse d’un document ou d’un attribut JSON.

Output No Hits

Générer un FlowFile « hits » en sortie même si aucun hit n’a été trouvé pour la requête. Si cette propriété est définie sur true, un FlowFile « hits » vide sera généré en sortie même si des « agrégations » sont générées en sortie.

Pagination Keep Alive

Période de persistance (« keep_alive ») de la pagination. Période pendant laquelle Elasticsearch maintiendra le curseur de scroll/PIT en vie entre deux requêtes (il ne s’agit pas du temps attendu pour que toutes les pages soient récupérées, mais du temps maximum autorisé pour les requêtes entre les récupérations de pages).

Pagination Type

Méthode de pagination à utiliser. Tous les types ne sont pas disponibles pour toutes les versions d’Elasticsearch. Consultez la documentation d’Elasticsearch pour savoir lesquels sont applicables et recommandés pour votre service.

Requête

Requête dans la syntaxe JSON et non dans la syntaxe Lucene. Ex : {« query »:{« match »:{« somefield »: »somevalue »}}}. Si ce paramètre n’est pas défini, la requête sera lue à partir du contenu du FlowFile. Si la requête (propriété et contenu du FlowFile) est vide, un objet JSON vide par défaut sera utilisé, ce qui aboutira à une requête « match_all » dans Elasticsearch.

Query Attribute

Si l’option est activée, la requête exécutée sera définie sur chaque FlowFile de résultats dans l’attribut spécifié.

Query Clause

Clause « query » dans la syntaxe JSON et non dans la syntaxe Lucene. Ex : {« match »:{« somefield »: »somevalue »}}. Si la requête est vide, un objet JSON par défaut sera utilisé, ce qui aboutira à une requête « match_all » dans Elasticsearch.

Query Definition Style

Manière dont la requête JSON sera définie pour être utilisée par le processeur.

Script Fields

Champs à créer en utilisant l’évaluation du script lors de l’exécution de la requête, dans la syntaxe JSON. Ex: {« test1 »: {« script »: {« lang »: « painless », « source »: « doc[ “price”].value * 2 »}}, « test2 »: {« script »: {« lang »: « painless », « source »: « doc[ “price”].value * params.factor », « params »: {« factor »: 2.0}}}}

Format des résultats de recherche

Format de la sortie des Hits.

Fractionnement des résultats de recherche

Générer en sortie un FlowFile contenant tous les résultats ou un FlowFile pour chaque résultat, ou encore un FlowFile contenant tous les résultats de toutes les réponses paginées.

Taille

Le nombre maximum de documents à récupérer dans la requête. Si la requête est paginée, cette taille s’applique à chaque page de la requête, et non à la taille du jeu de résultats.

Trier

Trier les résultats en fonction d’un ou plusieurs champs, dans la syntaxe JSON. Exemple : [{« price » : {« order » : « asc », « mode » : « avg »}}, {« post_date » : {« format »: « strict_date_optional_time_nanos »}}]

Type

Le type de ce document (utilisé par Elasticsearch pour l’indexation et la recherche).

Relations

Nom

Description

aggregations

Les agrégations sont routées vers cette relation.

failure

Tous les FlowFiles qui échouent pour des raisons indépendantes de la disponibilité du serveur sont dirigés vers cette relation.

hits

Les résultats des recherches sont routés vers cette relation.

original

Tous les FlowFiles originaux qui ne génèrent pas d’erreur sont dirigés vers cette relation.

Écrit les attributs

Nom

Description

mime.type

application/json

aggregation.name

Le nom de l’agrégation dont les résultats se trouvent dans le FlowFile en sortie

aggregation.number

Le numéro de l’agrégation dont les résultats se trouvent dans le FlowFile sortant

page.number

Le numéro de la page (requête), à partir de 1, dans laquelle ont été renvoyés les résultats qui se trouvent dans le FlowFile de sortie

hit.count

Le nombre d’occurrences dans le FlowFile de sortie

elasticsearch.requête.erreur

Le message d’erreur fourni par Elasticsearch en cas d’erreur de requête sur l’index.

Voir aussi :