El indexado condicional no funciona en las canalizaciones del nodo de ingestión.
Estoy intentando implementar una plantilla de índice con habilitación de datastream y luego configurar “contains” en las canalizaciones del nodo de ingestión. De esta manera, podría obtener métricas con el formato de índice mencionado a continuación:
.ds-metrics-kubernetesnamespace
Lo intenté hace algún tiempo y realicé estas acciones mencionadas anteriormente, y me estaba proporcionando métricas en dicho formato. Sin embargo, ahora, cuando implemento lo mismo, no se produce ningún cambio en mi índice. No puedo ver ningún registro en el clúster de OpenShift, por lo que parece que la ingestión funciona correctamente (cuando agrego un documento y lo pruebo, funciona correctamente).
PUT _ingest/pipeline/metrics-index
{
"processors": [
{
"set": {
"field": "_index",
"value": "metrics-{{kubernetes.namespace}}",
"if": "ctx.kubernetes?.namespace==\"dev\""
}
}
]
}
Esta es la condición del nodo de ingestión que he utilizado para la indexación.
metricbeatConfig:
metricbeat.yml: |
metricbeat.modules:
- module: kubernetes
enabled: true
metricsets:
- state_node
- state_daemonset
- state_deployment
- state_replicaset
- state_statefulset
- state_pod
- state_container
- state_job
- state_cronjob
- state_resourcequota
- state_service
- state_persistentvolume
- state_persistentvolumeclaim
- state_storageclass
- event
davy.ai
Parece que estás intentando implementar una plantilla de índice con datastream habilitado, y luego establecer “contains” en los pipelines del nodo de ingestión para obtener métricas en un formato de índice específico. Sin embargo, no estás viendo ningún cambio en tu índice a pesar de haber probado los mismos pasos anteriormente.
El primer paso que has tomado para implementar esto es definir un pipeline de ingestión llamado “metrics-index” utilizando la llamada API PUT _ingest/pipeline/metrics-index. En este pipeline, has añadido un procesador “set” que establece el campo “_index” a “metrics-{{kubernetes.namespace}}” si “kubernetes.namespace” es “dev”.
El siguiente paso es configurar metricbeat para utilizar este pipeline añadiendo el nombre del pipeline al archivo de configuración “metricbeat.yml”. Además, has habilitado el módulo de kubernetes y especificado los metricsets que deseas recopilar.
Es posible que el problema pueda estar en la condición utilizada en el nodo de ingestión. Sería conveniente verificar que el namespace que esperas que coincida con la condición sea realmente “dev”, ya que esto podría afectar si se crea el índice con el formato esperado.
Otra opción es verificar si la plantilla de índice está configurada correctamente con el datastream. Puedes verificar esto revisando la salida de la llamada API GET _index_template. Si el datastream no está habilitado correctamente, es posible que necesites actualizar tu plantilla en consecuencia.
Por último, puedes intentar depurar este problema revisando los registros de los componentes de tu Elastic Stack. Esto podría darte información adicional sobre el problema que estás enfrentando.
En general, es importante destacar que implementar una plantilla de índice con datastream habilitado puede ser complejo y requiere una configuración cuidadosa. Es importante verificar cada paso y depurar cualquier problema encontrado en el camino.