Eu sou novo no ElasticSearch . Estou tentando descobrir como remover dados do ElasticSearch. Eu apaguei meus índices. No entanto, isso não parece realmente remover os dados em si. As outras coisas que vi apontam para o recurso Excluir por consulta . No entanto, nem tenho certeza do que consultar. Eu conheço meus índices. Essencialmente, eu gostaria de descobrir como fazer um

DELETE FROM [Index]

Do PostMan no Chrome. No entanto, não estou tendo sorte. Parece que não importa o que eu faça, os dados ficam por aí. Até o momento, excluii com êxito os índices usando o DELETE HTTP Verb no PostMan e usando um URL como:

   http://localhost:9200/[indexName]

No entanto, isso não parece realmente remover os dados (também conhecidos como documentos).

Você pode excluir usando cURLou visualmente uma das muitas ferramentas criadas por entusiastas de código aberto para o Elasticsearch.

Usando cURL

curl -XDELETE localhost:9200/index/type/documentID

por exemplo

curl -XDELETE localhost:9200/shop/product/1

Você receberá uma resposta sobre se isso foi bem-sucedido ou não. Você pode excluir um índice ou tipos inteiros com um índice também, excluir um tipo deixando de fora o ID do documento da seguinte forma:

curl -XDELETE localhost:9200/shop/product

Se você deseja excluir um índice -

curl -XDELETE localhost:9200/shop

Se você deseja excluir mais de um índice que segue uma determinada convenção de nomenclatura (observe *um curinga), -

curl -XDELETE localhost:9200/.mar* 

Visualmente

Existem várias ferramentas, como mencionado acima, não as listarei aqui, mas irei vinculá-lo a uma que permita que você comece imediatamente, localizado aqui . Essa ferramenta é chamada KOPF. Para conectar-se ao seu host, clique no logotipo no canto superior esquerdo e digite o URL do seu cluster.

Uma vez conectado, você poderá administrar todo o cluster, excluir, otimizar e ajustar o cluster.

Se você precisar excluir todos os índices, isso pode ser útil:

curl -X DELETE 'http://localhost:9200/_all'

Powershell:

Invoke-WebRequest -method DELETE http://localhost:9200/_all

A documentação (ou o Guia definitivo ) diz que você também pode usar a próxima consulta para excluir todos os índices:

curl -XDELETE 'http://localhost:9200/*'

E há uma observação importante:

Para alguns, a capacidade de excluir todos os seus dados com um único comando é uma perspectiva muito assustadora. Se você deseja eliminar a possibilidade de exclusão em massa acidental, defina o seguinte trueem elasticsearch.yml:

action.destructive_requires_name: true

Você precisa enviar uma DELETEsolicitação para

http://[your_host]:9200/[your_index_name_here]

Você também pode excluir um único documento:

http://[your_host]:9200/[your_index_name_here]/[your_type_here]/[your_doc_id]

Eu sugiro que você use martelo elástico .

Após a exclusão, você pode procurar se o índice ainda existe com o seguinte URL: http://[your_host]:9200/_stats/

Boa sorte!

A exclusão do índice excluirá o mapeamento e o tipo along. você pode excluir todas as linhas pela seguinte consulta

curl -XDELETE 'localhost:9200/twitter/tweet/_query?pretty' -d'
{
   "query": { 
      "match_all": 
   }
}'

No entanto, para a consulta acima, você precisa instalar o plug-in excluir por consulta a partir do 2.0.0-beta1 do Elasticsearch, a exclusão por consulta foi removida da API principal

Install delete-by-query plugin

sudo bin/plugin install delete-by-query

Para mais

http://blog.appliedinformaticsinc.com/how-to-delete-elasticsearch-data-records-by-dsl-query/

#list all index:       curl -XGET http://localhost:9200/_cat/indices?v 

#delete index:         curl -XDELETE 'localhost:9200/index_name'
#delete all indices:   curl -XDELETE 'localhost:9200/_all'
#delete document   :   curl -XDELETE 'localhost:9200/index_name/type_name/document_id'

Instale o kibana . O Kibana possui uma ferramenta de desenvolvimento mais inteligente, que ajuda a criar consultas facilmente.

curl -X DELETE 'https://localhost:9200/_all'

Mude httppara httpsse você estiver usando o certificado SSL em seu aplicativo

Você pode excluir um índice em python da seguinte maneira

from elasticsearch import Elasticsearch

es = Elasticsearch([{'host':'localhost', 'port':'9200'}])

es.index(index='grades',doc_type='ist_samester',id=1,body={
    "Name":"Programming Fundamentals",
    "Grade":"A"
})

es.indices.delete(index='grades')

maneira mais simples!

Endpoint :
http://localhost:9201/twitter/_delete_by_query

Payload :
{
  "query": { 
    "match": {
      "message": "some message"
    }
  }
}

onde twitterestá o índice na pesquisa elástica

ref; https://www.elastic.co/guide/en/elasticsearch/reference/current/docs-delete-by-query.html

Para exclusão em massa por consulta, você pode usar a API especial de exclusão por consulta :

$ curl -XDELETE 'http://localhost:9200/twitter/tweet/_query' -d '{
    "query" : {
        "term" : { "user" : "kimchy" }
    }
}

No histórico, a API foi excluída e reintroduzida novamente

Quem interessante tem longa história.

1. Na primeira versão dessa resposta, refiro-me à documentação do elasticsearch versão 1.6 . Nele, a funcionalidade foi marcada como obsoleta, mas funciona bem.
2. Na elasticsearch versão 2.0, foi movido para o plugin separado . E mesmo as razões pelas quais se tornou o plugin explicado .
3. E apareceu novamente na API principal na versão 5.0 !

Eu queria excluir o índice do logstash e pesquisar muito sobre diferentes ferramentas como o curl. Mas encontrou a solução no final. Entre no Kibana. Vá para a guia Dev Tools, digite o DELETE /logstash-*campo de consulta e pressione o botão de seta verde. se você for "reconhecido": true em resposta, significa que os dados foram limpos.

Para listar os índices curl -L localhost:9200/_cat/indices

9200 porta padrão [altere a porta se estiver usando outra porta]

Você provavelmente encontrará todos os índices começando com logstash-yyyy-mm-dd formato (logstash- *)

Você pode ver todos os índices e usar

Para excluir os índices e gatilhos de dados, siga o comando.

curl -XDELETE localhost:9200/index_name (O que removerá os dados e os índices).

Há muitas boas respostas aqui, mas há também algo que eu gostaria de adicionar:

• Se você estiver executando no serviço AWS ElasticSearch , não poderá excluir / excluir índices . Em vez de excluir índices, você deve reindexá-los .

Você pode excluir o índice inteiro, o tipo de documento ou os dados de identificação perticular. estas são as três maneiras:

1. curl -XDELETE localhost: 9200 / index_name

2. curl -XDELETE localhost: 9200 / index_name / doc-type

3. curl -XDELETE localhost: 9200 / index_name / doc-type / documentId

e se você deseja excluir todo o índice, vá para o curinga.

Você também pode excluir o índice usando a ação DELETE em 'elasticsearch head' ( plug-in do Chrome ). Adicione-o ao seu chrome e conecte-o ao seu host. Lá você encontrará todos os seus índices e, se clicar no botão de ações abaixo do índice que deseja excluir, encontrará uma opção DELETE no menu suspenso. clique nele e digite DELETE no pop-up. Seu índice será excluído. A extensão 'Elasticsearch head' é uma maneira fácil de visualizar e gerenciar seus índices e dados.

Você pode usar a extensão chrome elasticsearch-head para excluir o índice

Você pode excluir o índice pelo Kibana Console:

Para obter todo o índice:

GET /_cat/indices?v

Para excluir um índice específico:

DELETE /INDEX_NAME_TO_DELETE

Você pode excluir um ou mais índices, o que realmente exclui seus arquivos do disco . Por exemplo:

curl -XDELETE localhost:9200/$INDEXNAME

Onde $INDEXNAMEpode haver um nome de índice (por exemplo users_v2), N índices separados por vírgula (por exemplo users_v2,users_v3). Um padrão de índice (por exemplo users_*) ou _alltambém funciona, a menos que esteja bloqueado na configuração via action.destructive_requires_name: true.

É possível excluir documentos individuais, mas isso não será eliminado imediatamente . Uma exclusão é apenas uma exclusão virtual e os documentos são realmente removidos durante a mesclagem de segmentos . Você encontrará muitos detalhes sobre segmentos e mesclagens nesta apresentação . É sobre o Solr, mas as mesclagens são do Lucene, então você tem as mesmas opções no Elasticsearch.

De volta à API, é possível excluir documentos individuais por ID (forneça um valor de roteamento se você indexar com roteamento):

curl -XDELETE localhost:9200/users_v2/_doc/user1

Ou por consulta:

curl -XPOST -H 'Content-Type: application/json' localhost:9200/users_v2/_delete_by_query -d '{
  "query": {
    "match": {
      "description_field": "bad user"
    }
  }
}'

Digamos que eu precise excluir um índice filebeat-7.6.2-2020.04.30-000001e o executei usando uma opção curl DELETE ( curl -X DELETE "localhost:9200/filebeat-7.6.2-2020.04.30-000001?pretty") e resulte em um problema de autenticação, conforme abaixo;

{
  "error" : {
    "type" : "security_exception",
    "reason" : "missing authentication credentials for REST request [/filebeat-7.6.2-2020.04.30-000001?pretty]"
  },
  "status" : 401
}

Aqui, você deve autenticar a solicitação de ondulação usando o nome de usuário e a senha que você forneceu para o Elasticsearch. Tente então

curl -X DELETE -u myelasticuser:myelasticpassword "localhost:9200/filebeat-7.6.2-2020.04.30-000001?pretty"

resultará em {"reconhecido": verdadeiro} .