当前位置:  开发笔记 > 前端 > 正文

ElasticSearch批量索引

如何解决《ElasticSearch批量索引》经验,为你挑选了1个好方法。

我将Nest 2.1和2.0(alpha)客户端与Nest C#客户端一起使用...我试图批量插入一些记录,但是服务器返回错误。我在与Linux服务器对话的Windows客户端上利用该客户端(但是我认为这并不重要)。

    public static void AddQuestionsToElasticSearch()
    {
        var es = new ElasticsearchClient(new ConnectionConfiguration(
            new Uri("http://elasticserver:9200"))
        );

        var foobars = new FooBar().Parse();
        var descriptor = new BulkDescriptor();

        descriptor.CreateMany(foobars, (bd, q) => bd.Id(q.Id.ToString()).Index("foobars"));

        Console.WriteLine($"Inserting foobars into ES...");
        var sw = new Stopwatch();
        sw.Start();

        var result = es.Bulk(descriptor);

        sw.Stop();
        Console.WriteLine($"Finished inserting foobars {GetTimeTaken(sw.Elapsed)}");
    }

更新-错误信息

我收到的错误是从Bulk()方法返回的响应中...返回的BulkResponse的两个属性是:

OriginalException:“远程服务器返回错误:(400)错误的请求”

ServerError.Error:“验证失败:1:未添加任何请求”



1> Russ Cam..:

您犯了一个简单的错误-您使用的ElasticsearchClient是Elasticsearch.Net 的低级请求,但从NEST发送了一个强类型的批量请求。要纠正很简单,您只需使用ElasticClientNEST

public static void AddQuestionsToElasticSearch()
{
    var es = new ElasticClient(new Uri("http://elasticserver:9200"));

    var foobars = new FooBar().Parse();
    var descriptor = new BulkDescriptor();

    descriptor.CreateMany(foobars, (bd, q) => bd.Id(q.Id.ToString()).Index("foobars"));

    Console.WriteLine($"Inserting foobars into ES...");
    var sw = new Stopwatch();
    sw.Start();

    var result = es.Bulk(descriptor);

    sw.Stop();
    Console.WriteLine($"Finished inserting foobars {GetTimeTaken(sw.Elapsed)}");
}

ElasticClient来自NEST的是高级客户端,ElasticsearchClient在后台使用Elasticsearch.Net。


如果索引中已经存在具有相同类型和“ Id”的文档,而“ IndexMany <T>”将插入文档或覆盖现有文档,则对于任何单独的create调用,“ CreateMany <T>()”都会失败。和“ Id”相同的类型(除非您指定了类型,否则将从T推断出来)。本质上,在要使用乐观并发控制的情况下,`CreateMany <T>`很有用。参见https://www.elastic.co/guide/zh-CN/elasticsearch/reference/current/docs-bulk.html
推荐阅读
可爱的天使keven_464
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有