Come connettersi ad AWS Elasticsearch?

Question

sto cercando di connettersi a AWS elasticsearch ma ho sempre ottenere il seguente errore:

Exception in thread "main" org.elasticsearch.client.transport.NoNodeAvailableException: None of the configured nodes are available: [] 
at org.elasticsearch.client.transport.TransportClientNodesService.ensureNodesAreAvailable(TransportClientNodesService.java:278) 
at org.elasticsearch.client.transport.TransportClientNodesService.execute(TransportClientNodesService.java:197) 
at org.elasticsearch.client.transport.support.InternalTransportClient.execute(InternalTransportClient.java:106) 
at org.elasticsearch.client.support.AbstractClient.index(AbstractClient.java:98) 
at org.elasticsearch.client.transport.TransportClient.index(TransportClient.java:334) 
at org.elasticsearch.action.index.IndexRequestBuilder.doExecute(IndexRequestBuilder.java:313) 
at org.elasticsearch.action.ActionRequestBuilder.execute(ActionRequestBuilder.java:91) 
at org.elasticsearch.action.ActionRequestBuilder.execute(ActionRequestBuilder.java:65) 
at com.c_backendcrawler.utility.ElasticSearch.uploadObject(ElasticSearch.java:25) 
at com.c_backendcrawler.Start.main(Start.java:34) 

Il mio codice è il seguente:

//Create Client 
    Settings settings = ImmutableSettings.settingsBuilder().put("cluster.name", "zencubes-search").put("node.name","Darkhawk").build(); 
    TransportClient transportClient = new TransportClient(settings); 
    transportClient.addTransportAddress(new InetSocketTransportAddress(
      "x.x.x.x",9300)); 
    return transportClient; 

uscita da AWS elasticsearch:

{ 
status: 200, 
name: "Darkhawk", 
cluster_name: "817880037706:zencubes-search", 
version: { 
number: "1.5.2", 
build_hash: "62ff9868b4c8a0c45860bebb259e21980778ab1c", 
build_timestamp: "2015-04-27T09:21:06Z", 
build_snapshot: false, 
lucene_version: "4.10.4" 
}, 
tagline: "You Know, for Search" 
} 

Ho provato ad arricciare (https://search-zencubes-search-xxxxxxxx.eu-west-1.es.amazonaws.com/) e funziona - ma non sulla porta 9300. Cosa sto facendo male qui?

Answer 1

Il protocollo di trasporto nativo non supporta l'uso di AWS Managed ElasticSearch ed è disponibile solo tramite l'endpoint REST. Prendi in considerazione la possibilità di passare il tuo cliente a consumare l'endpoint REST, come ad esempio https://github.com/searchbox-io/Jest.

Fonte: https://forums.aws.amazon.com/thread.jspa?messageID=681938

Answer 2

Come ha detto John Russell sopra, è necessario utilizzare un client REST per comunicare con il cluster AWS Elastic.

Elastic ha recentemente rilasciato la prima versione RC del proprio client Java REST, quindi anche questa è un'opzione.

Documenti cliente: https://www.elastic.co/guide/en/elasticsearch/client/java-rest/current/index.html

Maven Repo: http://search.maven.org/#search%7Cgav%7C1%7Cg%3A%22org.elasticsearch.client%22%20AND%20a%3A%22rest%22

Answer 3

Since the Elasticsearch Java SDK version 5.6 c'è un REST Client disponibili. Ciò ti consente di collegarti a Elasticsearch Service su AWS.

Attualmente Elasticsearch Service consente installazioni fino alla versione 5.5, ma è possibile utilizzare l'SDK Java 5.6 su un cluster 5.5 con limitazioni minori.

Nota: durante l'inizializzazione del RestClient si dovrebbe utilizzare la porta 80 o 443, rispettivamente, al posto del 9200. Per esempio.

RestClient restClient = RestClient.builder(
    new HttpHost("search-test-elasti-xxxx-xxxxx.us-east-1.es.amazonaws.com", 80, "http")).build(); 
RestHighLevelClient restHighLevelClient = new RestHighLevelClient(restClient); 
// [...]