从关系数据库到Elasticsearch的索引数据– 1
Elasticsearch提供強大的搜索功能，并支持數據的分片和復制。 因此，我們希望將數據庫中可用的數據索引到Elasticsearch中。
有多種方法可以將數據索引到Elasticsearch中：
在本文中，我們將研究方法2，即使用作為獨立進程運行的外部庫。
我們將使用MySQL作為數據庫，并使用MySQL隨附的示例數據庫世界，其中包含以下表格：
- 國家
- 市
- 國家語言
Elasticsearch-jdbc庫通過其GitHub 頁面上提供的兼容性矩陣最多支持Elasticsearch 2.3.4。 首先，讓我們為數據建立索引，而無需預先定義Elasticsearch（ES）中的索引結構。 如果我們不提供索引結構，則ES會根據索引數據推斷并構建一個。 但這永遠不是理想的結構。
創建一個空索引
確保ES正在運行。 如果您在Windows上，請導航到ES的bin目錄并運行elasticsearch.bat。 如果您使用的是Linux，請按照此處的說明進行操作。
要創建一個空索引，您必須向<es_url>：<port> / <index_name>發出HTTP POST。 例如，使用cURL：
curl -X POST localhost:9200/world您甚至可以使用自己選擇的REST客戶端（例如Postman）來調用ES REST API
設置JDBC導入器
從此處下載elasticsearch-jdbc二進制文件并將其解壓縮到一個文件夾中，我們將其稱為ES_IMPORTER。 ES_IMPORTER / bin中已經存在用于與MySQL和其他數據庫一起使用的腳本，我們會將所有與導入相關的腳本放在同一文件夾中。
注意 ：如果使用的是Oracle DB，則需要將JDBC驅動程序放在ES_IMPORTER / lib文件夾中。 對于MySQL等其他DB，PostgreSql JDBC驅動程序已經可用。
另一個注意事項 ：elasticsearch-jdbc需要JDK 8
我們將創建以下文件（鏈接中可用的代碼）來運行導入程序：
- world-importer.bat / world-importer.sh –用于啟動導入程序
- world-importer-config.json –用于配置導入器
- world.sql –包含要執行以獲取索引數據的SQL查詢。
JDBC連接字符串，數據庫用戶名和密碼可以在world-importer-config.json中進行更新。 此外，可以在同一文件中更新ES端口，ES主機名，ES索引名稱，ES索引類型名稱。
運行JDBC導入器
在運行導入程序之前，打開URL： http：// localhost：9200 / world
上面顯示索引世界沒有定義的結構
打開URL： http：// localhost：9200 / world / _search
上面顯示索引世界中沒有數據。
導航至目錄：ES_IMPORTER / bin并運行world-importer.bat或world-importer.sh 。
導入程序完成后（應該立即完成），打開URL： http：// localhost：9200 / world / 。 現在，您將看到索引具有在映射鍵中定義的結構，也稱為映射。 并且當您打開URL： http：// localhost：9200 / world / _search時，您將找到索引數據，該數據大約是hits字段報告的239個條目。
JDBC導入器的優點
- 易于導入數據，提供了許多配置選項。 并且可以安排重復運行。
- 支持創建嵌套對象和嵌套對象數組（在我們的示例中，大寫字母是嵌套對象，而城市和語言是嵌套對象數組）
- 可以對SQL查詢進行參數化
- 只有上次運行后更改的數據才能重新索引。
JDBC導入器的缺點
- 不支持ES版本5及更高版本
- 嵌套對象數組中可能存在重復的對象。 但是重復數據刪除可以在應用程序層進行處理。
- 對最新ES版本的支持可能會延遲。
在本文的下一部分中，我們將：
- 創建索引的映射
- 了解用于索引的SQL
翻譯自: https://www.javacodegeeks.com/2017/03/index-data-relational-database-elasticsearch-1.html
總結
以上是生活随笔為你收集整理的从关系数据库到Elasticsearch的索引数据– 1的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： DDOS攻击平台（ddos平台攻击网站）
- 下一篇： 通过Spring Boot使用MySQL