Phenquestions
Database Elasticsearch
Elasticsearch adalah salah satu database NoSQL paling populer yang digunakan untuk menyimpan dan mencari data berbasis teks. Ini didasarkan pada teknologi pengindeksan Lucene dan memungkinkan pengambilan pencarian dalam milidetik berdasarkan data yang diindeks.
Berdasarkan website Elasticsearch, berikut adalah definisinya:
Elasticsearch adalah mesin analitik dan pencarian sumber terbuka yang didistribusikan, RESTful yang mampu memecahkan semakin banyak kasus penggunaan.
Itu adalah beberapa kata tingkat tinggi tentang Elasticsearch. Mari kita memahami konsep secara rinci di sini.
- Didistribusikan: Elasticsearch membagi data yang dikandungnya menjadi beberapa node dan menggunakan tuan-budak algoritma secara internal
- Tenang: Elasticsearch mendukung kueri basis data melalui REST API. Ini berarti bahwa kita dapat menggunakan panggilan HTTP sederhana dan menggunakan metode HTTP seperti GET, POST, PUT, DELETE dll. untuk mengakses data.
- Mesin telusur dan Analytics: ES mendukung kueri yang sangat analitis untuk dijalankan dalam sistem yang dapat terdiri dari kueri gabungan dan beberapa jenis, seperti kueri terstruktur, tidak terstruktur, dan geografis.
- Dapat diskalakan secara horizontal: Penskalaan semacam ini mengacu pada penambahan lebih banyak mesin ke cluster yang ada. Ini berarti bahwa ES mampu menerima lebih banyak node dalam klasternya dan tidak memberikan waktu henti untuk peningkatan yang diperlukan ke sistem. Perhatikan gambar di bawah ini untuk memahami konsep penskalaan:
Scaling Vertikal dan Horizontal
Memulai dengan Database Elasticsearch
Untuk mulai menggunakan Elasticsearch, itu harus diinstal pada mesin. Untuk melakukan ini, baca Instal ElasticSearch di Ubuntu.
Pastikan Anda memiliki instalasi ElasticSearch yang aktif jika Anda ingin mencoba contoh yang kami sajikan nanti dalam pelajaran.
Elasticsearch: Konsep & Komponen
Di bagian ini, kita akan melihat komponen dan konsep apa yang ada di jantung Elasticsearch. Pemahaman tentang konsep-konsep ini penting untuk memahami cara kerja ES:
- Gugus: Cluster adalah kumpulan mesin server (Node) yang menyimpan data. Data dibagi antara beberapa node sehingga dapat direplikasi dan tidak terjadi Single Point of Failure (SPoF) dengan ES Server. Nama default cluster adalah pencarian elastis. Setiap node dalam kluster terhubung ke kluster dengan URL dan nama kluster sehingga penting untuk menjaga agar nama ini tetap berbeda dan jelas.
- simpul: Mesin Node adalah bagian dari server dan disebut sebagai mesin tunggal. Ini menyimpan data dan menyediakan kemampuan pengindeksan dan pencarian, bersama dengan Node lain ke cluster.
Karena konsep penskalaan Horizontal, kita hampir dapat menambahkan jumlah node yang tak terbatas dalam kluster ES untuk memberikan lebih banyak kekuatan dan kemampuan pengindeksan.
- Indeks: Indeks adalah kumpulan dokumen dengan karakteristik yang agak mirip. Indeks sangat mirip dengan Database di lingkungan berbasis SQL.
- Tipe: Tipe digunakan untuk memisahkan data antara indeks yang sama. Misalnya, Database/Indeks Pelanggan dapat memiliki beberapa tipe, seperti pengguna, tipe_pembayaran, dll.
Perhatikan bahwa Jenis tidak digunakan lagi dari ES v6.0.0 dan seterusnya. Baca di sini mengapa ini dilakukan.
- Dokumen: Dokumen adalah tingkat unit terendah yang mewakili data. Bayangkan itu seperti Objek JSON yang berisi data Anda. Dimungkinkan untuk mengindeks sebanyak mungkin dokumen di dalam Indeks.
Jenis pencarian di Elasticsearch
Elasticsearch dikenal karena kemampuan pencariannya yang hampir real-time dan fleksibilitas yang diberikannya dengan jenis data yang diindeks dan dicari. Mari kita mulai mempelajari cara menggunakan pencarian dengan berbagai jenis data.
- Pencarian Terstruktur: Jenis pencarian ini dijalankan pada data yang memiliki format yang telah ditentukan sebelumnya seperti Tanggal, waktu, dan angka. Dengan format yang telah ditentukan sebelumnya, hadir fleksibilitas dalam menjalankan operasi umum seperti membandingkan nilai dalam rentang tanggal. Menariknya, data tekstual dapat terstruktur juga. Ini dapat terjadi ketika suatu bidang memiliki jumlah nilai yang tetap. Misalnya, Nama Database dapat berupa, MySQL, MongoDB, Elasticsearch, Neo4J dllJ. Dengan penelusuran terstruktur, jawaban atas kueri yang kami jalankan adalah ya atau tidak.
- Pencarian Teks Lengkap: Jenis pencarian ini bergantung pada dua faktor penting, Relevansi dan Analisis. Dengan Relevansi, kami menentukan seberapa cocok beberapa data dengan kueri dengan menentukan skor pada dokumen yang dihasilkan. Skor ini disediakan oleh ES sendiri. Analisis mengacu pada pemecahan teks menjadi token yang dinormalisasi untuk membuat indeks terbalik.
- Pencarian Multifield: Dengan jumlah kueri analitik yang terus meningkat pada data yang disimpan di ES, kami biasanya tidak hanya menghadapi kueri pencocokan sederhana. Persyaratan telah berkembang untuk menjalankan kueri yang menjangkau beberapa bidang dan memiliki daftar data yang diurutkan dengan skor yang dikembalikan kepada kami oleh database itu sendiri. Dengan cara ini, data dapat disajikan kepada pengguna akhir dengan cara yang jauh lebih efisien.
- Pencocokan Proimity: Kueri saat ini lebih dari sekadar mengidentifikasi apakah beberapa data tekstual berisi string lain atau tidak. Ini tentang membangun hubungan antara data sehingga dapat dinilai dan dicocokkan dengan konteks di mana data dicocokkan. Sebagai contoh:
- Bola mengenai John
- John memukul Bola
- John membeli Bola baru yang terkena taman Jaen
Kueri kecocokan akan menemukan ketiga dokumen saat dicari Pukulan bola. Pencarian kedekatan dapat memberi tahu kami seberapa jauh kedua kata ini muncul di baris atau paragraf yang sama karena mereka cocok.
- Pencocokan Sebagian: Seringkali kita perlu menjalankan kueri pencocokan sebagian partial. Pencocokan Parsial memungkinkan kami menjalankan kueri yang cocok sebagian. Untuk memvisualisasikan ini, mari kita lihat kueri berbasis SQL yang serupa:
Kueri SQL: Pencocokan Sebagian
DI MANA nama SEPERTI "%john%"
DAN beri nama LIKE "%red%"
DAN beri nama SEPERTI "%taman%"Pada beberapa kesempatan, kami hanya perlu menjalankan kueri kecocokan sebagian bahkan ketika kueri tersebut dapat dianggap seperti teknik brute force.
Integrasi dengan Kibana
Ketika datang ke mesin analitik, kami biasanya perlu menjalankan kueri analisis di domain Business-Intelligence (BI). Ketika datang ke Analis Bisnis atau Analis Data, tidak adil untuk berasumsi bahwa orang tahu bahasa pemrograman ketika mereka ingin memvisualisasikan data yang ada di ES Cluster. Masalah ini diselesaikan oleh Kibana. Kibana menawarkan begitu banyak manfaat bagi BI sehingga orang dapat benar-benar memvisualisasikan data dengan dasbor yang sangat baik dan dapat disesuaikan dan melihat data secara tidak menarik. Mari kita lihat beberapa manfaatnya di sini.
Grafik Interaktif
Inti dari Kibana adalah Grafik Interaktif seperti ini:
Kibana hadir didukung dengan berbagai jenis grafik seperti diagram lingkaran, sunbursts, histogram dan banyak lagi yang menggunakan kemampuan agregasi lengkap dari ES.
Dukungan Pemetaan
Kibana juga mendukung Geo-Aggregation lengkap yang memungkinkan kami untuk memetakan data kami secara geografis. Bukankah ini keren??!
Agregasi dan Filter yang sudah dibuat sebelumnya
Dengan Agregasi dan Filter yang Dibuat Sebelumnya, dimungkinkan untuk secara harfiah memecah, menjatuhkan, dan menjalankan kueri yang sangat dioptimalkan dalam Dasbor Kibana. Hanya dengan beberapa klik, Anda dapat menjalankan kueri gabungan dan menyajikan hasil dalam bentuk Bagan Interaktif.
Distribusi Dasbor yang Mudah
Dengan Kibana, juga sangat mudah untuk membagikan dasbor ke audiens yang lebih luas tanpa melakukan perubahan apa pun pada dasbor dengan bantuan mode Hanya Dasbor. Kami dapat dengan mudah memasukkan dasbor ke wiki atau halaman web internal kami.
Gambar fitur diambil dari halaman Produk Kibana.
Menggunakan Elasticsearch
Untuk melihat detail instance dan informasi cluster, jalankan perintah berikut:
Sekarang, kita dapat mencoba memasukkan beberapa data ke ES menggunakan perintah berikut:
Memasukkan Data
ikal \-X POST 'http://localhost:9200/linuxhint/hello/1' \
-H 'Jenis Konten: aplikasi /json' \
-d ' "nama" : "LinuxHint" '\
Inilah yang kami dapatkan kembali dengan perintah ini:
Mari kita coba dapatkan datanya sekarang:
Mendapatkan Data
curl -X DAPATKAN 'http://localhost:9200/linuxhint/hello/1'Ketika kita menjalankan perintah ini, kita mendapatkan output berikut:
Kesimpulan
Dalam pelajaran ini, kita melihat bagaimana kita dapat mulai menggunakan ElasticSearch yang merupakan Mesin Analytics yang sangat baik dan memberikan dukungan yang sangat baik untuk pencarian teks bebas hampir real-time juga.
