云計(jì)算

這篇文章主要介紹了ELK之Logstash如何安裝與導(dǎo)入數(shù)據(jù)，具有一定借鑒價(jià)值，感興趣的朋友可以參考下，希望大家閱讀完這篇文章之后大有收獲，下面讓小編帶著大家一起了解一下。

創(chuàng)新互聯(lián)服務(wù)項(xiàng)目包括阿瓦提網(wǎng)站建設(shè)、阿瓦提網(wǎng)站制作、阿瓦提網(wǎng)頁(yè)制作以及阿瓦提網(wǎng)絡(luò)營(yíng)銷策劃等。多年來(lái)，我們專注于互聯(lián)網(wǎng)行業(yè)，利用自身積累的技術(shù)優(yōu)勢(shì)、行業(yè)經(jīng)驗(yàn)、深度合作伙伴關(guān)系等，向廣大中小型企業(yè)、政府機(jī)構(gòu)等提供互聯(lián)網(wǎng)行業(yè)的解決方案，阿瓦提網(wǎng)站推廣取得了明顯的社會(huì)效益與經(jīng)濟(jì)效益。目前，我們服務(wù)的客戶以成都為中心已經(jīng)輻射到阿瓦提省份的部分城市，未來(lái)相信會(huì)繼續(xù)擴(kuò)大服務(wù)區(qū)域并繼續(xù)獲得客戶的支持與信任！
數(shù)據(jù)集下載

下載地址：https://grouplens.org/datasets/movielens/

我們選擇最小數(shù)據(jù)集即可Logstash 下載與安裝

首先去官網(wǎng)下載 Logstash 安裝包：https://www.elastic.co/downloads/logstash

logstash download

如果下載速度太慢可以選用這個(gè)代理地址下載：http://mirror.azk8s.cn/elastic/logstash/

azk8s

下載完安裝包并解壓進(jìn)入config目錄：

logstash-config

同時(shí)配置如下內(nèi)容,你只需要按照你的數(shù)據(jù)集的路徑改一下配置文件中最開(kāi)始的path即可：

logstash.confinput {
file {
path => "/Users/tanjian/Desktop/logstash-7.6.1/movielens/ml-latest-small/movies.csv" # 這里指定數(shù)據(jù)集路徑
start_position => "beginning"
sincedb_path => "/dev/null"
}
}
filter {
csv {
separator => ","
columns => ["id","content","genre"]
}

mutate {
split => { "genre" => "|" }
remove_field => ["path", "host","@timestamp","message"]
}

mutate {

split => ["content", "("]
add_field => { "title" => "%{[content][0]}"}
add_field => { "year" => "%{[content][1]}"}
}

mutate {
convert => {
"year" => "integer"
}
strip => ["title"]
remove_field => ["path", "host","@timestamp","message","content"]
}

}
output {
elasticsearch {
hosts => "http://localhost:9200"
index => "movies"
document_id => "%{id}"
}
stdout {}
}
Logstash 運(yùn)行

配置好上面的logstash.conf文件后，我們就可以啟動(dòng) Logstash 并開(kāi)始導(dǎo)入數(shù)據(jù)了：

sudo ./bin/logstash -f config/logstash.conf

如下圖 Logstash 日志所示，正在導(dǎo)入數(shù)據(jù)集：

logstash log打開(kāi) Kibana 查看數(shù)據(jù)

在查看數(shù)據(jù)之前，我們需要打開(kāi)http://localhost:5601通過(guò) Kibana 創(chuàng)建一個(gè) Index Pattern：

Index Pattern

之后，我們就可以通過(guò)Discover去查看我們的數(shù)據(jù)了：

Discover

剩下的就交給你自己折騰吧，你可以去Dev Tools通過(guò) QSL 語(yǔ)法搜索數(shù)據(jù)熟悉一下語(yǔ)法。

感謝你能夠認(rèn)真閱讀完這篇文章，希望小編分享的“ELK之Logstash如何安裝與導(dǎo)入數(shù)據(jù)”這篇文章對(duì)大家有幫助，同時(shí)也希望大家多多支持箭頭云，關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道，更多相關(guān)知識(shí)等著你來(lái)學(xué)習(xí)!

當(dāng)前標(biāo)題：ELK之Logstash如何安裝與導(dǎo)入數(shù)據(jù)
本文路徑：http://jinyejixie.com/article12/cjdjdc.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供虛擬主機(jī)、域名注冊(cè)、定制開(kāi)發(fā)、Google、外貿(mào)建站、響應(yīng)式網(wǎng)站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)