分成兩個部分，上段講原因、思維、牢騷XD。下段純講實作。受眾自己選擇目標。好久沒分享了，先跟各位朋友抱歉，謝謝你們。 這裡是參考連結： https://docs.mongodb.com/bi-connector/current/ https://github.com/mongodb/mongo-odbc-driver https://github.c …

分成兩個部分，上段講原因、思維、牢騷XD。下段純講實作。受眾自己選擇目標。好久沒分享了，先跟各位朋友抱歉，謝謝你們。

A quick view of Data Snapshot Before everything, I must thank to all the subscribers to my story. You’re the triggers why I insist on sharing data point of views. Thank you my virtual friends. Definition What’s data snapshots? We can consider it as a slice of tree trunk. Every…

非常有趣，今年我竟然用這麼「怪異」的標題寫回顧。內容方面，也不打算講太多技術、甚至是管理技巧方面，都不想講太多了。當然，會用舉例，以免各種打高空的口號，喊的震天價響，沒半個落地實踐，相信大家在各種平台，facebook, Linkedin等等，心靈雞湯廢文看了也不少。敝人不才，文雖然也不見太實用，至少有憑有據。 於是，就是道青菜豆腐湯。 起因，我正在 …

首先，開宗明義一下，要做到這樣的事情，是非常辛苦的。除非你願意雞婆管很多事情，然後公司也願意付你相對應的報酬…. 這像是把資料報表「模組化」。使用者用他喜歡的模組，自己去兜他要的成品。因為我們知道，使用者的需求總是不斷的變動。當然，早在七八年前，就有類似的商業產品，提供使用者，從「固定」資料內，產生他們要的成品報表。 那當然，這也是幾乎所有資料工程師， …

“What’s you action after getting these information?” I’m not saying it’s useless. Different roles indicate to different actions. Actually, good job John Hopkins as its role. But …

Concept Basically it seemed really “intuitive” at first. In the former articles, we introduced the SQL database data export (output) to Elasticsearch and querying by Kibana through Logstash. It’s simply showed the capability of structured data transparency to unstructured data storage. So it should be even easier to load unstructured…

It’s mainly about the introduction about setting and configuration. The last part is about data importing from SQL server database.

這篇本來不會存在的，後來覺得還是留個紀錄吧。主題關於如何按照 schedule把資料pull 進 Elasticsearch內並更新。 已經有底子的大大直接看這兩篇就完美解了，不需要看在下廢話。 Pushing Relational Data to Elasticsearch using Logstash JDBC input plugin I recently wanted to push existing relational data to Elasticsearch and analyse them using Kibana. Therefore, I tried…medium.com Schedule trigger | Elasticsearch Reference [7.5] | Elastic Schedule triggers define when the watch execution should start based on date and time. All times are specified in UTC…www.elastic.co