Kibana + Machine Learning – Kiedy sprzeda膰 auto? Analiza danych z rejestracji pojazd贸w 2014-2022

W poprzednim wpisie przedstawi艂em proces przygotowania danych dotycz膮cych rejestracji pojazd贸w w Polsce. W tym artykule zobaczysz analiz臋 danych za pomoc膮 Kibana. Dowiesz si臋 kt贸re miesi膮ce to najwi臋kszy ruch w bran偶y motoryzacyjnej, jakie wojew贸dztwa przoduj膮 w tym temacie i czy COVID mia艂 jaki艣 wi臋kszy wp艂yw.

Czytaj dalej 鈥濳ibana + Machine Learning – Kiedy sprzeda膰 auto? Analiza danych z rejestracji pojazd贸w 2014-2022鈥

Elasticsearch Runtime fields, albo analiza “polskiej szlachty” na podstawie danych z Facebook w Kibana

Elastic wprowadzi艂 mechanizm Runtime fields, a Facebook’owi przydarzy艂 si臋 wyciek. Jest to dobry pretekst, aby przetestowa膰 jedno i przyjrze膰 si臋 drugiemu 馃榿. Szczeg贸艂y o wycieku znajdziesz w artykule Niebezpiecznika.

Czytaj dalej 鈥濫lasticsearch Runtime fields, albo analiza “polskiej szlachty” na podstawie danych z Facebook w Kibana鈥

Analiza danych z Twitter dla leni w Elastic Stack (Xbox VS PlayStation)

Dane z Twitter mo偶na pozyska膰 na wiele sposob贸w, ale komu chce si臋 pisa膰 kod 馃槈. Szczeg贸lnie taki, kt贸ry b臋dzie dzia艂a艂 24/7. W Elastic Stack mo偶na w prosty spos贸b zbiera膰 i analizowa膰 dane z Twitter’a. Logstash ma gotowe wej艣cie do zbierania strumienia tweet’贸w. Kafka Connect omawiana w poprzednim artykule r贸wnie偶 ma tak膮 opcj臋, jednak Logstash mo偶e wysy艂a膰 dane do wielu 藕r贸de艂 (w tym do Apache Kafka) i jest prostszy w obs艂udze.

W artykule:

  • Zapis strumienia tweet贸w do Elasticsearch w Logstash’u
  • Wizualizacje w Kibana (Xbox vs PlayStation)
  • Usuni臋cie tag贸w HTML dla keyword’a mechanizmem normalizacji
Czytaj dalej 鈥濧naliza danych z Twitter dla leni w Elastic Stack (Xbox VS PlayStation)鈥

Analiza Danych Transportu Miejskiego Warszawy w Kibana i Elasticsearch

W poprzednim wpisie udokumentowa艂em utworzenie przep艂ywu danych wykorzystuj膮cego technologie takie jak Kafka, Kafka Streams, Logstash i Elasticsearch. Po kilku dniach pracy mam ju偶 wystarczaj膮c膮 ilo艣膰 danych, aby przekona膰 si臋 jakie mo偶liwo艣ci analizy danych transportu miejskiego umo偶liwia Elasticsearch i Kibana.

Czytaj dalej 鈥濧naliza Danych Transportu Miejskiego Warszawy w Kibana i Elasticsearch鈥

Keep Calm And Serilog Elasticsearch Kibana on .NET Core – 132. Spotkanie WG.NET

Pr臋dzej czy p贸藕niej programista dowiaduje si臋 o istotno艣ci logowania w swojej aplikacji. Najlepiej podej艣膰 do tematu w spos贸b “leniwy” tj. minimum wysi艂ku, maksimum efekt贸w ?. Elasticsearch i Kibana bardzo w tym pomagaj膮. 16.01.2020 przedstawi艂em swoje do艣wiadczenia z tym zwi膮zane na meetup-ie Warszawskiej Grupy .NET .

Czytaj dalej 鈥濳eep Calm And Serilog Elasticsearch Kibana on .NET Core – 132. Spotkanie WG.NET鈥

Wizualizacja map w Elasticsearch i Kibana – GPS komunikacji miejskiej

My艣lisz o analizie i wizualizacji danych geo? Czemu nie spr贸bowa膰 Elasticsearch? Tzw. ELK (Elasticsearch + Logstash + Kibana) to nie tylko baza NoSQL. Jest to ca艂y system, kt贸ry umo偶liwia przechowywanie, wyszukiwanie, analiz臋 i wizualizacj臋 danych z dowolnego 藕r贸d艂a w czasie rzeczywistym. W tym przypadku wykorzystamy otwarte dane lokalizacji komunikacji miejskiej w Warszawie. Wspomnia艂em o nich w tym artykule.

Czytaj dalej 鈥濿izualizacja map w Elasticsearch i Kibana – GPS komunikacji miejskiej鈥