Jakiś czas temu znalazłem wspaniałą stronę w internecie: https://sudop.uokik.gov.pl/ Na tej stronie po wpisaniu NIPu można sprawdzić ile pieniędzy dana firma otrzymała z okazji tarczy antykryzysowej. A ja z racji tego, że lubię dane postanowiłem pobrać co tylko mogłem do analizy!
Od kilku miesięcy gromadzę ceny ofertowe mieszkań w kilku większych miastach Polski. Stworzyłem panel, który pozwoli na śledzenie cen konkretnych ofert, a także analizę trendów.
To jest problem, który napotkałem u jednego ze swoich klientów bardzo niedawno. Chciałem policzyć jaka sprzedaż jest generowana przez N pierwszych produktów w stylu pareto tj. jeśli pierwszy produkt ma sprzedaż 200, a drugi 100, to dla pierwszego będę miał 200, a dla drugiego 300. Taka kalkulacja pozwala pokazać, że przykładowo 90% sprzedaży jest generowane przez 7 produktów.
Dzisiaj napiszę w jaki sposób stworzyć funkcję pętli w Power BI używając List.Generate() i funkcji niestandardowej. Zaprezentuje jak przejść przez kolejne strony przy zapytaniu API. W Pythonie zostało by to zrobione właśnie ze pomocą funkcji “for”.
Zdaję sobie sprawę, że taki temat może być oczywistością dla wielu doświadczonych inżynierów danych czy SQLowców, ale mnie mocno zaskoczył. Nasz architekt Paweł Potasiński zwrócił mi uwagę na taką możliwość. W kontrolowanym środowisku Power BI pozwala na wstrzyknięcie kodu SQL poprzez parametr i robienie (prawie) wszystkiego na co ma się ochotę – nawet usunięcie bazy danych! O SQL Injection można poczytać tutaj lub obejrzeć ten filmik. A o moich skryptach w M tu lub tu.
Zadanie z poprzedniego tygodnia wymagało jeszcze jednej rzeczy! Jak wspomniałem, klient pobierał dane z API. Dodatkowo klient chciał pobierać dane dla dwóch różnych podmiotów tj. musiał łączyć się z bazą za pomocą dwóch różnych zestawów haseł i loginów. Ponieważ wszystko miało być raportowane z Power BI, musiałem znaleźć rozwiązanie. Znów postanowiłem popisać w M!
Moje pierwsze krótkie zadanie w nowej pracy polegało na wsparciu klienta przy łączeniu się z API w Power BI. Pilotażowy raport był połączony tylko z jedną stroną internetową. Klient wymagał natomiast, żeby raport pobierał dane z wielu różnych stron. Wymagało to dynamicznego odpytywania strony internetowej i postanowiłem napisać to w języku M.
Dzisiaj opiszę bardzo proste rozwiązanie, które umożliwia zmianę jednostek/walut używając slicerów. To rozwiązanie sprawi, że raport będzie jeszcze bardziej interaktywny i łatwiejszy w odbiorze. Z mojego doświadczenia mogę dodać, że klienci będą w stanie znaleźć ważne dla nich informacje znacznie szybciej. Efekt końcowy może wyglądać na przykład tak:
