Newsletter Dane i Analizy, 2025-03-31

blog.prokulski.science 2 dni temu

Cotygodniowa dawka linków, czyli archiwum newslettera Dane i Analizy

Hit minionego tygodnia to MCP (Model Context Protocol). Jest to otwarty standard opracowany przez firmę Anthropic w listopadzie 2024 roku, który umożliwia ustandaryzowaną integrację modeli sztucznej inteligencji z zewnętrznymi źródłami danych i narzędziami. Jego główne cechy to:

Standaryzacja połączeń między AI a zewnętrznymi zasobami Dwukierunkowa komunikacja w czasie rzeczywistym Dynamiczne wykrywanie dostępnych narzędzi i kontekstu Optymalizacja dla dużych modeli językowych (LLM)

Architektura MCP składa się z kilku kluczowych komponentów:

Host - główna aplikacja AI zarządzająca klientami MCP Klienci MCP - pośrednicy łączący hosta z serwerami MCP Serwery MCP - lekkie programy udostępniające funkcjonalności poprzez MCP

MCP może być wykorzystywany w różnych scenariuszach, takich jak:

Zaawansowane środowiska programistyczne (IDE) integrujące wiele narzędzi Chatboty obsługi klienta z dostępem do danych firmowych Platformy analityczne łączące się z bazami danych i narzędziami wizualizacji Asystenci AI wykonujący złożone zadania wymagające dostępu do wielu usług

MCP eliminuje konieczność tworzenia niestandardowych integracji dla wszystkich źródła danych, skracając czas wdrażania nowych funkcjonalności i zmniejszając koszty utrzymania oraz szkoleń. Organizacje mogą zaoszczędzić choćby 40-60% czasu i kosztów związanych z integracją AI z zewnętrznymi systemam.

A co poza tym? Cała seria przebranych manualnie tekstów (statystycznie rzecz ujmując, z pewnie dobrych 300 ze sporym okładem wybrałem wstępnie 50, a kolejne sito przepuściło tylko te zasługujące na uwagę, które widzisz poniżej), i tak tydzień w tydzień od kilku lat.

W zeszłym tygodniu najchętniej czytaliście:

Building an End-to-End Data Pipeline Using PostgreSQL SQL Query Optimization in 2025: 7 Simple Techniques for Faster Database Performance Frustrated by Manual Reporting? Build a Self-Service Portal with Python

Spodobał Ci się ten newsletter? Prześlij go dalej znajomym, którzy mogliby być zainteresowani tymi tematami! A jeżeli otrzymałeś to od kogoś i chcesz regularnie otrzymywać podobne treści, zapisz się na stałe tutaj. Poprzednie wydania znajdziesz w archiwum.
Zapraszam też na Facebooka i LinkedIn.

#analiza_danych_koncepcje

Embedding-Based Retrieval for Airbnb Search
Wyszukiwarka Airbnb jest kluczowym narzędziem dla gości, jednak stanowi wyzwanie ze względu na dużą liczbę ofert. Firma tworzy system osadzania, aby usprawnić ranking wyników wyszukiwania.

#analiza_danych_projekty

Hands-On: Irregular Time Series for Predictive Modeling
W przeciwieństwie do regularnych szeregów czasowych, gdzie zdarzenia występują w spójnych odstępach, nieregularne serie charakteryzują się zmienną częstotliwością zdarzeń. Przykładem jest agencja nieruchomości, która nie sprzedaje domów codziennie. To definiuje nieregularny szereg czasowy. Jak go przewidywać? Pierwszy z serii tekst poświęcony metodom predykcji takich danych.

#bazy_danych

Life Altering Postgresql Patterns
Zbiór praktycznych wzorców i sprawdzonych praktyk w PostgreSQL, które mogą znacząco usprawnić pracę z bazą danych. Autor przedstawia m.in. wykorzystanie UUID jako kluczy głównych, zastosowanie pól timestamp do śledzenia zmian, organizację przez schematy oraz efektywne przechowywanie statusów w formie logów.

Building a data pipeline with DuckDB
Przykład budowy potoku danych opartego na DuckDB, który pobiera dane z API REST, czyści je, transformuje i wczytuje do bazy, gdzie można je analizować. System automatycznie odświeża dane co 15 minut dzięki crona, a wyniki można wizualizować w Supersecie lub tzw. Mietku (Metabase).

#ciekawostki

Applying Flow Metrics to Design Resilient Microservices
Metryki przepływu, powszechnie używane do pomiaru skuteczności zespołów w dostarczaniu oprogramowania, można również stosować do pomiaru i zwiększania odporności systemu.

Upskilling data engineers
Ten przewodnik zbiera podstawowe zasoby i zasady inżynierii danych, umożliwiając koncentrację dyskusji na bardziej zaawansowanych tematach. Niektóre zagadnienia zostały omówione tylko ogólnie i mogą wymagać doczytania.

#devops

Using Curl command Every Day? Discover Advanced Features to Simplify Your Workflow!
W artykule omawiane są zaawansowane techniki wykorzystania polecenia curl oraz trudności z automatyzacją tego procesu.

Mastering Log Analysis with Grep, AWK & Sed
W Shellu można dużo, na przykład przeanalizować logi. Bo logi są zwykle wielkie, bo są zwykle w określonej strukturze. Przy okazji tego tekstu nauka podstaw poleceń grep, awk i sed.

How to Create a VM on Ubuntu with Terraform, Libvirt, and QEMU
Kompletny przewodnik po tworzeniu maszyn wirtualnych w systemie Ubuntu z Terraform, Libvirt i QEMU, obejmujący rzeczywiste błędy i poprawki AppArmor. Może się przydać.

#llm_&_chatgpt

What’s the Best PDF Extractor for RAG?
Autor przetestował różne rozwiązania do wyciągania tekstów z plików PDF, w tym różne biblioteki oraz usługi hostowane w chmurze. Po przeprowadzeniu testów na bardziej złożonych plikach PDF, wybrano trzy najlepsze opcje, aby sprawdzić, jak dobrze sobie radzą z wyzwaniami ekstrakcji danych.

#management

Revenge of the junior developer
Nie tylko MCP to temat mijającego tygodnia. Innym - może bardziej popularnym - jest "vibe coding". Interesujący felieton na ten temat, a także ogólnie mówiący o wspomaganiu programowania narzędziami AI/LLM.

#powerbi

Is Your Power BI Slow? 10 Ways to Optimize Your Data Model
Poradnik optymalizacji modelu danych w Power BI dla uzyskania najwyższej wydajności. Pomimo clickbaitowego tytułu, artykuł zawiera wartościowe wskazówki dotyczące modelowania danych, które można zastosować nie tylko w Power BI.

#python

uv Package Manager for Python
Po raz kolejny uv... tym razem jest to skondensowane omówienie tego menedżera pakietów. Idealna ściągawka dla osób mających doświadczenie z instalacją pakietów i tworzeniem środowisk wirtualnych, a chcących przesiąść się na tego turbo-potwora.

Call Objects Like Functions
Klasa w Pythonie, którą można wywołać w całości, a nie tylko jej metody? Rozprawka o metodzie __call__.

8 Levels of Using Multiprocessing in Python
Ten artykuł poprowadzi Cię krok po kroku. Wyjaśnia zastosowania wieloprocesorowe Pythona dzięki przykładów przyjaznych dla początkujących w 8 progresywnych poziomach, zapewniając zrozumienie koncepcji i skuteczne ich zastosowanie.

Enhancing Web Scraping Projects with Pydantic
Chyba niezbyt oczywiste zastosowanie Pydantic - do budowania struktur, w które można włożyć dane podczas scrapowania stron. Inspirująca koncepcja!

FastAPI Python Tutorial
Kompletny kurs FastAPI trwający niemal 5 godzin (YT, po angielsku), obejmujący tworzenie i wdrażanie API, dokeryzację oraz wykorzystanie Pydantic do schematów danych. Omawia również integrację SQLModel z PostgreSQL oraz bezpieczne operacje bazodanowe.

I Want My Own Fancy F-String Format Specifiers... Sure You Can
Artykuł pokazujący, jak tworzyć własne specyfikatory formatu dla f-stringów w Pythonie, wykraczające poza standardowe opcje takie jak {:0.2f}.

Praktyczne zasosotwania Pythona w budowie aplikacji walutowej [autopromocja]
Chcesz nauczyć się programowania w Pythonie na rzeczywistym projekcie? Korzystanie z API, kooperacja z bazami danych, aplikacja WWW? Zobacz ten projekt na GitHubie. jeżeli go nie zrozumiesz - sięgnij po książkę (link w opisie, w repozytorium).