Archiwum kategorii: tutorial

APP i zbiór APP czyli planowanie przestrzenne w plikach GML. Część 1 – analiza i parsowanie plików XML/GML.

APP i zbiór APP – co to jest i skąd je wziąć.

Pliki APP (Akt Planowania Przestrzennego) to pliki GML zawierające dane z zakresu planowania przestrzennego, których obowiązek tworzenia powstał w związku z wprowadzeniem zmian do ustawy z dnia 27 marca 2003 r. o planowaniu i zagospodarowaniu przestrzennym w postaci rozdziału 5a.

Zbiór APP to wszystkie lub kilka plików APP z obszaru gminy, które znajdują się w jednym pliku GML.

W związku z obowiązkiem publikacji danych GML w postaci APP dla nowych aktów prawnych postanowiłem przyjrzeć się spójności wytworzonych już plików GML (APP) dla planowania przestrzennego dostępnym w dziennikach województw. Pliki GML zawarte są tam w załącznikach do opublikowanych uchwał rad gmin i miast, są ogólnie dostępne i jako opublikowany załącznik do aktu prawa miejscowego powinny być niezmienne.

Analiza nie dotyczy publikowanych i zmieniających się w czasie plików GML dostępnych na stronach niektórych producentów oprogramowania lub gmin ze względu na to. że nie zachowują one niezmienności danych w czasie oraz podstawowych zasad wersjonowania (zmiana elementów XML przy niezmienności jego wersji i identyfikatora) oraz są w części niepodpisane cyfrowo. Fakt tych zmian w części prawdopodobnie wynika z dostrzeżonych usterek w wytworzonych danych lub zmieniających się wytycznych ministerstwa.

Czytaj dalej APP i zbiór APP czyli planowanie przestrzenne w plikach GML. Część 1 – analiza i parsowanie plików XML/GML.

Import plików CAD DWG/DXF wraz z symboliką do Qgis

Jednym z problemów, które doskonale rozwiązuje QGiS jest wczytywanie danych CAD w tym oprogramowaniu. Zarówno pliki DXF jak i DWG mogą być w przeciwieństwie do niektórych informacji które znajdziecie w sieci zaimportowane do Qgis wraz z symboliką.

Procedura ładowania danych CAD w postaci plików DWG / DXF do Qgis:

1. Otwórz czysty projekt Qgis w wersji LTR (2.18.18) (Projekt > Nowy) w odwzorowaniu w którym znajduje się plik dwg. Jeśli jest inne kliknij w prawy dolny róg programu Qgis i wybierz odpowiednie odwzorowanie.

Czytaj dalej Import plików CAD DWG/DXF wraz z symboliką do Qgis

Punkty adresowe PRG – kody pocztowe analiza jakości REGEX

Dzisiaj krótki wpis o jakości danych kodów pocztowych w punktach adresowych PRG.

Kod pocztowy w Polsce w zasadzie każdy wie jak wygląda – to dwie cyfry kreska trzy cyfry czyli np. 80-210. Będąc ciekawym jak wygląda jakość w danych punktów adresowych PRG (dane dostępne tutaj) zrobiłem małą analizę za pomocą funkcji REGEX. Odrzuciłem wszystkie kody pocztowe o prawidłowej strukturze oprócz 00-000, który nie istnieje i wygenerowałem z nich bazę geopackage z kodami pocztowymi wątpliwej jakości, którą możecie pobrać tutaj.

Czytaj dalej Punkty adresowe PRG – kody pocztowe analiza jakości REGEX

Podłączanie danych z portalu danepubliczne.gov.pl (CKAN) do Qgis

Portal danepubliczne.gov.pl jest portalem który zbiera ogólnodostępne dane np. z administracji publicznej i innych źródeł pozwalając na zintegrowanie ich w jednym miejscu. Prowadzony jest przez Ministerstwo Cyfryzacji w opensourcowym systemie CKAN, który powoli staje się podstawowym programem do publikowania w sieci tego typu danych w Europie.

Na stronie danepubliczne.gov.pl w zakładce baza wiedzy znajduje się artykuł jak korzystać z danych serwisu za pomocą API. CKAN współpracuje z różnymi klientami i językami programowania min. Czytaj dalej Podłączanie danych z portalu danepubliczne.gov.pl (CKAN) do Qgis

Projekt w Qgis bazujący wyłącznie na usługach online.

Wraz ze wzrostem ilości danych dostępnych w sieci za pomocą usług coraz bardziej skłaniam się do wykorzystywania zasobów sieciowych w sposób który pozwala mi na automatyczne pobranie aktualnych danych przy każdorazowym otwarciu projektu w Qgis.

W ramach testów na podstawie usługi WFS GDOŚ oraz danych z Centralnego Rejestru Form Ochrony Przyrody i usługi WMTS ortofotomapy z geoportalu wytworzyłem projekt dla pomników przyrody z obszaru województwa pomorskiego.

Qgis był tu klientem usług, którego zadaniem było pobranie danych z warstwy pomników przyrody GDOŚ i CRFOP, połączenie Czytaj dalej Projekt w Qgis bazujący wyłącznie na usługach online.

Wczytywanie danych GML BDOO za pomocą wtyczki Qgis GML Application Schema Toolbox

Qgis ciągle się rozwija i oferuje nowe narzędzia w tym również do czytania i przetwarzania w sposób nieco bardziej zaawansowany plików GML. Odpowiadając na potrzebę wczytywania danych GML w sposób umożliwiający przekazanie relacji zawartych w schematach danych XSD powstała wtyczka Qgis GML Application Schema Toolbox umożliwiająca takie czytanie danych GML. Wtyczkę możecie doinstalować poprzez menu Qgis Wtyczki > Zarządzaj wtyczkami.

Spróbujmy użyć wtyczki do wczytania darmowych danych BDOO Czytaj dalej Wczytywanie danych GML BDOO za pomocą wtyczki Qgis GML Application Schema Toolbox

Określanie gęstości pokrycia punktami w plikach LAS (LIDAR) za pomocą SAGA GIS

Dzisiaj nieco praktycznych informacji o tym czego można się spodziewać zamawiając dane LIDAR z CODGiK w postaci plików LAS.

W ramach projektu ISOK wykonano pokrycie prawie całej Polski danymi LIDAR. Założenia dokładnościowe odnośnie gęstości danych o których możecie przeczytać przy opisie danych w CODGiK to 12 pkt/m2 przy terenach miejskich i 4 pkt /m2 na terenach poza miastami. Oczywiście wczytując się w SOPZ projektu ISOK można się zdziwić bowiem określone są tam Czytaj dalej Określanie gęstości pokrycia punktami w plikach LAS (LIDAR) za pomocą SAGA GIS

Usługi Słownikowe GUGiK część 2 – przetwarzanie danych XML za pomocą Talend Open Studio Data Integration

Pobrane za pomocą usługi WSDL dane z usługi słownikowej GUGiK z poprzedniego wpisu możemy spróbować przetworzyć do postaci pliku csv np przy pomocy programu typu ETL. Użyjemy w tym celu programu Talend Open Studio Data Integration w jego darmowej wersji  który można go pobrać tutaj. Do działania programu musi być zainstalowana na komputerze java, którą można znaleźć tutaj.

Spróbujmy przetworzyć dane z ulicami, które pobraliśmy z serwera. Otwierając pobraną paczkę zip zobaczymy tam dużą ilość xml o takiej samej  strukturze, które zawierają ulice dla Czytaj dalej Usługi Słownikowe GUGiK część 2 – przetwarzanie danych XML za pomocą Talend Open Studio Data Integration

Usługi słownikowe GUGiK część 1 – pobieranie danych XML na podstawie TERYT

We wcześniejszych wpisach o punktach adresowych pokazywałem jak pobrać przetworzone dane adresowe z rejestru PRG oraz przeprowadzałem ich analizę.

Dzisiaj w związku z tym, że niektóre rejestry odwołują się referencyjnie wprost do rejestru EMUiA pokażę jak za pomocą protokołu SOAP usługi słownikowej pobrać na podstawie numeru TERYT dane dotyczące województwa w zakresie ulic i punktów. Czytaj dalej Usługi słownikowe GUGiK część 1 – pobieranie danych XML na podstawie TERYT

Konwersja rastrów oraz format rasterlite czyli zapis rastrów w bazie SQLite za pomocą Qgis

1. Konwersja rastra w Qgis
Jednym z częstych pytań które padają na forach jest to jak zapisać raster w innym formacie w Qgis. W przypadku wektorów odruchem jest prawy przycisk na warstwie oraz wybranie polecenia zapisz jako i wybranie formatu. Nieco inaczej rzecz ma się w przypadku rastrów. Polecenie Raster > Konwersja > Konwertuj Raster pozwala na zapis rastra w innym formacie.

2. Format rasterlite w Qgis
W przypadku zapisu rastra np ortofotomapy do bazy SQLite rzecz jest również trywialnie prosta. Format bazy SQlite z zapisem rastra Czytaj dalej Konwersja rastrów oraz format rasterlite czyli zapis rastrów w bazie SQLite za pomocą Qgis