Automatizacija i optimizacija procesa kontrole prostornih podataka sa FME platformom

Saznajte kako je FME Platforma pomogla Visimind-u u procesu prikupljanja i obrade velikih količina mrežnih podataka i da na osnovu ovih podataka kreira visokokvalitetne proizvode za Poljske električne mreže.

O projektu

Tehnička infrastruktura Poljskih elektroenergetskih mreža (Polskie Sieci Elektroenergetyczne – PSE) sastoji se od hiljada elemenata i prostire se na stotine kilometara. Kompanija Visimind je morala da obezbedi visokokvalitetne podatke o PSE mreži i na osnovu toga kreira niz proizvoda vrhunskog kvaliteta – uključujući geoprostornu bazu podataka. Kako bi ispunili ciljeve projekta, kompanija Visimind je iskoristila prednosti koje nude Globema i FME – jedna od najpopularnijih platformi za prikupljanje i obradu geoprostornih podataka.

Sadržaj:

Industrija: GIS
Država: Poljska
Proizvod / Usluga: FME
Kategorija: Integracija podataka

Sa sedištem u Stokholmu, Švedska, Visimind je osnovan 1997. godine kao nastavak istraživanja sprovedenog na Kraljevskom tehnološkom univerzitetu u Stokholmu. Naučni rad se fokusirao na MMT (Mobile Mapping Technology), automatizovane metode merenja i sistem inventara infrastrukture zasnovan na GIS-u i numeričkoj analizi digitalnih slika. Grupacija pruža usluge i rešenja vezana za fotogrametriju, daljinsku detekciju i GIS, primenljiva u industrijama i oblastima kao što su: energetika i gas, putevi i železnica, nauke o životnoj sredini, urbana područja. Poslujući iz kancelarija u Švedskoj, Poljskoj i Italiji, sarađuje sa kompanijama i organizacijama širom Evrope.

Izazov

Projekat PSE

Visimind je 2020. godine sproveo projekat za PSE – Poljske Električne Mreže (Polskie Sieci Elektroenergetyczne) – strateško preduzeće Državnog trezora i Operater prenosnog sistema u Poljskoj. PSE je naručio veoma detaljan popis objekata u koridoru svojih dalekovoda i elektrana sa preciznim mapiranjem rasporeda elemenata njihove prenosne mreže, a posebno: kablova, nosećih konstrukcija, strujnih staza, reznih površina i elemenata vezanih za stanice.

Visimind je razrađivao podatke za hiljade kilometara PSE dalekovoda i više od stotinu elektrana. PSE je naručio fotogrametrijske letove iznad svojih dalekovoda i elektrana uz izradu šest osnovnih vazdušnih proizvoda:

  • Cloud tačaka sa više od 30 časova
  • Digitalni model terena visoke rezolucije (DTM)
  • Digitalni model površine visoke rezolucije (DSM)
  • RGB i CIR ortofotomapa (CIR – Infracrvena u boji, kreirana uz pomoć NIR – Near Infrared kamere, koja se može koristiti za detaljniju analizu vegetacije)
  • Slike nosećih konstrukcija iz vazduha
  • Baza geopodataka – jedan od najzanimljivijih i najtežih proizvoda za kreiranje – geobaza podataka koja uključuje inventar svih digitalizovanih objekata vidljivih na ortofotomapama – putevi, zgrade, dalekovodi, električna oprema itd.

U tako velikom projektu, koji pokriva velike površine zemlje, Visimind je morao da se suoči sa nekoliko izazova:

velika količina podataka koja je morala da se isporuči – više od 10TB
80000
pole slika
2300
ortofotomapa, DTM, DSM
16 000 000
objekata u Geodatabase
jedinstvena struktura isporuke podataka
asortiman i visok kvalitet prostornih proizvoda koji se isporučuju
ispravnost strukture geobaze i objekata, njihove: geometrije, topologije, atributa (takođe usklađenost imena i SKMS kodova – interni jedinstveni ID objekata PSE)

Rešenje

Zašto FME?

S obzirom na veličinu i značaj projekta koji je sproveden za PSE i kako bi se obezbedio visok kvalitet, kompletnost dostavljenih podataka kao i da bi se mogli verifikovati i proceniti putem eksternog alata, bilo je potrebno pronaći efikasno rešenje- ono koje bi se takođe moglo koristiti u budućnosti za implementaciju i validaciju drugih tekućih projekata.

Visimind je tražio različite eksterne softvere koji bi mogli da postignu gore navedene ciljeve, ali FME je bio jedini koji je ispunio mnoštvo zahteva, tj.

  • kompatibilnost sa više formata podataka
  • obrada prostornih i neprostornih podataka
  • validacija rasterskih, vektorskih i tabelarnih podataka
  • prikaz izveštaja u različitim formatima
  • skalabilnost i automatizacija
  • obrada podataka u paketnom režimu
  • lak za upotrebu od strane osoba bez znanja programiranja
  • stalna ažuriranja i poboljšanja kako bi se zadovoljile promenljive potrebe korisnika

Rukovodioci Visimind-a su već dugo zainteresovani za FME softver i čuli su mnogo pozitivnih povratnih informacija o platformi. Konačni inicijator implementacije ovog programa bio je korisnik PSE koji je koristio FME skripte za validaciju primljenih podataka.

Zašto Globema?

Visimind je odlučio da kontaktira jedinog zvaničnog distributera FME platforme u Poljskoj – Globemu. Saradnja je bila veoma uspešna i profesionalna. Globemini stručnjaci pomogli su da se izabere verzija softvera koja bi najbolje odgovarala Visimind-ovim trenutnim potrebama. Izabrano je FME Desktop ESRI rešenje.

Visimind je takođe odlučio da iskoristi i FME obuke i dodatne tehničke konsultacije sa FME specijalistom iz Globeme. Obuka je omogućila brzu implementaciju i pripremu zaposlenih Visimind-a za rad na FME-u. To je takođe bila veoma dobra osnova za dalje učenje o FME programu u svakodnevnoj praksi i za izradu skripti za naredne zadatke i projekte.

Dodatne tehničke konsultacije sa FME specijalistom iz Globeme pomogle su da se razumeju skripte koje je prethodno koristio Visimind-ov klijent – PSE. Način na koji su implementirani mogli su se prilagoditi strukturi rada koju koristi Visimind.

Prednosti

U projektu koji je sproveden za PSE, Visimind je koristio FME softver uglavnom za validaciju i kontrolu dostavljenih podataka. Korišćenjem FME skripti verifikovani su sledeći elementi:

  • Gustina cloud tačaka u definisanim oblastima
  • RGB / CIR ortofotomapa, digitalni model terena, kompletnost digitalnog modela površine
  • Kompletnost, kvalitet i imenovanje pole fotografija
  • Sadržaj baze geopodataka: kompatibilnost atributa objekta u sistemu Service Knowledge Management (SKMS) – na osnovu dokumentacije korisnika, kompatibilnosti topologije objekata, kompatibilnosti segmentacije objekata
  • Količina prikazanih podataka
Raster Coverage Validation Script (source: Visimind Ltd Sp. z o.o.)
Point Cloud density validation script (source: Visimind Ltd Sp. z o.o.)

Brži procesi

Kako bi se obezbedila struktura isporuke podataka dogovorena između Visimind-a i njihovog klijenta, sve skripte su pripremljene za rad u grupnom i paralelnom režimu. Dodatno, korišćena je veza sa internom Visimind bazom podataka u PostgreSQL-u.

Svi navedeni aspekti su omogućili potpunu automatizaciju i smanjenje radnog vremena procesa koji su se prethodno odvijali ručno ili poluautomatski.

Sada, zahvaljujući upotrebi FME skripti, procesi se odvijaju mnogo brže:

25
sati

Sprovođenje kontrole kompletnosti ortofotomape/DTM/DSM sada traje 25 umesto 800 sati

5
sati

Provera kompletnosti fotografija stubova sada traje 5 sati (ranije 150 h)

15
minuta

Provera kvantitativnih podataka traje 15 minuta (umesto 15 h)

Još jedna ogromna prednost FME-a bila je visoka tačnost skripti – nemoguće je postići kontrolom podataka koja se vrši ručno ili poluautomatski.

FME softver je takođe korišćen u projektu PSE za obradu i pripremu proizvoda prostornih podataka. Visimind je koristio FME za npr:

  • konvertovanje konačnih podataka
  • usaglašavanje podataka o klijentima
  • izdvajanje klasa iz cloud tačaka
  • izdvajanje podataka iz PostgreSQL baze podataka
  • priprema shape fajlova
  • unos podataka u bazu geopodataka

Planovi za budućnost

Visimind već dve godine koristi FME Desktop za automatizaciju obrade prostornih podataka i kontrolu kvaliteta i kompletnosti proizvoda.

Svesni ogromnog potencijala korišćenja i uštede koje proizilaze iz implementacije FME softvera, Visimind je odlučio da FME Desktop koristi šire u implementaciji internih procesa obrade i validacije prostornih podataka. Odlučeno je da se kupi sledeća FME Desktop licenca za korišćenje softvera na većem broju projekata koji su u toku.

Pored toga, zahvaljujući opšte dostupnim vebinarima i nakon konsultacija sa Globemom, Visimind je odlučio da kupi i pokrene FME Server. Visimind je sada, nakon Globeminog kursa o korišćenju FME servera, u procesu kreiranja i implementacije niza automatizovanih servisa, skripti i procesa koji imaju za cilj da optimizuju i uštede još više radnog vremena.

Zahvaljujući tehnološkom razvoju, posebno u oblastima kao što su geodezija, globalni navigacioni satelitski sistemi (GNSS), široko shvaćena elektronika i bespilotne letelice, dobijanje prostornih podataka postalo je lakše i češće. Prava umetnost više nije prikupljanje podataka, već njihova pravilna priprema, filtriranje i efikasna prerada u proizvode i usluge koji odgovaraju trenutnim potrebama tržišta koje se menja.
Zbog svoje fleksibilnosti, lakoće konfigurisanja, stalnog ažuriranja i razvoja, FME je idealan alat koji podržava i ubrzava svakodnevni rad u obradi i validaciji prostornih i neprostornih podataka.
Marek Szczepkowski, Project Manager
Visimind

Otkrijte više studija slučaja

Grupa MTP

Ušteda vremena i smanjenje troškova integracijom sistema i izvora podataka

Saznajte kako je Grupa MTP postigla efikasan protok informacija između različitih odeljenja i korisnika koristeći data platformu.

FME | Efikasna obrada podataka | Event Planning

Visoro Group

Kako da automatizujete manuelne zadatke s FME?

Saznajte kako je Visoro Group koristila FME platformu da automatizuje i ubrza obradu i integraciju podataka za 750 puta.

FME | Efikasna obrada podataka | AEC

Zakažite sastanak kako biste ostvarili slične rezultate u Vašoj kompaniji!