Asztalos Áron DataScientis

Hasonló dokumentumok
FORD KA KA_202054_V5_2013_Cover.indd /06/ :59

PONTOK TÁVOLSÁGÁNAK. MEGHATÁROZÁSA MEGHATÁROZOTT (ÚT)VONAL MENTÉN Network Analyst. Balázs Boglárka

Térinformatikai programozás Pythonban

DXF állományok megnyitása QGIS programmal (1.7 verzió) Összeállította: Ács Eszter, dr. Siki Zoltán

QGIS. Tematikus szemi-webinárium Térinformatika. Móricz Norbert. Nemzeti Agrárkutatási és Innovációs Központ Erdészeti Tudományos Intézet (NAIK ERTI)

2. Készítsen awk szkriptet, amely kiírja az aktuális könyvtár összes alkönyvtárának nevét, amely februári keltezésű (bármely év).

Piaci i Érték számítás

Big Data az adattárházban

Országos Területrendezési Terv térképi mel ékleteinek WMS szolgáltatással történő elérése, MapInfo program alkalmazásával Útmutató 2010.

Egyéni projektek a felnőttkori gyógypedagógiai fejlesztésben. Mentálisan akadálymentes közlekedés

Agfiniti - A helyspecifikus növénytermesztés felhő alapú támogatása

Országos Területrendezési Terv térképi mellékleteinek WMS szolgáltatással történő elérése, MapInfo program alkalmazásával

NULLADIK MATEMATIKA ZÁRTHELYI

IBM SPSS Modeler 18.2 Újdonságok

Gyakorló feladatok adatbányászati technikák tantárgyhoz

1. Vegyél vissza a flancból!


FORD FOCUS Focus_346_ _V4_cover.indd /12/ :34

META. a földügyi folyamatok tükrében. Zalaba Piroska főtanácsos Földművelésügyi és Vidékfejlesztési Minisztérium Földügyi és Térinformatikai Főosztály

Beépítési százalék számítás QGIS 1.8 verzió telkek epuletek telkek Vektor/Geoprocessing eszközök/metszés

Esri Arcpad Utó- feldolgozás. Oktatási anyag - utókorrekció

Country Movers. Cesium alapú planetáris kartográfiai szemléltető eszköz. 5. Nyílt forráskódú térinformatikai munkaértekezlet

Blaha Lujza tér M / Új köztemető (Kozma utca)

TERVEZÉSTÁMOGATÁS SORÁN LETÖLTÖTT FÁJLOK MEGNYITÁSA

Téradatbázisok használata QGIS-ből A DB kezelő modul 2.2 verzió

1. kép: Raszterek betöltése

Hűvösvölgy / Móricz Zsigmond körtér M

KLASZTERANALÍZIS OSZTÁLYOZÁS

MATEMATIKA a 8. évfolyamosok számára. Mat2 JAVÍTÁSI-ÉRTÉKELÉSI ÚTMUTATÓ

QGIS gyakorló. Cím: Pufferzóna előállítása (Buffering) Minta fájl letöltése:

A szigetközi MODFLOW modellezés verifikálása, paraméter optimalizálás izotóp-adatokkal

IoT2 ThingSpeak adatgyűjtés

Big Map Menü. Esettanulmány a McDonald's Magyarországi Étteremhálózat Kft. Geomarketing megoldásáról

Fájlszervezés. Adatbázisok tervezése, megvalósítása és menedzselése

Alter Róbert Báró Csaba Sensor Technologies Kft

FORD B-MAX BMAX_V3_2012_Cvr_Main.indd /06/ :42

Bécsi út / Vörösvári út / Kelenföld vasútállomás M

Data Vault adatmodellezés.

Külső adatok (GTFS, UIC, boltok) félautomatikus importálása az OpenStreetMap-be

Internetes térkép publikálási technikák, szabványok, trendek, nyílt forráskódú megoldások

QGIS Gyakorló. 1. kép. A vektor réteg (grassland.shp).

Területi statisztikai elemzések

Feel the difference. FordFocus. Feel the difference

INFORMATIKA ÁGAZATI ALKALMAZÁSAI. Az Agrármérnöki MSc szak tananyagfejlesztése TÁMOP /1/A

Perifériák hozzáadása a rendszerhez

Az MTA Cloud a tudományos alkalmazások támogatására. Kacsuk Péter MTA SZTAKI

A számítástudomány alapjai. Katona Gyula Y. Számítástudományi és Információelméleti Tanszék Budapesti Műszaki és Gazdaságtudományi Egyetem

108E autóbusz menetrend és vonal térkép

Óraterv Iskolába járás Feladatlap

Matematika B4 VIII. gyakorlat megoldása

Új biomassza erőmű - és kiszolgáló ültetvények - helyének meghatározása térinformatikai módszerekkel az Inno Energy KIC keretében

Az utvonalterv.hu magyarországi útvonaltervező weboldal megújítása (új technikák, funkciók)

Nemzeti LEADER Kézikönyv LEADER HELYI FEJLESZTÉSI STRATÉGIA FELHASZNÁLÓI KÉZIKÖNYV szeptember

Nemzeti Onkológiai Kutatás-Fejlesztési Konzorcium 1/48/ Részjelentés: November december 31.

Mexikói út M / Újpalota Erdőkerülő utca

Felsőoktatási Erasmus koordinátorok (KA103) bevezető képzése

Thomán István utca / Bosnyák tér

176E autóbusz menetrend és vonal térkép. Örs vezér tere M+H / Rákoscsaba-Újtelep Tóalmás utca

GDi Esri Magyarország Felhasználói Konferencia Timár Gábor: Konkurens adatfeldolgozás ArcGIS rendszerben

Hűvösvölgy / Városház tér

Feel the difference. FordGalaxy

ÜZLETI INTELLIGENCIA ÉS VIZUALITÁS 31. Vándorgyűlés Szekszárd 2017

FELHASZNÁLÓI KÉZIKÖNYV

A logisztikai teljesítményelvárások kijelölése - Vevıszegmentálás ÚTMUTATÓ 1

Matematikai alapok és valószínőségszámítás. Középértékek és szóródási mutatók

Kulcsár Attila. GisOpen Térbeli adatbázisok gyakorlati szemmel GeoCalc GIS. GisOpen 2009 Konferencia

17. A 2-3 fák és B-fák. 2-3 fák

DigiTerra fejlesztési eredmények

Bodó / Csató / Gaskó / Sulyok / Simon október 9. Matematika és Informatika Tanszék Babeş Bolyai Tudományegyetem, Kolozsvár

SQL ALAPOK. Bevezetés A MYSQL szintaxisa Táblák, adatok kezelésének alapjai

GENERÁCIÓS ADATBÁZISOK A BIG DATA KÜLÖNBÖZŐ TERÜLETEIN

Segítség az outputok értelmezéséhez

FÖLDMÉRÉS ISMERETEK EMELT SZINTŰ ÍRÁSBELI VIZSGA JAVÍTÁSI-ÉRTÉKELÉSI ÚTMUTATÓ A MINTAFELADATOKHOZ

DAT adatcserefájl AutoCAD MAP DWG mapobject konvertáló program dokumentáció

XIV. ELŐZD MEG A FOGASKEREKŰT!

NEMZETI FEJLESZTÉSI POTENCIÁL TÉRKÉP

Helymeghatározás. Hol vagyok a világban?

Nagykonyhai elszívóernyő árlista

Határon átnyúló elérhetőségi modell kifejlesztése és határon átnyúló adatbázis kiépítése. ERRAM cross border. A projekt támogatói:

Blaha Lujza tér M / Rákospalota MÁV-telep

Surveylab Ltd. Egy test, több lélek (ike300 GPS vevő)

Az építésügy-településügy informatikai rendszerei és fejlesztései

A 251-es járat útvonal-hosszabbítása és a 150-es járat gyorsítása

III. KÖTET: MŰSZAKI-SZAKMAI AJÁNLAT

Térinformatikai adatbázisok

ELŐTERJESZTÉS január 31-i rendes ülésére

Code-a-thon. intenzív brainstorming és prototípus gyártás. Birtha Ákos CTO, Attrecto Zrt.

Alapok GPS előzmnyei Navstar How the GPS locate the position Tények Q/A GPS. Varsányi Péter

Algoritmuselmélet. 2-3 fák. Katona Gyula Y. Számítástudományi és Információelméleti Tanszék Budapesti Műszaki és Gazdaságtudományi Egyetem. 8.

Térinformatikai módszer tartós pollenterhelés településszintű meghatározására

Takács Gábor mérnök informatikus, okl. mérnöktanár

Környezeti informatika

A MePAR-hoz kapcsolódó DigiTerra térinformatikai szoftver fejlesztések

7. gyakorlat Megyei térképek készítése

AZ EURÓPAI KÖZÖSSÉGEK BIZOTTSÁGA. Javaslat: AZ EURÓPAI PARLAMENT ÉS A TANÁCS HATÁROZATA

Adatbányászati szemelvények MapReduce környezetben

Többfelhasználós és internetes térkép kezelés, megjelenítés

Adatbányászati technikák (VISZM185) 2015 tavasz

Kelenföld vasútállomás M / Újpalota Nyírpalota út

Az Országos Vízjelző Szolgálat felépítése, működése

Átírás:

https://github.com/asztalosaron/kmeans_gravity_model Asztalos Áron DataScientis aron.asztalos@otpbank.hu

+ Big Data környezet

+ - Gyors (egyszerűen párhuzamosítható) BigData környezet támogatása Stabil (már ha jó a kód) Automatizálható Beágyazható Határ a csillagos ég MachineLearning & DeepLearning Az adatok felfedezése, böngészése nem kényelmes Kevesen értenek hozzá Pythonos térinformatikai közösség létszáma kicsi (https://gis.stackexchange.com) Ha elrontunk valamit (intersect/within) nem biztos hogy kiderül, lehet nagyot hibázni!

Pandas Numpy Geopandas Shapely Scikit Learn Google & OSM api Read/Write shp fájl Attribútum Tábla műveletek (szűrés, aggregálás, statisztikák, stb) Támogatja a Coordinate References System váltást (geo_dataframe.to_crs({ init : epsg:237 00 })) Intersection, Union, Symetrical Difference, Difference Attribute Joins/Spatial Joins (instabil) Távolság Pont és Polyline között Stb: http://geopandas.org/ Plottolás Folium (leaflet map)

Code on DataBricks Szeretnénk bővíteni Budapesten az ATM-ek számát, erre építünk térinformatikai módszertant

Hol vannak a tipikusan készpénzzel fizetős helyek? (Kocsmák, Pub-ok, Kávézók)

Kétféleképpen közelítjük meg a problémát Újraosztjuk az OTP-s ATMeket, tehát mindegyiket fölszedjük és elhelyezzük máshol, úgy, hogy bővítjük az elemszám 10%-ával Az OTP-s ATM-ek darabszámának a 10%-ával megegyező új ATM-eket akarunk kihelyezni, a régiek maradnak a helyükön Minden rétegek klaszterezzük K-Középpel, ahol a klaszterek száma az OTP-s ATM-ek 110%-ka. Így kapunk 3 db klaszter középpontokból álló rétegeket Pub klaszter középpontok Kávézó klaszter középpontok Pékség klaszter középpontok Ezt a három réteget összevonjuk, képezve egy nagyot, amit újra klaszterezünk, ahol a klaszterek száma az OTP-s ATM-ek 110%-ka. (gyakorlatban 10-20 rétegből gyártunk egyet )

Kétféleképpen közelítjük meg a problémát Újraosztjuk az OTP-s ATMeket, tehát mindegyiket fölszedjük és elhelyezzük máshol, úgy, hogy bővítjük az elemszám 10%-ával Az OTP-s ATM-ek darabszámának a 10%-ával megegyező új ATM-eket akarunk kihelyezni, a régiek maradnak a helyükön Ezek az új középpontok, melyek nem feltétlenül értelmes pontok, mivel légvonalban számol távolságot. Mivel ezek térbeli távolságon alapuló klaszter középpontok, így előfordulhat, hogy a Dunába esik valamelyik. Szeretnénk értelmes címre húzni a középpontokat, amiknek a célpontjai tömegközlekedési megállók lesznek súlyozva attól függően, hogy vonat, metró, busz. Erre egy potenciál modellt építünk, ahol a megállók a bolygók, a kközép pontok a gravitációs térben sodródó tárgyak, melyik bolygóba csapódik be a tárgy, ha figyelembe vesszük az összesnek a potenciálterét? A becsapódást elszenvedő bolygó (tömegközlekedési megálló) lesz az új ATM-nek az ajánlott helyszín.

Kétféleképpen közelítjük meg a problémát Újraosztjuk az OTP-s ATMeket, tehát mindegyiket fölszedjük és elhelyezzük máshol, úgy, hogy bővítjük az elemszám 10%-ával Az OTP-s ATM-ek darabszámának a 10%-ával megegyező új ATM-eket akarunk kihelyezni, a régiek maradnak a helyükön Gravitációs potenciáltér

Kétféleképpen közelítjük meg a problémát Újraosztjuk az OTP-s ATMeket, tehát mindegyiket fölszedjük és elhelyezzük máshol, úgy, hogy bővítjük az elemszám 10%-ával Az OTP-s ATM-ek darabszámának a 10%-ával megegyező új ATM-eket akarunk kihelyezni, a régiek maradnak a helyükön Gravitációs potenciáltér

Kétféleképpen közelítjük meg a problémát Újraosztjuk az OTP-s ATMeket, tehát mindegyiket fölszedjük és elhelyezzük máshol, úgy, hogy bővítjük az elemszám 10%-ával Az OTP-s ATM-ek darabszámának a 10%-ával megegyező új ATM-eket akarunk kihelyezni, a régiek maradnak a helyükön Ugyan ezt a logikát követjük, de itt az OTP-s ATM-ek 10%nak megfelelő pontot helyezünk le. Annyi kikötés rakunk bele, hogy a gravitációs potenciáltéren csak azok a tömegközlekedési megállok játszanak, amik legalább 1 km-re vannak bármelyik OTP-s ATM-től.

https://github.com/asztalosaron/kmeans_gravity_model Asztalos Áron DataScientis aron.asztalos@otpbank.hu