Mesterséges intelligencia alapú pontfelhő-szegmentálás és osztályozás az épített környezet modellezésében / AI-Based Segmentation and Classification of Point Clouds for Built Environment Modelling

Elsődleges fülek

Erre a témakiírásra nem lehet jelentkezni.
Nyilvántartási szám: 
26/01
Témavezető neve: 
Témavezető e-mail címe:
lovas.tamas@emk.bme.hu
A témavezető teljes publikációs listája az MTMT-ben:
A téma rövid leírása, a kidolgozandó feladat részletezése: 

A lézerszkennelési és fotogrammetriai technológiák alkalmazásával létrehozott pontfelhők az épített környezet rendkívül részletes, térbeli digitális reprezentációját biztosítják. Ezek az adatok egyre szélesebb körben jelennek meg az építőiparban, különösen meglévő építmények felmérésében, felújítási és átalakítási projektekben, digitális ikrek létrehozásában, valamint üzemeltetési és vagyonkezelési alkalmazásokban. A pontfelhők geometriai, intenzitás- és színinformációkat tartalmaznak, amelyek lehetőséget teremtenek az építmények elemeinek automatikus felismerésére és elemzésére.
A pontfelhők feldolgozásának egyik legnagyobb kihívása az adatok nagy mennyisége és rendezetlen jellege. A nyers pontfelhők manuális feldolgozása időigényes és költséges, különösen akkor, amikor az építmény különböző funkcionális elemeit – például tartószerkezeti elemeket, nyílászárókat vagy gépészeti rendszereket – kell azonosítani. A hagyományos szegmentálási és osztályozási módszerek, mint a geometriai szabályokon vagy küszöbértékeken alapuló eljárások, korlátozottan képesek kezelni az összetett építészeti geometriákat, az eltérő mérési minőséget és a zajos adatokat.
A mesterséges intelligencia, különösen a mélytanulási módszerek alkalmazása új lehetőségeket kínál a pontfelhők automatikus feldolgozásában. Az adatok térbeli mintázatainak tanulásával olyan modellek fejleszthetők, amelyek képesek az építmények kulcsobjektumainak automatikus szegmentálására és osztályozására. Ezek a módszerek ígéretes megoldást jelentenek az építőipari munkafolyamatok hatékonyságának növelésére, ugyanakkor a különböző mérési technológiákból származó adatok heterogenitása, az annotált tanítóadatok hiánya és a modellek általánosíthatósága továbbra is nyitott kutatási kérdéseket jelentenek.
A kutatási téma célja mesterséges intelligencia alapú módszerek és feldolgozási munkafolyamatok kidolgozása, amelyek lehetővé teszik pontfelhők automatikus szegmentálását és osztályozását. A kutatás kiterjed a különböző mélytanulási architektúrák vizsgálatára és fejlesztésére, valamint nyílt forráskódú pontfelhő-adatbázisok és saját mérések felhasználására a modellek tanításához. Az előfeldolgozási lépések – például zajszűrés, normalizálás és adatcsökkentés – kulcsszerepet játszanak a robusztus eredmények elérésében.
A fejlesztett módszerek validálása során a mesterséges intelligencia alapú megoldásokat manuális annotálási, szegmentálási és osztályozási eljárásokkal kell összevetni . Az összehasonlító elemzés célja a pontosság, a megbízhatóság és a számítási hatékonyság értékelése különböző építőipari alkalmazási területeken. A kutatás eredményei hozzájárulhatnak automatizált scan-to-BIM, digitális iker és meglévő épület-modellezési munkafolyamatok fejlesztéséhez.
A kutatás elvégzéséhez szükségesek informatikai alapismeretek, programozási tapasztalat, valamint a mesterséges intelligencia és gépi tanulás alapjainak ismerete. Előnyt jelent a pontfelhő-feldolgozás, a számítógépes geometria és a mélytanulási keretrendszerek – például TensorFlow vagy PyTorch – ismerete. A téma erősen alkalmazásorientált, és közvetlenül támogatja az építőipar digitális átalakulását.

***

Point clouds generated through laser scanning and photogrammetric technologies provide a highly detailed three-dimensional digital representation of the built environment. These datasets are increasingly used in the construction industry, particularly in the surveying of existing structures, renovation and refurbishment projects, the creation of digital twins, and facility and asset management applications. Point clouds contain geometric, intensity, and color information, enabling the automatic recognition and analysis of building components.

One of the main challenges in point cloud processing is the large volume and unstructured nature of the data. Manual processing of raw point clouds is time-consuming and costly, especially when identifying different functional elements of a building, such as structural components, openings, or mechanical systems. Traditional segmentation and classification methods based on geometric rules or thresholding techniques are limited in handling complex architectural geometries, varying data quality, and noisy measurements.

Artificial intelligence, particularly deep learning approaches, offers new opportunities for automated point cloud processing. By learning spatial patterns within the data, models can be developed that automatically segment and classify key objects of buildings. These methods represent promising solutions for improving efficiency in construction workflows. However, challenges remain regarding the heterogeneity of data acquired from different measurement technologies, the scarcity of annotated training datasets, and the generalizability of trained models.

The objective of this research topic is to develop AI-based methods and processing workflows that enable the automatic segmentation and classification of point clouds. The research includes the investigation and development of various deep learning architectures, as well as the use of open-source point cloud datasets and proprietary measurements for model training. Pre-processing steps—such as noise filtering, normalization, and data reduction—play a crucial role in achieving robust and reliable results.

Validation of the developed methods will involve comparison between AI-based solutions and manual annotation, segmentation, and classification procedures. The comparative analysis aims to evaluate accuracy, reliability, and computational efficiency across different construction-related application domains. The research outcomes may contribute to the advancement of automated scan-to-BIM processes, digital twin generation, and existing building modelling workflows.

The successful completion of this research requires a solid foundation in computer science, programming experience, and knowledge of artificial intelligence and machine learning fundamentals. Familiarity with point cloud processing, computational geometry, and deep learning frameworks such as TensorFlow or PyTorch is advantageous. The topic is strongly application-oriented and directly supports the digital transformation of the construction industry.

A téma meghatározó irodalma: 

1. L. Guo et al., "Extraction of Dense Urban Buildings From Photogrammetric and LiDAR Point Clouds," in IEEE Access, vol. 9, pp. 111823-111832, 2021, doi: 10.1109/ACCESS.2021.3102632
2. Oláh, S., Kozma, K., Barsi, Árpád “Enhancing 3D Precision: Point Cloud Upsampling Methods — A Review”, Periodica Polytechnica Civil Engineering, 69(3), pp. 689–702, 2025. https://doi.org/10.3311/PPci.38617
3. Chithra, P.L., Lakshmi Bala, S. (2025). Physics-Driven Neural Network for Geometrical Compression of LiDAR 3D Point Cloud Data. In: Swaroop, A., Virdee, B., Correia, S.D., Polkowski, Z. (eds) Proceedings of Data Analytics and Management. ICDAM 2024. Lecture Notes in Networks and Systems, vol 1302. Springer, Singapore. https://doi.org/10.1007/978-981-96-3381-4_14
4. Murtiyoso, A., Lhenry, C., Landes, T., Grussenmeyer, P., Alby, E. (2021). SEMANTIC SEGMENTATION FOR BUILDING FAÇADE 3D POINT CLOUDS USING TRANSFER LEARNING FROM ORTHOIMAGES, ISPRS-Archives. XLIII-B2-2021, doi: 10.5194/isprs-archives-XLIII-B2-2021-201-2021
5. Sohee Kim, Ayoung Woo (2022) Streetscape and business survival: Examining the impact of walkable environments on the survival of restaurant businesses in commercial areas based on street view images, Journal of Transport Geography, Volume 105, 103480, ISSN 0966-6923, https://doi.org/10.1016/j.jtrangeo.2022.103480.

A téma hazai és nemzetközi folyóiratai: 

1. Journal of Transport Geography, IF: 5.7, 2024 D1
2. IEEE Access, IF: 3.6, 2024 Q1
3. Periodica Polytechnica Civil EngineeringIF: 1.4, 2024 Q2
4. Lecture Notes in Networks and Systems (Springer Book Series) 2024 Q4
5. ISPRS International Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences

A témavezető utóbbi tíz évben megjelent 5 legfontosabb publikációja: 

1. Somogyi, Árpád József ; Baranyai, Dániel ; Dowajy, Mohammad ; Lovas, Tamás ; Szalay, Zsolt ; Tettamanti, Tamás: Artificial Intelligence Based High Definition Map Generation From Mobile Mapping Data, IEEE ACCESS 13 pp. 121838-121848. , 11 p. (2025)
2. Dowajy, Mohammad; Somogyi, József Árpád ; Barsi, Árpád ; Lovas, Tamás: An Automatic Road Surface Segmentation in Non-Urban Environments: A 3D Point Cloud Approach with Grid Structure and Shallow Neural Networks, IEEE ACCESS 12 pp. 33035-33044. , 10 p. (2024)
3. Lovas, T ; Ormándi, T ✉ ; Somogyi, Á J ; Baranyai, D ; Tihanyi, V ; Tettamanti, T: OpenCRG models from different data sources to support vehicle simulations, IEEE ACCESS 10 pp. 42690-42698. , 9 p. (2022)
4. Csiszár, Csaba ; Csonka, Bálint ; Földes, Dávid ; Wirth, Ervin ; Lovas, Tamás: Location optimisation method for fast-charging stations along national roads, JOURNAL OF TRANSPORT GEOGRAPHY 88 Paper: 102833 , 11 p. (2020)
5. Csiszár, Csaba ; Csonka, Bálint ; Földes, Dávid ; Wirth, Ervin ; Lovas, Tamás: Urban public charging station locating method for electric vehicles based on land use approach, JOURNAL OF TRANSPORT GEOGRAPHY 74 pp. 173-180. , 8 p. (2019)

A témavezető fenti folyóiratokban megjelent 5 közleménye: 

1. Csiszár, Csaba ; Csonka, Bálint ; Földes, Dávid ; Wirth, Ervin ; Lovas, Tamás: Location optimisation method for fast-charging stations along national roads, JOURNAL OF TRANSPORT GEOGRAPHY 88 Paper: 102833 , 11 p. (2020)
2. Aftab, Ifra; Kapitany, Kristof ; Lovas, Tamas: Automating Scan to BIM Operations Using Grasshopper, PERIODICA POLYTECHNICA-CIVIL ENGINEERING 67 : 4 pp. 1187-1192. , 6 p. (2023)
3. Somogyi, Árpád József ; Baranyai, Dániel ; Dowajy, Mohammad ; Lovas, Tamás ; Szalay, Zsolt ; Tettamanti, Tamás: Artificial Intelligence Based High Definition Map Generation From Mobile Mapping Data, IEEE ACCESS 13 pp. 121838-121848. , 11 p. (2025)
4. Dowajy, Mohammad; Lovas, Tamás ; Barsi, Árpád: Automatic Segmentation of Road Surface Points Using Shallow Neural Network from 3D Colored Point Cloud Data, LECTURE NOTES IN NETWORKS AND SYSTEMS 1345 pp. 115-127. , 13 p. (2025)
5. Dowajy, Mohammad ; Fawzy, Mohamed; Barsi, Arpad ; Lovas, Tamás: Automatic Non-Urban Road Surface Point Extraction Based on Geometric Features Using Neural Networks and Raster Structure Approach, INTERNATIONAL ARCHIVES OF THE PHOTOGRAMMETRY REMOTE SENSING AND SPATIAL INFORMATION SCIENCES XLVIII-G-2025 pp. 389-394. , 6 p. (2025)

A témavezető eddigi doktoranduszai

Aftab Ifra (2021//)
Somogyi József Árpád (2014/2017/2017)
Koppányi Zoltán (2012/2015/2015)
Rehány Nikolett (2013/2017/)
Berényi Attila (2008/2011/2011)
Dowajy Mohammad (2021/2025/)
Státusz: 
beküldött