liu.seSearch for publications in DiVA
Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • oxford
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
Predicting Air Traffic Controller Workload from Eye-Tracking Data with Machine Learning
Linköping University, Department of Science and Technology, Communications and Transport Systems. Linköping University, Faculty of Science & Engineering.ORCID iD: 0000-0002-7804-9328
Air Navigation Services of Sweden (LFV), Research & Innovation, Norrköping.ORCID iD: 0000-0002-3789-9094
Air Navigation Services of Sweden (LFV), Research & Innovation, Norrköping.ORCID iD: 0000-0003-3459-1809
Linköping University, Department of Science and Technology, Communications and Transport Systems. Linköping University, Faculty of Science & Engineering.ORCID iD: 0000-0002-9869-5992
Show others and affiliations
2025 (English)In: Journal of Open Aviation Science, Vol. 3, no 1Article in journal (Refereed) Published
Abstract [en]

In this paper, we examine the feasibility of assessing air traffic controller (ATCO) workload using non-intrusive eye-tracking measures and machine learning algorithms. A total of N = 18 ATCOs participated in simulator runs with tasks inducing three task-load levels: light, moderate, and heavy. Task load was modulated through traffic load and the associated increase in complexity. We collected eye-tracking data (statistical summaries of which serve as features) and obtained subjective workload assessments using self-reported Cooper-Harper Scale scores, which act as label variables. We evaluate the performance of eight classical machine learning models, with the k-nearest neighbors and support vector classifier models emerging as the most promising. To optimize performance, we apply feature selection techniques, focusing on these best-performing models. Feature selection via recursive feature elimination (RFE) based on permutation importance reduces the original 42 features while maintaining or improving performance. The outcomes yield promising results in workload-level estimation, achieving an F1 score of 0.870 for low/high workload prediction and an F1 score of 0.788 for predicting three different levels of workload. The RFE process identifies optimal feature sets ranging from 7 to 13 features for different tasks, with minimal impact on performance. A "knee point" is observed, representing the optimal balance between model performance and dimensionality. Adding more features beyond this point contributes little to performance improvement while increasing model complexity. These findings indicate that even a few features can be sufficient for accurate workload prediction. We show that head-movement features provide valuable information. Comparable performance is achieved using only ocular features, but this requires more features. Asymmetry in left and right eye metrics holds workload-related information but transforming them into averages and differences reduces performance. Retaining the original features separately is the most effective approach, incorporating their absolute differences may provide slight benefits in certain models.

Place, publisher, year, edition, pages
2025. Vol. 3, no 1
Keywords [en]
ATCO, Workload, Eye tracking, Machine learning
National Category
Transport Systems and Logistics
Identifiers
URN: urn:nbn:se:liu:diva-220991DOI: 10.59490/joas.2025.8034OAI: oai:DiVA.org:liu-220991DiVA, id: diva2:2035451
Conference
2026/02/04
Note

Funding agency: This study was supported in the scope of project On WorkLoad Measures (OWL), funded by the Swedish Transport Administration (TRV 2022/33636r).

Available from: 2026-02-04 Created: 2026-02-04 Last updated: 2026-02-23Bibliographically approved
In thesis
1. Enhancing Air Traffic Management: Weather and Controller Workload Challenges
Open this publication in new window or tab >>Enhancing Air Traffic Management: Weather and Controller Workload Challenges
2025 (English)Doctoral thesis, comprehensive summary (Other academic)
Abstract [en]

Air Traffic Management (ATM) faces significant challenges in ensuring efficiency, safety, and sustainability. Among these, weather conditions and Air Traffic Controller (ATCO) workload play crucial roles in overall system performance. Adverse weather frequently disrupts operations, leading to inefficient flight trajectories, increased fuel consumption, and environmental impact. It also elevates ATCO workload, thereby complicating ATCOs’ ability to maintain safe and efficient air traffic flow. This thesis explores data-driven and analytical approaches to address these challenges, focusing on the impact of weather on flight efficiency, airspace capacity, and ATCO scheduling in remote tower centers. Additionally, it examines ATCO workload prediction using behavioral and physiological data. The study covers applications in airspace capacity management, staff scheduling, and ATCO workload assessment.

The thesis examines historical flight and weather data from Stockholm Arlanda and Gothenburg Landvetter airports over a two-year period (2019–2020), revealing persistent inefficiencies in arrival operations despite the overall reduction in traffic during the COVID-19 pandemic. It presents a methodology grounded in statistical analysis to identify the key factors influencing arrival performance, with particular emphasis on the impact of adverse weather conditions and traffic intensity. The proposed approach systematically determines the most influential variables affecting arrival performance in both the horizontal and vertical flight dimensions.

Adverse weather conditions, such as convective weather, can lead to restrictions on aircraft movements, reduce available routes, and necessitate adjustments in ATM strategies. As a result, understanding and predicting weather-related impacts on airspace capacity is essential for optimizing air traffic flow and minimizing delays. In this thesis, we develop a methodology, based on the continuous maxflow/mincut theory, to estimate reductions in Air Traffic Control (ATC) sector capacity due to predicted convective weather activity. The uncertainty in meteorological forecasts is quantified using Ensemble Weather Forecasting. We demonstrate the application of this methodology for assessing congestion in ATC sectors, using a realistic sector and a full sector configuration as examples. Additionally, we introduce a probabilistic framework for presenting congestion status, aimed at supporting decision-making processes at the Flow Management Position.

The thesis presents probabilistic models that incorporate the impact of adverse weather conditions into a Mixed-Integer Linear Programming framework for ATCO shift scheduling in remote and conventional towers. Building on previous project developments, these models specifically address the influence of weather on ATCO operations in remote towers. Probabilistic weather products are used to generate ensembles of staffing solutions, enabling the derivation of probability distributions for the required number of ATCOs. The modeling approach leverages recently developed techniques to tackle challenges associated with weather uncertainty. The proposed solutions are validated using historical flight and weather data from five Swedish airports designated for future remote operation.

The final part of this thesis focuses on developing unobtrusive methods for predicting ATCO workload by exploring the feasibility of non-intrusive data collection techniques combined with machine learning algorithms. Eye-tracking data, previously identified as a promising indicator of ATCO workload, were collected from controllers in simulated environments and used as predictive features. Subjective workload assessments, based on self-reported Cooper-Harper scale ratings, serve as label variables. Multiple machine learning models are evaluated for workload prediction, and feature selection techniques are applied to identify a minimal yet effective set of eye-tracking features. This approach provides a seamless, non-intrusive means of continuously assessing workload, making it a valuable tool for both research and operational applications in ATC environments.

By addressing critical challenges in ATM, this thesis contributes to a safer, more efficient, and environmentally sustainable air transport system. The findings of this thesis have significant implications for the future of ATM, particularly in an era of increasing air traffic demand and evolving weather challenges. The integration of data-driven techniques, optimization, and probabilistic modeling offers a powerful framework for improving decision-making in ATM. The methodologies proposed in this thesis can serve as a foundation for future research and industry applications, enabling continuous improvements in ATM performance and resilience against external disruptions.

Abstract [sv]

Lufttrafikledning (ATM) står inför betydande utmaningar när det gäl-ler att säkerställa effektivitet, säkerhet och hållbarhet. Väderförhål-landen och flygtrafikledarnas (ATCO) arbetsbelastning spelar en avgörande roll för det övergripande systemets prestanda. Ogynnsamma väderförhållanden stör ofta verksamheten, vilket leder till ineffektiva flygvägar, ökad bränsleförbrukning och miljöpåverkan. Det medför även en ökad arbetsbelastning för ATCO, vilket försvårar deras förmåga att upprätthålla ett säkert och effektivt trafikflöde. Denna avhandling undersöker datadrivna och analytiska metoder för att han-tera dessa utmaningar, med fokus på vädrets inverkan på flygeffektivitet, luftrumskapacitet och ATCO-planering i fjärrstyrda torncentraler. Dessutom analyseras ATCO-arbetsbelastningsprognoser baserade på beteendemässiga och fysiologiska data. Studien omfattar tillämpningar inom luftrumskapacitetshantering, personalplanering och bedömning av ATCO:s arbetsbelastning.

Studien analyserar historiska flyg- och väderdata från Stockholm Arlanda och Göteborg Landvetter flygplatser under en tvåårsperiod (2019–2020) och belyser kvarstående ineffektivitet trots minskad trafik under COVID-19-pandemin. Denna avhandling presenterar en metodik baserad på statistisk analys för att identifiera de viktigaste faktorerna som påverkar olika aspekter av ankomstprestanda, med särskilt fokus på effekterna av ogynnsamt väder och trafikintensitet. Den föreslagna metoden identifierar specifikt de mest betydande faktorerna som påverkar ankomstprestanda i både horisontella och vertikala dimensioner.

Ogynnsamma väderförhållanden, såsom konvektivt väder, kan leda till restriktioner för flygrörelser, minska tillgängliga rutter och kräva justeringar av ATM-strategier. Därför är det avgörande att förstå och förutsäga väderrelaterade effekter på luftrumskapaciteten för att optimera lufttrafikflödet och minimera förseningar. I denna avhandling utvecklar vi en metodik, baserad på den kontinuerliga maxflow/mincut-teorin, för att uppskatta minskningar i flygtrafikled-ningens (ATC) sektorkapacitet till följd av förutspådd konvektiv väderaktivitet. Osäkerheten i meteorologiska prognoser kvantifieras med hjälp av ensembleväderprognoser. Vi demonstrerar tillämpningen av denna metodik för att bedöma trängsel i ATC-sektorer, med exempel på en realistisk sektor och en fullständig sektorkonfiguration. Vi introducerar dessutom ett probabilistiskt ramverk för att presentera trängselstatus, med syfte att stödja beslutsprocesser vid flödeshanteringspositionen.

Studien presenterar probabilistiska modeller som integrerar effekten av ogynnsamma väderförhållanden i ett blandat heltalslinjärt optimeringsramverk för ATCO-skift-schemaläggning i både fjärrstyrda och konventionella torn. Dessa modeller hanterar specifikt vädrets inverkan på ATCO:s arbete i fjärrstyrda torn genom att bygga vidare på tidigare projektutvecklingar. Probabilistiska väderprodukter används för att generera ensemblelösningar för bemanning, vilket möjliggör härledning av sannolikhetsfördelningar för det nödvändiga antalet ATCO:er. Denna modellansats utnyttjar nyligen utvecklade tekniker för att hantera utmaningar kopplade till väderosäkerhet. De föreslagna lösningarna valideras med hjälp av historiska flyg- och väderdata från fem svenska flygplatser som är utpekade för framtida fjärrstyrd drift.

Den sista delen av denna avhandling fokuserar på att utveckla diskreta metoder för att förutsäga ATCO:s arbetsbelastning genom att undersöka möjligheterna med icke-intrusiva datainsamlingstekniker i kombination med maskininlärningsalgoritmer. Ögonrörelsedata, som tidigare har identifierats som en lovande indikator för ATCO:s arbetsbelastning, samlades in från flygtrafikledare i simulerade miljöer och användes som prediktiva variabler. Subjektiva arbetsbelastnings-bedömningar, baserade på självskattade Cooper-Harper-skattningar, användes som målvariabler. Flera maskininlärningsmodeller utvärderades för att förutsäga arbetsbelastning, och tekniker för variabelurval tillämpades för att identifiera en minimal men effektiv uppsättning av ögonrörelsevariabler. Denna metod möjliggör en sömlös och icke-intrusiv kontinuerlig bedömning av arbetsbelastning, vilket gör den till ett värdefullt verktyg både för forskning och operativa tillämpningar inom flygtrafikledning.

Denna avhandling bidrar till ett säkrare, mer effektivt och miljömässigt hållbart lufttransportsystem genom att hantera kritiska utmaningar inom ATM. Resultaten har stor betydelse för framtidens ATM, särskilt i en tid med ökande efterfrågan på lufttrafik och föränderliga väderutmaningar. Integrationen av datadrivna tekniker, optimering och probabilistisk modellering erbjuder ett kraftfullt ramverk för att förbättra beslutsfattandet inom ATM. De metoder som föreslås i denna avhandling kan fungera som en grund för framtida forskning och industriella tillämpningar, vilket möjliggör kontinuerliga förbättringar av ATM:s prestanda och motståndskraft mot externa störningar.

Place, publisher, year, edition, pages
Linköping: Linköping University Electronic Press, 2025. p. 65
Series
Linköping Studies in Science and Technology. Dissertations, ISSN 0345-7524 ; 2451
National Category
Transport Systems and Logistics
Identifiers
urn:nbn:se:liu:diva-213322 (URN)10.3384/9789181181050 (DOI)9789181181043 (ISBN)9789181181050 (ISBN)
Public defence
2025-05-30, K3, Kåkenhus, Campus Norrköping, Norrköping, 13:15 (English)
Opponent
Supervisors
Note

Funding: This research was funded by SESAR JU under the European Union´s Horizon 2020 research and innovation programme (grant agreement No 783287), and supported by the Swedish Transport Agency (Transportstyrelsen) and the in-kind participation of LFV. Part of the research was conducted within the project On WorkLoad Measures (OWL), funded by the Swedish Transport Administration (Trafikverket), under reference TRV 2022/33636r.

Available from: 2025-04-28 Created: 2025-04-28 Last updated: 2026-02-04Bibliographically approved

Open Access in DiVA

No full text in DiVA

Other links

Publisher's full text

Authority records

Lemetti, AnastasiaPolishchuk, TatianaSchmidt, Christiane

Search in DiVA

By author/editor
Lemetti, AnastasiaMeyer, LotharPeukert, MaximilianPolishchuk, TatianaSchmidt, ChristianeAlpfjord Wylde, Helene
By organisation
Communications and Transport SystemsFaculty of Science & Engineering
Transport Systems and Logistics

Search outside of DiVA

GoogleGoogle Scholar

doi
urn-nbn

Altmetric score

doi
urn-nbn
Total: 16 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • oxford
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf