Key to reinforcement learning in multi-agent systems is the ability to exploit the fact that agents only directly influence only a small subset of the other agents. Such loose couplings are often modelled using a graphical model: a coordination graph. Finding an (approximately) optimal joint action for a given coordination graph is therefore a central subroutine in cooperative multi-agent reinforcement learning (MARL). Much research in MARL focuses on how to gradually update the parameters of the coordination graph, whilst leaving the solving of the coordination graph up to a known typically exact and generic subroutine. However, exact methods { e.g., Variable Elimination { do not scale well, and generic methods do not exploit the MARL setting of gradually updating a coordination graph and recomputing the joint action to select. In this paper, we examine what happens if we use a heuristic method, i.e., local search, to select joint actions in MARL, and whether we can use outcome of this local search from a previous time-step to speed up and improve local search. We show empirically that by using local search, we can scale up to many agents and complex coordination graphs, and that by reusing joint actions from the previous time-step to initialise local search, we can both improve the quality of the joint actions found and the speed with which these joint actions are found.
LINK
For me the concept of the teacher educator as a agent of social change, implies that teacher educators should be focused on stimulating change and improvement in teacher education, schools and society. That focus should not only shape our teaching of student teachers, but also our research activities. This has implications for the research projects that we undertake. When research by teacher educators intends to contribute to change and improvement of practices in teacher education, schools and society, our research projects need to be understood as interventions. In the design of PhD or other research projects, not only academic requirements regarding validity should be taken into also account but also criteria that contribute to interventions and change in universities, schools and society.Effective change is a collective challenge, which requires likeminded colleagues.
LINK
Accurate modeling of end-users’ decision-making behavior is crucial for validating demand response (DR) policies. However, existing models usually represent the decision-making behavior as an optimization problem, neglecting the impact of human psychology on decisions. In this paper, we propose a Belief-Desire-Intention (BDI) agent model to model end-users’ decision-making under DR. This model has the ability to perceive environmental information, generate different power scheduling plans, and make decisions that align with its own interests. The key modeling capabilities of the proposed model have been validated in a household end-user with flexible loads
DOCUMENT
Teachers have a crucial role in bringing about the extensive social changes that are needed in the building of a sustainable future. In the EduSTA project, we focus on sustainability competences of teachers. We strengthen the European dimension of teacher education via Digital Open Badges as means of performing, acknowledging, documenting, and transferring the competencies as micro-credentials. EduSTA starts by mapping the contextual possibilities and restrictions for transformative learning on sustainability and by operationalising skills. The development of competence-based learning modules and open digital badge-driven pathways will proceed hand in hand and will be realised as learning modules in the partnering Higher Education Institutes and badge applications open for all teachers in Europe.Societal Issue: Teachers’ capabilities to act as active facilitators of change in the ecological transition and to educate citizens and workforce to meet the future challenges is key to a profound transformation in the green transition.Teachers’ sustainability competences have been researched widely, but a gap remains between research and the teachers’ practise. There is a need to operationalise sustainability competences: to describe direct links with everyday tasks, such as curriculum development, pedagogical design, and assessment. This need calls for an urgent operationalisation of educators’ sustainability competences – to support the goals with sustainability actions and to transfer this understanding to their students.Benefit to society: EduSTA builds a community, “Academy of Educators for Sustainable Future”, and creates open digital badge-driven learning pathways for teachers’ sustainability competences supported by multimodal learning modules. The aim is to achieve close cooperation with training schools to actively engage in-service teachers.Our consortium is a catalyst for leading and empowering profound change in the present and for the future to educate teachers ready to meet the challenges and act as active change agents for sustainable future. Emphasizing teachers’ essential role as a part of the green transition also adds to the attractiveness of teachers’ work.
Fietsen in Nederland creëren een afvalprobleem. Zo zijn weesfietsen een voorbeeld van hoe een fietsrijke samenleving geen duurzaam transportsysteem garandeert. Twintig procent van de Nederlandse openbare fietsenstallingen staan vol met weesfietsen (WMD, 2008). Het tijdig en adequaat onderhouden en repareren van de spullen die wij gebruiken, dus ook fietsen, kan helpen om tot minder afval te komen (Ackerman, Mugge and Schoormans, 2018). Reparatie- en onderhoudswerkzaamheden zijn echter niet altijd haalbaar voor alle gebruikers (Makatsoris et al., 2017; Bakker et al., 2023). Het Bike Kitchen (BK) concept is een wereldwijd fenomeen met als kernwaarden het beschikbaar maken van fietsreparatie voor alle mensen (Valentini en Butler, 2023; Batterbury & Dant, 2019; Batterbury & Manga, 2022; Bradley, 2018). Hoewel de uitvoering van verschillende BK’s anders is, heeft het concept als primaire doel gebruikers professioneel te ondersteunen bij het (leren van) repareren en onderhouden van hun eigen fiets om zo de levensduur van de fiets te verlengen. Tijdens dit KIEM-project onderzoeken ontwerpend onderzoekers samen met service designers, sociaal ondernemers en ROC Midden Nederland hoe een BK als Living Lab bij kan dragen aan het (leren over) verminderen van de milieu-impact uit materiaalgebruik. Vanuit eerder opgedane inzichten uit de literatuur en bij de BK Amsterdam, worden twee BK’s ontworpen en geoperationaliseerd, gericht op specifieke plaatsen (Utrecht Science Park en woonwijk Overvecht) en twee specifieke doelgroepen (studenten en wijkbewoners). Door middel van observaties, interviews en focusgroepen zoomen we in op achterliggende waarden en competenties met betrekking tot materialen- en productgebruik en zoomen we uit op de invloed op de samenleving. Zo leren we hoe het BK concept direct invloed kan hebben op milieu-impact en indirect op andere initiatieven en/of maatschappelijke ontwikkelingen en zo bij kan dragen als ‘agent of change’ richting een duurzame samenleving (Valentini en Butler, 2023).
Dit project richt zich op de ontwikkeling van de biotechnologische en chemische procesvoering om op basis van mycelium een alternatief voor leer te produceren. In vergelijking met leer is het voordeel van mycelium dat geen runderen nodig zijn, de productie kan plaatsvinden onder industriële condities en met gebruik van reststromen, de CO2 uitstoot alsook hoeveelheid afval verlaagd wordt, en het gebruik van toxische stoffen zoals chroom wordt vervangen door biobased alternatieven. In het project zullen de procescondities worden bepaald die leiden tot de vorming van optimaal mycelium. Daartoe zullen twee verschillende schimmels worden gekweekt in bioreactoren bij de Hogeschool Arnhem Nijmegen (HAN), waarbij specifiek de effecten van de procescondities (temperatuur, pH, shear, beluchting) en de samenstelling van het kweekmedium op groei van het mycelium en materiaal eigenschappen zullen worden onderzocht. De meest optimale condities zullen vervolgens worden opgeschaald. Op het op deze wijze verkregen materiaal zal Mylium BV een aantal nabehandelingsstappen uitvoeren om de sterkte, elasticiteit, en duurzaamheid van het product te vergroten. Daartoe worden biobased plasticizers, cross-linkers en/of flexibility agents gebruikt. Het resulterende eindproduct zal middels specifiek fysieke testen vergeleken worden met leer alsook worden voorgelegd aan mogelijke klanten. Indien beide resultaten positief zijn kan het betreffende proces na het project verder worden opgeschaald voor toepassing naar de markt.
