Podrobno

SARSA ali DQN za krmiljenje baterijskega hranilnika
ID Sivec, Andraž (Avtor), ID Meža, Marko (Avtor)

.pdfPDF - Predstavitvena datoteka, prenos (520,96 KB)
MD5: 5AA4E08DC8D11E00A13C4CCF14BE423F
URLURL - Izvorni URL, za dostop obiščite https://ev.fe.uni-lj.si/1-2-2026/Sivec.pdf Povezava se odpre v novem oknu

Izvleček
Zaradi porasta proizvodnje električne energije iz sončnih in vetrnih virov se pojavlja problem viškov generacije in negativnih cen elektrike, kar vpliva na stabilnost elektroenergetskega sistema. Kot možna rešitev se vse bolj uveljavlja uporaba baterijskih hranilnikov, ki pa zahtevajo učinkovito upravljanje za najboljši učinek. V članku primerjamo delovanje dveh metod spodbujevalnega učenja pri optimizaciji delovanja baterije: tabelarično metodo SARSA in metodo z nevronsko mrežo DQN. Agenta se učita na podlagi zgodovinskih podatkov o proizvodnji sončne elektrarne, porabi gospodinjstva in tržnih cenah elektrike, njun cilj pa je minimizacija stroškov nakupa energije. Rezultati kažejo, da uporaba obeh pristopov bistveno zmanjša stroške v primerjavi s primerom brez baterije. DQN dosega najboljše rezultate, saj se bolje prilagodi kompleksnim vzorcem v podatkih in boljše deluje v večjih prostorih stanj. Raziskava potrjuje, da lahko spodbujevalno učenje učinkovito podpira odločanje pri upravljanju hranilnikov in prispeva k večji ekonomski učinkovitosti ter stabilnosti energetskega ˇ sistema ter prikaze nekatere izzive pri implementaciji.

Jezik:Slovenski jezik
Ključne besede:spodbujevalno učenje, zeleni prehod, primerjava algoritmov, optimizacija krmiljenja baterije po ceni
Vrsta gradiva:Članek v reviji
Tipologija:1.01 - Izvirni znanstveni članek
Organizacija:FE - Fakulteta za elektrotehniko
Status publikacije:Objavljeno
Različica publikacije:Objavljena publikacija
Leto izida:2026
Št. strani:Str. 63-68
Številčenje:Letn. 93, št. 1/2
PID:20.500.12556/RUL-182836 Povezava se odpre v novem oknu
UDK:621.311.243:004.85
ISSN pri članku:0013-5852
COBISS.SI-ID:279259395 Povezava se odpre v novem oknu
Datum objave v RUL:25.05.2026
Število ogledov:193
Število prenosov:121
Metapodatki:XML DC-XML DC-RDF
:
Kopiraj citat
Objavi na:Bookmark and Share

Gradivo je del revije

Naslov:Elektrotehniški vestnik
Založnik:Strokovna zadruga koncesijoniranih elektrotehnikov, Elektrotehniška zveza Slovenije
ISSN:0013-5852
COBISS.SI-ID:742916 Povezava se odpre v novem oknu

Licence

Licenca:CC BY 4.0, Creative Commons Priznanje avtorstva 4.0 Mednarodna
Povezava:http://creativecommons.org/licenses/by/4.0/deed.sl
Opis:To je standardna licenca Creative Commons, ki daje uporabnikom največ možnosti za nadaljnjo uporabo dela, pri čemer morajo navesti avtorja.

Sekundarni jezik

Jezik:Angleški jezik
Naslov:A comparison of tabular and deep reinforcement learning for battery management
Izvleček:
The increasing share of solar and wind energy production introduces challenges related to excess electricity generation and its negative prices, which affect the stability of power systems. Battery storage is emerging as a promising solution, but its optimal operation requires advanced control strategies. This paper compares two reinforcement learning methods for battery management: the tabular SARSA and the deep QNetwork (DQN) method. Both methods are trained on historical data from a photovoltaic plant and electricity market prices, with the objective of minimizing energy purchase costs. The results demonstrate that both methods significantly reduce the costs compared to the baseline without storage, with DQN outperforming SARSA due to its ability to capture complex patterns and handle continuous data input. The findings confirm that reinforcement learning can effectively support decision-making in energy storage management, contributing to improved economic efficiency and system stability while also highlighting some implementation challenges, such as training instability and sensitivity to hyperparameters.

Ključne besede:reinforcement learning, green transition, algorithm comparison, optimization of battery control based on price

Podobna dela

Podobna dela v RUL:
Podobna dela v drugih slovenskih zbirkah:

Zbirka

To gradivo je del naslednjih zbirk del:
  1. Elektrotehniški vestnik

Nazaj