【技術(shù)實(shí)現(xiàn)步驟摘要】
本專利技術(shù)涉及機(jī)器學(xué)習(xí)和智能控制領(lǐng)域，具體而言，涉及一種充放電站的控制方法、裝置、存儲(chǔ)介質(zhì)及電子裝置。
技術(shù)介紹
1、目前，傳統(tǒng)的電動(dòng)車輛參與電網(wǎng)調(diào)節(jié)，通常通過車輛對(duì)電網(wǎng)(vehicle-to-grid，簡(jiǎn)稱為v2g)技術(shù)來對(duì)電動(dòng)車輛的充電時(shí)間和充放電功率進(jìn)行控制，需要電動(dòng)車輛、充電樁和電網(wǎng)之間進(jìn)行實(shí)時(shí)通信和控制，存在技術(shù)復(fù)雜性高，標(biāo)準(zhǔn)不統(tǒng)一等問題。此外，當(dāng)大量車輛同時(shí)參與v2g時(shí)，電網(wǎng)管理會(huì)變得更加復(fù)雜，實(shí)現(xiàn)難度較大、成本較高、主動(dòng)調(diào)節(jié)能力弱，從而存在對(duì)充放電站進(jìn)行能量控制的效率低的問題。
2、因此，針對(duì)上述對(duì)充放電站進(jìn)行能量控制的效率低的問題，目前尚未存在有效的解決方案。
技術(shù)實(shí)現(xiàn)思路
1、本專利技術(shù)實(shí)施例提供了一種充放電站的控制方法、裝置、存儲(chǔ)介質(zhì)及電子裝置，以至少解決對(duì)充放電站進(jìn)行能量控制的效率低的問題。
2、根據(jù)本專利技術(shù)的一個(gè)實(shí)施例，提供了一種充放電站的控制方法。該方法可以包括：獲取充放電站的狀態(tài)參數(shù)集，其中，狀態(tài)參數(shù)集中的狀態(tài)參數(shù)用于表征充放電站的狀態(tài)，以及充放電站的關(guān)聯(lián)設(shè)備的狀態(tài)；將狀態(tài)參數(shù)集輸入至策略模型中，且利用策略模型對(duì)狀態(tài)參數(shù)集進(jìn)行分析，得到充放電站的動(dòng)作參數(shù)集，其中，策略模型為利用狀態(tài)參數(shù)集樣本訓(xùn)練得到，動(dòng)作參數(shù)集中的動(dòng)作參數(shù)用于表征充放電站的功率和關(guān)聯(lián)設(shè)備的功率；基于狀態(tài)參數(shù)集和動(dòng)作參數(shù)集，確定充放電站的控制策略，其中，控制策略用于至少表征關(guān)聯(lián)設(shè)備向充放電站進(jìn)行充電的規(guī)則、充放電站向關(guān)聯(lián)設(shè)備進(jìn)行放電的規(guī)則，以及充放電站內(nèi)儲(chǔ)能系統(tǒng)儲(chǔ)
3、可選地，利用策略模型對(duì)狀態(tài)參數(shù)集進(jìn)行分析，得到充放電站的動(dòng)作參數(shù)集，包括：調(diào)用策略模型，按照目標(biāo)步長(zhǎng)，確定與狀態(tài)參數(shù)集相匹配的動(dòng)作參數(shù)集。
4、可選地，該方法還包括：對(duì)狀態(tài)參數(shù)集進(jìn)行更新，得到更新后的狀態(tài)參數(shù)集，以及對(duì)動(dòng)作參數(shù)集進(jìn)行調(diào)整，得到調(diào)整后的動(dòng)作參數(shù)集。
5、可選地，基于狀態(tài)參數(shù)集和動(dòng)作參數(shù)集，確定充放電站的控制策略，包括：基于狀態(tài)參數(shù)集、更新后的狀態(tài)參數(shù)集、調(diào)整后的動(dòng)作參數(shù)集、充放電站的獎(jiǎng)勵(lì)函數(shù)，確定控制策略，其中，獎(jiǎng)勵(lì)函數(shù)為對(duì)多個(gè)子獎(jiǎng)勵(lì)函數(shù)進(jìn)行加權(quán)求和得到，子獎(jiǎng)勵(lì)函數(shù)用于表征充放電站的調(diào)整目標(biāo)。
6、可選地，對(duì)動(dòng)作參數(shù)集進(jìn)行調(diào)整，得到調(diào)整后的動(dòng)作參數(shù)集，包括：向動(dòng)作參數(shù)集添加噪聲數(shù)據(jù)，得到調(diào)整后的動(dòng)作參數(shù)集。
7、可選地，該方法還包括：基于狀態(tài)參數(shù)集樣本和動(dòng)作參數(shù)集樣本對(duì)初始價(jià)值模型進(jìn)行訓(xùn)練，得到價(jià)值模型；獲取價(jià)值模型輸出的價(jià)值參數(shù)，其中，價(jià)值參數(shù)用于表征控制策略的評(píng)分等級(jí)。
8、可選地，該方法還包括：獲取策略模型的策略梯度參數(shù)；基于策略梯度參數(shù)，對(duì)價(jià)值參數(shù)進(jìn)行調(diào)整，得到目標(biāo)價(jià)值參數(shù)，其中，目標(biāo)價(jià)值參數(shù)用于表征控制策略的評(píng)分等級(jí)達(dá)到等級(jí)閾值。
9、可選地，該方法還包括：基于策略梯度參數(shù)，對(duì)策略模型進(jìn)行更新，以及基于價(jià)值模型的損失函數(shù)，對(duì)價(jià)值模型進(jìn)行更新。
10、可選地，該方法還包括：對(duì)狀態(tài)參數(shù)集進(jìn)行修正，得到修正后的狀態(tài)參數(shù)集，以及對(duì)動(dòng)作參數(shù)集進(jìn)行修正，得到修正后的動(dòng)作參數(shù)集；利用修正后的狀態(tài)參數(shù)集和修正后的動(dòng)作參數(shù)集，對(duì)控制策略進(jìn)行修正。
11、根據(jù)本專利技術(shù)的另一個(gè)實(shí)施例，提供了一種充放電站的控制裝置。該裝置可以包括：獲取單元，用于獲取充放電站的狀態(tài)參數(shù)集，其中，狀態(tài)參數(shù)集中的狀態(tài)參數(shù)用于表征充放電站的狀態(tài)，以及充放電站的關(guān)聯(lián)設(shè)備的狀態(tài)；分析單元，用于將狀態(tài)參數(shù)集輸入至策略模型中，且利用策略模型對(duì)狀態(tài)參數(shù)集進(jìn)行分析，得到充放電站的動(dòng)作參數(shù)集，其中，策略模型為利用狀態(tài)參數(shù)集樣本訓(xùn)練得到，動(dòng)作參數(shù)集中的動(dòng)作參數(shù)用于表征充放電站的功率和關(guān)聯(lián)設(shè)備的功率；確定單元，用于基于狀態(tài)參數(shù)集和動(dòng)作參數(shù)集，確定充放電站的控制策略，其中，控制策略用于至少表征關(guān)聯(lián)設(shè)備向充放電站進(jìn)行充電的規(guī)則、充放電站向關(guān)聯(lián)設(shè)備進(jìn)行放電的規(guī)則，以及充放電站內(nèi)儲(chǔ)能系統(tǒng)儲(chǔ)能的規(guī)則；控制單元，用于按照控制策略，對(duì)充放電站進(jìn)行控制。
12、根據(jù)本專利技術(shù)的又一個(gè)實(shí)施例，還提供了一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)程序，其中，計(jì)算機(jī)程序被設(shè)置為運(yùn)行時(shí)執(zhí)行上述任一項(xiàng)方法實(shí)施例中的步驟。
13、根據(jù)本專利技術(shù)的又一個(gè)實(shí)施例，還提供了一種電子裝置，包括存儲(chǔ)器和處理器，存儲(chǔ)器中存儲(chǔ)有計(jì)算機(jī)程序，處理器被設(shè)置為運(yùn)行計(jì)算機(jī)程序以執(zhí)行上述任一項(xiàng)方法實(shí)施例中的步驟。
14、根據(jù)本專利技術(shù)的又一個(gè)實(shí)施例，還提供了一種計(jì)算機(jī)程序產(chǎn)品。該計(jì)算機(jī)程序產(chǎn)品可以包括計(jì)算機(jī)程序，其中，計(jì)算機(jī)程序被設(shè)置為運(yùn)行時(shí)執(zhí)行上述任一項(xiàng)方法實(shí)施例中的步驟。
15、根據(jù)本專利技術(shù)的又一個(gè)實(shí)施例，還提供了一種計(jì)算機(jī)程序產(chǎn)品。該計(jì)算機(jī)程序產(chǎn)品可以包括非易失性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其中，非易失性計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)存儲(chǔ)計(jì)算機(jī)程序，計(jì)算機(jī)程序被設(shè)置為運(yùn)行時(shí)執(zhí)行上述任一項(xiàng)方法實(shí)施例中的步驟。
16、根據(jù)本專利技術(shù)的又一個(gè)實(shí)施例，還提供了一種計(jì)算機(jī)程序。該計(jì)算機(jī)程序被設(shè)置為運(yùn)行時(shí)執(zhí)行上述任一項(xiàng)方法實(shí)施例中的步驟。
17、通過本專利技術(shù)實(shí)施例，獲取充放電站的狀態(tài)參數(shù)集，其中，狀態(tài)參數(shù)集中的狀態(tài)參數(shù)用于表征充放電站的狀態(tài)，以及充放電站的關(guān)聯(lián)設(shè)備的狀態(tài)；將狀態(tài)參數(shù)集輸入至策略模型中，且利用策略模型對(duì)狀態(tài)參數(shù)集進(jìn)行分析，得到充放電站的動(dòng)作參數(shù)集，其中，策略模型為利用狀態(tài)參數(shù)集樣本訓(xùn)練得到，動(dòng)作參數(shù)集中的動(dòng)作參數(shù)用于表征充放電站的功率和關(guān)聯(lián)設(shè)備的功率；基于狀態(tài)參數(shù)集和動(dòng)作參數(shù)集，確定充放電站的控制策略，其中，控制策略用于至少表征關(guān)聯(lián)設(shè)備向充放電站進(jìn)行充電的規(guī)則、充放電站向關(guān)聯(lián)設(shè)備進(jìn)行放電的規(guī)則，以及充放電站內(nèi)儲(chǔ)能系統(tǒng)儲(chǔ)能的規(guī)則；按照控制策略，對(duì)充放電站進(jìn)行控制，從而解決了對(duì)充放電站進(jìn)行能量控制的效率低的技術(shù)問題，實(shí)現(xiàn)了提高對(duì)充放電站進(jìn)行能量控制的效率的技術(shù)效果。
本文檔來自技高網(wǎng)...【技術(shù)保護(hù)點(diǎn)】
1.一種充放電站的控制方法，其特征在于，包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，利用所述策略模型對(duì)所述狀態(tài)參數(shù)集進(jìn)行分析，得到所述充放電站的動(dòng)作參數(shù)集，包括：
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，基于所述狀態(tài)參數(shù)集和所述動(dòng)作參數(shù)集，確定所述充放電站的控制策略，包括：
5.根據(jù)權(quán)利要求3所述的方法，其特征在于，對(duì)所述動(dòng)作參數(shù)集進(jìn)行調(diào)整，得到調(diào)整后的動(dòng)作參數(shù)集，包括：
6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：
7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述方法還包括：
8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述方法還包括：
9.根據(jù)權(quán)利要求1至8中任意一項(xiàng)所述的方法，其特征在于，所述方法還包括：
10.一種充放電站的控制裝置，其特征在于，包括：
11.一種計(jì)算機(jī)可讀存儲(chǔ)介質(zhì)，其特征在于，所述存儲(chǔ)介質(zhì)中存儲(chǔ)有計(jì)算機(jī)程序，其中，所述計(jì)算機(jī)程序被設(shè)置為運(yùn)行時(shí)執(zhí)行所述權(quán)利要求1
12.一種電子裝置，包括存儲(chǔ)器和處理器，其特征在于，所述存儲(chǔ)器中存儲(chǔ)有計(jì)算機(jī)程序，所述處理器被設(shè)置為運(yùn)行所述計(jì)算機(jī)程序以執(zhí)行所述權(quán)利要求1至9任一項(xiàng)中所述的方法。
13.一種計(jì)算機(jī)程序產(chǎn)品，其特征在于，包括計(jì)算機(jī)程序，所述計(jì)算機(jī)程序在被處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1至9中任意一項(xiàng)所述的方法。
...【技術(shù)特征摘要】
1.一種充放電站的控制方法，其特征在于，包括：
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，利用所述策略模型對(duì)所述狀態(tài)參數(shù)集進(jìn)行分析，得到所述充放電站的動(dòng)作參數(shù)集，包括：
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：
4.根據(jù)權(quán)利要求3所述的方法，其特征在于，基于所述狀態(tài)參數(shù)集和所述動(dòng)作參數(shù)集，確定所述充放電站的控制策略，包括：
5.根據(jù)權(quán)利要求3所述的方法，其特征在于，對(duì)所述動(dòng)作參數(shù)集進(jìn)行調(diào)整，得到調(diào)整后的動(dòng)作參數(shù)集，包括：
6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：
7.根據(jù)權(quán)利要求6所述的方法，其特征在于，所述方法還包括：
8.根據(jù)權(quán)利要求7...
【專利技術(shù)屬性】
技術(shù)研發(fā)人員：劉祥璐，王大為，戴罕奇，王洪彪，張寶群，李亦非，孫舟，金淵，袁小溪，李卓群，
申請(qǐng)(專利權(quán))人：國(guó)網(wǎng)北京市電力公司，
類型：發(fā)明
國(guó)別省市：
還沒有人留言評(píng)論。發(fā)表了對(duì)其他瀏覽者有用的留言會(huì)獲得科技券。