Kāpēc jūsu SCADA sistēma palēninās maiņas laikā — un kā to novērst

Slēptais veiktspējas traucētājs jūsu vadības telpā

Katra maiņas maiņa procesā rada paredzamu veiktspējas krīzi. Operatori vienlaikus pieslēdzas, apstiprina sakrājušos trauksmes signālus un vienlaikus ielādē sarežģītus pārskata displejus. Jūsu SCADA serveris reaģē ar lēnu ekrāna atsvaidzināšanu, aizkavētu tagu atjaunināšanu un iesaldētiem tendences logiem. Tas nav aparatūras bojājums. Tā ir slodzes pārvaldības problēma.

Honeywell Experion PKS instalācijas naftas pārstrādes rūpnīcās un ķīmiskajās rūpnīcās konsekventi saskaras ar šo modeli. Experion R500 servera arhitektūra piešķir koplietojamus atmiņas baseinus vienlaicīgām klientu sesijām. Kad seši operatori trīs minūšu laikā pieslēdzas sistēmai, servera CPU slodze pieaug līdz 85–95% līdz pat četrām minūtēm. Tagu skenēšanas ātrums samazinās no 500 ms līdz 2 000 ms. Operatoriem šajā laikā trūkst kritisku procesa noviržu.

Pirmkārt, saprotiet, ka šo problēmu pilnībā var novērst. Otrkārt, risinājumam nav nepieciešami aparatūras uzlabojumi. Treškārt, risinājums ir tīra konfigurācija un darbības disciplīna.

Galvenais iemesls 1: Vienlaicīga klientu inicializācija

Katra Experion PKS klienta darba stacija startē pilnu abonēšanas roku satikšanos. Stacija pieprasa visus konfigurētos displeja tagus, ielādē trauksmju kopsavilkuma tabulas un lejupielādē tendences vēstures buferus. Viena klienta inicializācija ģenerē aptuveni 1 200 OPC DA abonēšanas pieprasījumus Experion serverim.

Turklāt seši klienti, kas startē 90 sekunžu laikā, rada 7 200 vienlaicīgu abonēšanas pieprasījumu. Experion Datu piekļuves serveris (DAS) apstrādā šos pieprasījumus rindā. Rindas dziļums pārsniedz 5 000 vienību. Atbildes kavēšanās pārsniedz 1 500 ms uz tagu. Operators redz iesaldētus displejus.

Galvenais iemesls 2 pastiprina šo problēmu. Operatoriem pirmajās piecās minūtēs jāapstiprina visi iepriekšējās maiņas neapstiprinātie trauksmes signāli. Katrs apstiprinājums ieraksta laika zīmogu, operatora ID un stāvokļa izmaiņas Trauksmju un notikumu datubāzē. Lielas trauksmju uzkrāšanās — 200 vai vairāk neapstiprinātu trauksmju — rada 200 secīgas datubāzes transakcijas dažu minūšu laikā. SQL Server I/O gaidīšanas laiks pārsniedz 40 ms uz transakciju. Honeywell CC-PDIL01 digitālā ieejas modulis un līdzīgas lauka I/O kartes nepārtraukti piegādā stāvokļa izmaiņu datus šajā trauksmju plūsmā.

Galvenais iemesls 3 ir automatizētais maiņas ziņojums. Experion Trauksmju kopsavilkuma un Ražošanas uzskaites moduļi ģenerē ziņojumus maiņas beigās, vaicājot 8–12 stundu vēsturiskos datus. Šis process vienlaikus veic datubāzes lasīšanas operācijas tajā pašā SQL Server instancē, kas apstrādā trauksmju apstiprinājumu ierakstus. Lasīšanas un rakstīšanas konkurence bloķē abus procesus.

Diagnostikas soļi: precīzi nosakiet savu pudeles kaklu pirms labojuma veikšanas

Negaidiet minējumus. Vispirms mērījiet. Izmantojiet Windows Performance Monitor uz Experion servera nākamās maiņas maiņas laikā. Vienlaikus ierakstiet četrus skaitītājus pilnajā 10 minūšu nodošanas logā.

• 1. solis: Atveriet Performance Monitor. Pievienojiet skaitītāju: Procesors — % Procesora laiks — _Kopā. Iestatiet parauga intervālu uz 5 sekundēm.
• 2. solis: Pievienojiet skaitītāju: Fiziskais disks — Vidējais diska rindas garums. Vērtības virs 2,0 norāda uz diska I/O pudeles kaklu.
• 3. solis: Pievienojiet skaitītāju: SQL Server: Bufera pārvaldnieks — Lapas dzīves ilgums. Vērtības zem 300 sekundēm norāda uz atmiņas spiedienu vēsturiskajā datubāzē.
• 4. solis: Pievienojiet skaitītāju: Tīkla interfeiss — Baiti kopā/sekundē. Salīdziniet ar jūsu slēdža porta ātrumu. Vērtības virs 70% no porta kapacitātes norāda uz tīkla piesātinājumu.
• 5. solis: Atveriet Experion stacijas veiktspējas monitoru. Dodieties uz Serveris — Diagnostika — DAS rindas dziļums. Ierakstiet maksimālo rindas dziļumu maiņas maiņas laikā.
• 6. solis: Eksportējiet Experion trauksmju žurnālu maiņas maiņas periodam. Saskaitiet trauksmju apstiprinājumu transakcijas minūtē. Vairāk nekā 30 transakcijas minūtē norāda uz trauksmju uzkrāšanās sastrēgumu.

Tādējādi jums ir precīzs veiktspējas profils. Salīdziniet mērīto pudeles kaklu ar pareizo risinājumu nākamajā sadaļā.

Konfigurācijas labojumi: tieša mērķēšana uz katru galveno iemeslu

Labojums 1 risina vienlaicīgu klientu pieslēgšanos. Ieviest pakāpenisku pieslēgšanās grafiku. Katram operatora darba stacijai piešķiriet pieslēgšanās laika logu. Stacija 1 pieslēdzas maiņas sākumā. Stacija 2 pieslēdzas maiņas sākumā plus 3 minūtes. Stacija 3 pieslēdzas maiņas sākumā plus 6 minūtes. Tas sadala DAS abonēšanas slodzi 9 minūšu laikā. Maksimālais DAS rindas dziļums samazinās no 7 200 līdz 1 200 pieprasījumiem.

Labojums 2 risina maiņas ziņojuma ģenerēšanas konfliktu. Experion Configuration Studio dodieties uz Plānošana — Automatizētie uzdevumi. Pārvietojiet visus maiņas ziņojumu ģenerēšanas uzdevumus uz maiņas sākumu plus 45 minūtes. Tas nodala datubāzes vaicājumus no trauksmju apstiprinājumu datubāzes ierakstiem ar 45 minūšu buferi. SQL Server I/O gaidīšanas laiks atgriežas pie pamatlīmeņa zem 8 ms.

Labojums 3 mērķē uz trauksmju uzkrāšanos. Iestatiet pastāvīgu darbības procedūru, kas prasa operatoriem apstiprināt trauksmes reāllaikā viņu maiņas laikā. Maksimālais neapstiprināto trauksmju slieksnis: 15 trauksmes maiņas beigās. Konfigurējiet Experion Trauksmju nolikšanas funkciju traucējošām trauksmēm ar atkārtošanās ātrumu virs 1 reizes 10 minūtēs. Nolikšana prasa ISA-18.2 dokumentāciju — izveidojiet trauksmju racionalizācijas ierakstu katrai noliktajai trauksmei. Honeywell C300 kontrolieris atbalsta trauksmju prioritātes konfigurēšanu tieši kontroliera līmenī, lai samazinātu augšupvērsto servera slodzi.

Labojums 4 optimizē SQL Server konfigurāciju Experion vajadzībām. Iestatiet SQL Server maksimālo servera atmiņu uz kopējo RAM apjomu mīnus 4 GB. Serverim ar 32 GB RAM iestatiet maksimālo servera atmiņu uz 28 672 MB. Ieslēdziet SQL Server tūlītējo failu inicializāciju, lai novērstu nulles aizpildīšanas kavēšanos datu failu pieauguma laikā. Iestatiet Experion vēsturiskā datu faila iepriekšēju pieauguma soli uz 512 MB. Tas novērš faila pieauguma notikumus darbības vidū, kas bloķē transakcijas.

Tīkla un displeja optimizācija

Tomēr konfigurācijas labojumi vien ne vienmēr atrisina visas veiktspējas problēmas, ja jūsu vadības tīkls pārraida lielu apraides trafiku maiņas maiņas laikā. Segmentējiet Experion klientu tīklu, izmantojot pārvaldāmus slēdžus ar VLAN konfigurāciju. Novietojiet visas operatoru darba stacijas VLAN 10. Novietojiet Experion serveri VLAN 20. Konfigurējiet starp-VLAN maršrutēšanu tikai nepieciešamajiem Experion komunikācijas portiem: TCP 55555 Experion stacijai, TCP 1433 SQL Server vēsturiskajai piekļuvei, UDP 5001 DDE/OPC tiltošanai. Honeywell CC-KREBR5 vadības ugunsmūra modulis nodrošina aparatūras līmeņa tīkla segmentāciju starp procesa vadības tīklu un uzņēmuma VLAN infrastruktūru.

Displeja dizains arī ietekmē maiņas maiņas slodzi. Sarežģīti P&ID pārskata ekrāni ar 500 vai vairāk dinamiskām objektiem ģenerē 500 atsevišķus tagu abonēšanas pieprasījumus katrā atsvaidzināšanas ciklā. Pārprojektējiet pārskata displejus, lai rādītu ne vairāk kā 200 dinamiskus objektus. Izmantojiet Experion 1. līmeņa pārskata koncepciju — rādiet tikai kritiskos procesa mainīgos pirmajā ielādes ekrānā. Operatoriem detalizēti P&ID ir pieejami tikai pēc pieprasījuma.

Turklāt konfigurējiet displeja iepriekšēju ielādi Experion stacijās. Iestatiet stacijas starta displeju uz vieglu statusa lapu ar mazāk nekā 50 dinamiskajiem objektiem. Tas samazina sākotnējo abonēšanas slodzi par 80% salīdzinājumā ar pilna P&ID ielādi startā. Honeywell I/O šasija, kas atbalsta šos displejus, tieši gūst labumu no samazinātas aptaujas frekvences optimizētās starta secības laikā.

Nobeigums un rīcības ieteikumi

Maiņas maiņas SCADA palēninājumi ir risināma inženiertehniska problēma. Vispirms izmēriet savu faktisko pudeles kaklu ar Performance Monitor pirms jebkādu konfigurācijas izmaiņu veikšanas. Otrkārt, ieviesiet pakāpenisku pieslēgšanās grafiku, lai sadalītu DAS abonēšanas slodzi. Treškārt, pārceliet maiņas ziņojumu ģenerēšanu par 45 minūtēm pēc maiņas sākuma. Ceturtkārt, ieviesiet reāllaika trauksmju apstiprināšanas praksi, lai novērstu maiņas beigās trauksmju plūdus.

Specifiski Honeywell Experion PKS: iestatiet SQL Server maksimālo servera atmiņu uz kopējo RAM mīnus 4 GB, ieslēdziet tūlītējo failu inicializāciju un pārprojektējiet pārskata displejus uz mazāk nekā 200 dinamiskajiem objektiem. Šie četri pasākumi konsekventi samazina maiņas maiņas CPU slodzes pieaugumu no 90% līdz zem 55% lauka ieviešanās gadījumos. Operatoriem tiek nodrošināta uzticama displeja reakcija 30 sekunžu laikā pēc pieslēgšanās, nevis jāgaida četras minūtes. Šis laika logs ir svarīgs — procesa traucējumi maiņas nodošanas laikā rada 23% no nenormālu situāciju notikumiem, saskaņā ar ISA-18.2 incidentu analīzes datiem.

Sāciet ar diagnostikas soļiem otrajā sadaļā. Veiciet vienu pilnu maiņas maiņu ar aktīvu Performance Monitor. Jūsu dati precīzi norādīs, kuru labojumu piemērot vispirms.