Verstoringen Youforce Self Service

Op afgelopen dinsdag 20 juni is er om 10 uur in de ochtend een release doorgevoerd. Helaas heeft dit een onvoorzienbaar gevolg voor de configuratie van de afstandsberekening gehad.   Dit houdt in dat vanaf die tijd tot vandaag (vrijdag 23 juni) 15:20 uur de berekeningen en automatische aanvullingen via Here.com zijn uitgevoerd in plaats van de berekening via de BAG-api.   Je kunt dit eventueel merken in de mutaties als: Adressen die niet herkend waren (#value melding in een rekenblad) Adressen die niet het juiste resultaat gaven in het rechtstreekse formulier of geen enkel resultaat zichtbaar word Een verschillend aantal KM dan verwacht We hebben een fix uitgevoerd waarin de configuratie weer goed is gezet. Mocht je afgelopen dagen problemen hebben ervaren met mutaties dan kun je deze opnieuw laten berekenen (knop berekenen) of opnieuw indienen.   Ons excuus voor het ongemak.

16-6-2023 12.30 uur: De storing is bij Azure verholpen. We zien dat de service instances weer stabiel zijn. De vertragingen zijn hiermee verholpen.   16-6-2023 9:50 uur: Op dit moment is er een storing bij Microsoft Azure. We zien dat deze storing in sommige gevallen impact heeft op onze klanten. Dit uit zich door langere laad tijden of het niet kunnen ophalen van gegevens (lege te doen lijst). We zijn hierin afhankelijk van de provider maar zullen jullie op de hoogte houden wanneer het issue is verholpen.   Extra toevoeging: Wanneer je last hebt van dit issue kan het helpen om je Youforce helemaal uit te loggen en opnieuw in te loggen. Het issue kan later nog wel weer terug komen zolang de storing bij Microsoft Azure speelt.

Update 7-6-2023 11.30 uur: Alle bestanden zijn inmiddels goed geimporteerd. Het issue is hiermee volledig afgehandeld.   Update 7-6-2023 10.20 uur: De oorzaak is achterhaald en verholpen. Op dit moment worden de bestanden die deze error hebben gegeven door ons opnieuw ingelezen. Zodra dit is afgerond zullen we dit terugkoppelen.   -- We zien dat er errors ontstaan in de Import richting Self Service. De error geeft het volgende weer:     We werken hard aan een oplossing en zullen je via dit bericht op de hoogte houden.

6-6-2023 11:05 Er is een fix uitgerold. De export loopt weer door. Mogelijk dat mutaties nog in een "wachtrij" staan. Deze zal dan zo snel mogelijk worden opgelost.   Bericht wordt hierbij afgesloten   6-6-2023 09:15 uur Gisteren was er een verstoringen op de Export. Deze is voor Beaufort opgelost. Echter voor Education staat de export nog stil. Op dit moment wordt er hard gewerkt aan een fix. Wij houden u op de hoogte over de voortgang.   Volgende bericht om 11:00 uur  

2 juni 2023 9.30 uur Op dit moment is het genereren van bestanden weer op normaal niveau. Intern word er verder aandacht besteed aan het voorkomen van dit soort vertragingen.   1 juni 14:00 uur Op dit moment krijgen we opnieuw meldingen dat de document generation vertraagd is. DEVOPS is op de hoogte en er wordt gewerkt aan een oplossing.   1 juni 2023 11:00 uur We zien dat de vertraging is verholpen. De bestanden worden weer op normaal niveau gegenereerd.   31 mei 2023 15:30 uur We zien dat er op dit vertragingen zijn bij het opstellen van documenten. Hierdoor kan het langer duren voordat het document gegenereerd is. We werken met hoge prioriteit aan een oplossing. Zodra er meer bekend is zal het bericht worden geupdate.

Update 26-5-2023 10.40 uur: Afgelopen week hebben we een release gehad waarmee dit issue is opgelost. De documenten zouden nu juist toegevoegd moeten kunnen worden zonder de workaround toe te passen.   -- Op dit moment ontvangen we meerdere meldingen dat het uploaden van een document zorgt voor een foutmelding.    De foutmelding geeft aan dat in het bestand een andere extensie is gevonden die niet wordt geaccepteerd door Self service. Hieronder een voorbeeld.     Wij hebben een workaround. Als de PDF nogmaals opgeslagen wordt via de Print knop (print to PDF) of via 'save as' dan kan de nieuwe versie wel geüpload worden.   PD is op de hoogte van het issue en werkt aan een oplossing.

22-05-2023 10.30 uur: De foutmelding is verholpen. We zien echter dat deze er in een klein aantal gevallen voor gezorgd heeft dat het formulier of de dialoog meerdere keren in template beheer terug te vinden is. PD is samen met Intradocs nog aan het onderzoeken hoe dit is ontstaan en hoe diet weer recht getrokken kan worden.   26-04-2023 14:00 uur: We zien dat er onterecht foutmeldingen kunnen ontstaan wanneer een dialoog geïmporteerd wordt via de tegel 'Definities importeren'   Wanneer je echter kijkt bij de definities is het importeren wel gelukt en is de dialoog gewoon zichtbaar.   De foutmelding ontstaat doordat er een verkeerde check wordt uitgevoerd. Deze check zal worden aangepast zodat de melding niet meer onterecht zal worden weergegeven.

4-5-2023 14:00 uur: Inmiddels hebben we van vele klanten de reactie ontvangen dat na opnieuw versturen het ondertekenen wel goed verlopen is. Hiermee wordt dit bericht gesloten. Wel wordt er nog onderzoek gedaan naar hoe digital signing nog stabieler/verbeterd kan worden.   25-04-2023 14:30 uur: Pd heeft verschillende digital signing requesten gevonden die zijn vastgelopen. Dit is nog ontstaan vanuit problemen binnen intra data die afgelopen donderdag (20 april) hebben plaatsgevonden.   De vastgelopen requesten zullen in de loop van de dag worden verwijderd aan de pd kant. De documenten komen dan te staan onder 'niet verzonden'. Wanneer je deze weer opnieuw verstuurd is de verwachting dat het goed gaat en de mail verstuurd wordt.   25-04-2023 11.30 uur: We zien de laatste tijd een aantal aanvragen met betrekking tot digital signing waarbij de batch blijft hangen op 'Bezig met verzenden' en hierdoor geen mail gestuurd wordt ter ondertekening. Het issue is met hoge prioriteit in behandeling. Wanneer meer informatie bekend is zal dit bericht worden bijgewerkt.

18-04-2023 14:37 uur: De aanpassing is teruggedraaid en het is weer mogelijk om ".doc" bestanden te uploaden.   18-04-2023 12:00 uur: We zien dat met een beveiligingsupdate van afgelopen vrijdag, het niet meer mogelijk is om .doc bestanden bij te voegen als bijlagen. Andere bestandstypes (zoals .docx, .xlsx en .pdf) werken wel naar behoren. De aanpassing wordt op dit moment teruggedraaid. Dit kan wellicht enige vertraging in HR Self Service veroorzaken. Onze excuses voor het ongemak.

30-3-2023 16:30 uur: Inmiddels hebben we van meerdere klanten reactie ontvangen dat het issue inderdaad verholpen is. Hiermee wordt dit verstoringsbericht gesloten.   30-3-2023 14:00 uur: We krijgen bericht vanuit PD dat het opgelost zou moeten zijn. We zijn nog in afwachting van klant reacties voordat we dit bericht zullen afsluiten.   30-3-2023 10:00 uur:   Op dit moment zien we meerdere meldingen dat het inloggen in digital signing niet lukt. Gebruikers krijgen de volgende melding te zien.   Het issue wordt op dit moment onderzocht. Zodra er meer bekend is zal dit bericht worden geüpdate.

Update 16-03-2023 13:00 uur: We hebben de performance goed gemonitord en zien dat deze stabiel zijn gebleven.   De performance issues zijn ontstaan door een service instance die geen juiste verdeling kon maken tussen de lopende processen. Hierdoor ontstond vertraging en werden niet alle processen volledig voltooid. Dit uiten zich in traagheid met als gevolg ook time out errors (500 melding).   PD blijft de performance monitoren en werkt ondertussen aan proces optimalisatie zodat de verdeling makkelijker door de service instance uit te voeren zijn en waar nodig een herstart sneller en beter in gang gezet kan worden.   Update 15-03-2023 13:00 uur: Self Service is weer stabiel en de performance is weer op peil.   We hebben de getroffen instance verwijderd en een nieuwe opgestart. Na 25 minuten (na opnieuw starten) is het gestabiliseerd.    Er zijn een aantal mogelijke oorzaken gevonden. Hier komen we later nog op terug in dit bericht.    Update 15-03-2023 11:45 uur: PD werkt hard aan een oplossing om de service instances terug te krijgen naar het 'normale' niveau.   Helaas hebben de uitgevoerde acties nog geen resultaat opgeleverd. Er zijn kleine periodes waarin de performance stabiel is maar we blijven pieken terug zien in de monitoring. Er wordt op dit moment gekeken hoe we de performance weer op peil kunnen krijgen.   - We zien in de monitoring dat er performance issues zijn en sprake is van traagheid. Op dit moment wordt het issue geanalyseerd. Excuus voor het ongemak.    Zodra er meer bekend is zal dit bericht worden geupdate.

Update 9-2-2023 9:30 uur: De fix is gister uitgerold en we zien dat de export weer op normaal niveau loopt.   Update 8-2-2023 15:30 uur:  PD heeft een fix klaar gezet die hoogst waarschijnlijk vandaag nog wordt uitgerold. Wanneer dit is afgerond zal dit bericht verder worden geüpdate.    Op dit moment hebben we een issue met export richting Beaufort.   Verwachting is dat dit te maken heeft met mutaties waarin VC-rubrieken (vacature rubrieken) worden gebruikt. Deze vallen uit waardoor de gehele export stil ligt. DEVOPS en PD zijn op de hoogte. Er wordt op dit moment gewerkt aan een oplossing. Tot die tijd zullen de getroffen mutaties worden overgeslagen en zal DEVOPS de overige mutaties handmatig triggeren om de export niet volledig stil te laten vallen.   Let op de mutatie zelf hoeft dus geen vacature mutatie te zijn, het gaat over alle mutatie soorten waarin deze rubrieken worden gebruikt.

Update 13:15 uur Microsoft heeft een fix uitgerold waardoor het probleem in Azure is opgelost. Wij zien ook in onze monitoring dat de stabiliteit en performance zijn genormaliseerd.     Microsoft meldt dat er op dit moment er een wereldwijde storing is in Azure. Dit heeft impact op de beschikbaarheid en performance van Youforce. Wij zien dit helaas ook in onze monitoring, en zijn in afwachting van een oplossing door Microsoft. Actuele informatie over de storing vind je hier: https://status.azure.com/en- gb/status

De capaciteit is verhoogd waarmee de stabiliteit weer is hersteld.   Op dit moment wordt de capaciteit van de BO4 database binnen self service vergroot. Dit kan helaas tot gevolg hebben dat jullie op dit moment time out sessies kunnen ervaren.

Update 4:40 uur: DEVOPS heeft het issue gevonden en verholpen. De import is weer gaan lopen.   We zien dat op dit moment de import in Self Service stil ligt. Het DEVOPS team werkt hard aan een oplossing. Zodra er meer informatie bekend is wordt dit bericht geüpdate.

6-12-2022 13.45 uur:  De vertragingen zijn verholpen. De wachtrij is inmiddels weer bij en alle documenten worden op de normale snelheid gegenereerd.   6-12-2022 11.00 uur: We zien dat het genereren van documenten vertraagd is binnen Self Service. Op dit moment wordt onderzocht wat de oorzaak is. Zodra er meer informatie is zal dit bericht worden geupdate.

Update 13:35 uur: Alles verloopt weer naar behoren. Excuus voor het ongemak.    Update 12:35 uur: De verwachting is dat de koppeling vanaf 13.00 uur weer naar behoren loopt.   Op dit moment kan het voorkomen dat HE bestanden niet of vertraagd doorkomen in Beaufort. We doen er alles aan om dit zo spoedig mogelijk op te lossen. 

Update 16.00 uur: De rest van de dag is de performance stabiel gebleven. Ook hebben we veel positieve berichten vanuit klanten ontvangen. PD heeft een generieke oplossing doorgevoerd. De instance die problemen veroorzaakte is volledig vervangen.   Update 12.30 uur: De verstoring werd veroorzaakt door een instance met een te hoge respons tijd. Ook nadat deze instance herstart was bleven de problemen bestaan. PD heeft de capaciteit verhoogd en de instance weer herstart. We zien dat de performance issues hiermee verminderd zijn. Het kan zijn dat je even opnieuw moet inloggen voor je de verbetering merkt.   Wel blijft de instance die voor problemen zorgde nog bestaan. De herstart is een workaround. PD blijft daarom monitoren en werken aan een generieke oplossing.   Update 11.10 uur: Veel klanten melden last te hebben van traagheid en witte schermen die ook kunnen leiden tot 500 errors. We zijn op de hoogte en werken met alle hoogste prioriteit aan een oplossing. Zodra er meer bekend is zal dit bericht worden geupdate.

Update 8-11-2022 12.00 uur: We zien dat deze specifieke performance problemen niet meer voorkomen. Dit verstoringsbericht zal hiermee worden afgesloten. Weet dat we continu blijven werken aan de performance problemen zie ook de eerder geplaatste berichten onder Nieuws.   Update 01-11-2022 17.30 uur De performance heeft zich in de de loop van de middag gestabiliseerd. Wij blijven dit uiteraard scherp monitoren.   Update 1-11-2022 11.45 uur: Klanten melden wederom vertragingsproblemen en 500 errors. We zijn aan het uitzoeken wat de oorzaak is.   Update 31-10-2022 13.15 uur: Op dit moment zien wij in onze monitoring dat de performance geen problemen geeft.. Wij blijven dit nauwlettend in de gaten houden.    Op dit moment is het erg druk op onze servers. Hierdoor kan traagheid van Self Service worden ervaren met daarbij incidenteel meldingen van 500 errors. Er wordt met spoed gewerkt aan een oplossing.

27.10.2022 13.00 We zien dat de performance na de aanpassingen stabiel is gebleven. Hiermee wordt dit verstoringsbericht afgesloten. We begrijpen de frustraties en blijven continu aan verbeteringen werken.   27.10.2022 11:45 De CPU's waren overbelast. We hebben acties genomen om dit weer in orde te brengen en zien dat de performance weer stabiliseert.    27.10.2022 9:15  Op dit moment is er sprake van traagheid binnen Self Service wat kan resulteren in 500 errors. We zijn dit aan het onderzoeken en houden je op de hoogte van de voortgang.