Verstoringen Youforce Self Service

11-1-2024 14:10 uur: De wachtrij is inmiddels weg gewerkt. De documenten worden weer zonder vertraging aangemaakt. Het issue waarschijnlijk ontstaan vanwege een error op de database. Er wordt een project gestart om deze error in het vervolg te voorkomen.   11-1-2024 13:45 uur: We hebben het aantal service instances verhoogd en zien de wachtrij om de documenten te genereren verminderen. De oorzaak wordt nog onderzocht.   11-1-2024 13:00 uur: Op dit moment zien we een grote vertraging bij het genereren van documenten in Self Service. Het issue is in onderzoek. Zodra er meer bekend is zal dit bericht worden geupdate.

27.10.2022 13.00 We zien dat de performance na de aanpassingen stabiel is gebleven. Hiermee wordt dit verstoringsbericht afgesloten. We begrijpen de frustraties en blijven continu aan verbeteringen werken.   27.10.2022 11:45 De CPU's waren overbelast. We hebben acties genomen om dit weer in orde te brengen en zien dat de performance weer stabiliseert.    27.10.2022 9:15  Op dit moment is er sprake van traagheid binnen Self Service wat kan resulteren in 500 errors. We zijn dit aan het onderzoeken en houden je op de hoogte van de voortgang.

Update 7 maart 2022 - We zien dat de afstandsberekening weer naar behoren werkt. We sluiten deze melding.   Update 10:00 uur: We hebben inmiddels een oplossing in productie genomen. Het onregelmatig werken van de afstandsberekening kan nog even aanhouden totdat de service in zijn geheel ververst/hersteld is.   4 maart 2022 - Er is momenteel een probleem met de berekening van afstanden in Self Service. Deze service werkt onregelmatig, waardoor sommige door de gebruikers gevraagde berekeningen niet worden verwerkt. We werken met spoed aan een oplossing en houden je op de hoogte.

Update 4 juli 2023 13:30 uur: We zien dat na het terugdraaien van een release de documenten weer op normale wijze worden gegenereerd. Op dit moment is nog niet duidelijk of de release ook het issue heeft veroorzaakt. De rootcause is dus nog in onderzoek.   4 juli 2023 11:00 uur: We zien op dit moment dat het genereren van documenten niet werkt. De ontwikkelaars hebben dit in onderzoek en we zullen het bericht updaten bij meer informatie.

16-6-2023 12.30 uur: De storing is bij Azure verholpen. We zien dat de service instances weer stabiel zijn. De vertragingen zijn hiermee verholpen.   16-6-2023 9:50 uur: Op dit moment is er een storing bij Microsoft Azure. We zien dat deze storing in sommige gevallen impact heeft op onze klanten. Dit uit zich door langere laad tijden of het niet kunnen ophalen van gegevens (lege te doen lijst). We zijn hierin afhankelijk van de provider maar zullen jullie op de hoogte houden wanneer het issue is verholpen.   Extra toevoeging: Wanneer je last hebt van dit issue kan het helpen om je Youforce helemaal uit te loggen en opnieuw in te loggen. Het issue kan later nog wel weer terug komen zolang de storing bij Microsoft Azure speelt.

Update 27-05-2024 8.42 uur: De oorzaak is achterhaald en de documenten worden weer 1 voor 1 gegenereerd. In de loop van de ochtend zullen alle documenten weer zijn aangemaakt. Excuus voor het ongemak.   We zien dat er op het moment een grote vertraging is bij het genereren van documenten. PD is de oorzaak aan het onderzoeken.

Update 15-01-2024 20:18 uur: Na het stoppen van de release is de performance stabiel gebleven. Zojuist is de release alsnog succesvol afgerond met enige vertraging tot gevolg, maar een veel kleinere impact dan vanmiddag. Wij gaan nog onderzoeken wat dit heeft veroorzaakt, maar sluiten bij deze de verstoring.   15-01-2024 15:58 uur: Wij zien dat een release een onvoorziene invloed heeft op de werking van Self Service. Wij hebben de release gestopt en zullen deze vanavond, buiten kantoortijden, uitbrengen om de impact te beperken. Onze excuses voor het ongemak.

28 november 2023 15.30 uur Alle synchronisaties zijn gedaan en de autorisaties zijn naar Mijn Youforce gestuurd. De processen die mogelijk miste moeten nu weer beschikbaar zijn voor de gebruikers. Het kan mogelijk zijn dat je nog een keer volledig moet uit/inloggen (via de knop uitloggen niet door middel van het kruisje in de browser).   28 november 2023 12.30 uur Op dit moment is de synchronisatie voltooid. Alle autorisaties zullen nu vanuit Self Service opnieuw naar Mijn Youforce worden verstuurd. Zoals eerder aan gegeven kan dit er wel voor zorgen dat er nu sprake is van traagheid in de performance. Zodra alles voltooid is wordt dit bericht weer geupdate.   28 november 2023 10.00 uur Op dit moment is het mogelijk dat gebruikers processen missen in Mijn Youforce ondanks dat deze wel zijn ingericht.   Afgelopen dinsdag, 21 november, is er een release geweest. Deze heeft er onbedoeld voor gezorgd dat bij gebruikers die meerdere rollen hebben (bijvoorbeeld manager en medewerker), een wijziging in een van de processen(workflows) voor een van deze rollen er voor zorgt dat de autorisaties voor de andere rol zijn verwijderd. Ter verduidelijking, wanneer een workflow voor de manager is aangepast, zorgde dit ervoor dat de autorisaties voor dezelfde gebruiker op de medewerker rol verwijderd zijn. Wanneer de gebruiker dan weer inlogt als medewerker is het mogelijk dat er processen missen.   Gister zijn we gestart met het opnieuw inlezen van alle autorisaties. Helaas neemt dit wat tijd in beslag. We hopen hiermee rond de lunch klaar te zijn zodat tijdens de lunch deze autorisaties naar Mijn youforce gestuurd kunnen worden. Dit kan ervoor zorgen dat er tijdens de lunch een tragere performance ontstaat.  

8-11-2023 09:30 Update  We hebben het probleem met e-mailvertraging opgelost. De email wordt weer op een normale manier verzonden.    3-11-2023 11.00 Update Op dit moment constateren we een aanzienlijke afname van de wachtrij, waardoor de reactietijden verkorten. De analyse om de exacte reden van deze vertraging af te ronden is nog niet afgerond. 2-11-2023 16:30 uur: Op dit moment zien we dat er vertraging is op de mail servers. Dit houdt in dat mails zoals gebruikers informeren/notificatie verzenden of een aanvullende email in sommige gevallen pas na 3 of 4 uur bij de gebruiker binnen komen. Er wordt op dit moment onderzocht wat de vertraging veroorzaakt.

6-6-2023 11:05 Er is een fix uitgerold. De export loopt weer door. Mogelijk dat mutaties nog in een "wachtrij" staan. Deze zal dan zo snel mogelijk worden opgelost.   Bericht wordt hierbij afgesloten   6-6-2023 09:15 uur Gisteren was er een verstoringen op de Export. Deze is voor Beaufort opgelost. Echter voor Education staat de export nog stil. Op dit moment wordt er hard gewerkt aan een fix. Wij houden u op de hoogte over de voortgang.   Volgende bericht om 11:00 uur  

5 juni 2023 1:15 Er is een fix uitgebracht die dit probleem heeft opgelost. Wij zien nu voor alle klanten dat de export weer loopt. Voor sommige klanten is er een wachtrij opgebouwd van nog niet verstuurde mutaties. Momenteel zijn wij bezig deze wachtrijen weg te werken.   5 juni 2023 11:20 Wij hebben de oorzaak gevonden en zijn bezig aanpassingen te doen. Wij verwachten dat dit de problemen snel zal oplossen, maar we hebben nog geen specifieke release tijd. Uiterlijk 14:00 zullen wij een update geven. Als er voor die tijd nieuws is zullen wij dit eerder plaatsen.   5 juni 2023 10:30 uur   We zien dat er vertragingen zijn in het aanmaken van de export bestanden. Wij zijn bezig te onderzoeken waarom deze vertraging speelt. Zodra hier meer informatie over is brengen wij u verder op de hoogte.

2 juni 2023 9.30 uur Op dit moment is het genereren van bestanden weer op normaal niveau. Intern word er verder aandacht besteed aan het voorkomen van dit soort vertragingen.   1 juni 14:00 uur Op dit moment krijgen we opnieuw meldingen dat de document generation vertraagd is. DEVOPS is op de hoogte en er wordt gewerkt aan een oplossing.   1 juni 2023 11:00 uur We zien dat de vertraging is verholpen. De bestanden worden weer op normaal niveau gegenereerd.   31 mei 2023 15:30 uur We zien dat er op dit vertragingen zijn bij het opstellen van documenten. Hierdoor kan het langer duren voordat het document gegenereerd is. We werken met hoge prioriteit aan een oplossing. Zodra er meer bekend is zal het bericht worden geupdate.

Update 26-5-2023 10.40 uur: Afgelopen week hebben we een release gehad waarmee dit issue is opgelost. De documenten zouden nu juist toegevoegd moeten kunnen worden zonder de workaround toe te passen.   -- Op dit moment ontvangen we meerdere meldingen dat het uploaden van een document zorgt voor een foutmelding.    De foutmelding geeft aan dat in het bestand een andere extensie is gevonden die niet wordt geaccepteerd door Self service. Hieronder een voorbeeld.     Wij hebben een workaround. Als de PDF nogmaals opgeslagen wordt via de Print knop (print to PDF) of via 'save as' dan kan de nieuwe versie wel geüpload worden.   PD is op de hoogte van het issue en werkt aan een oplossing.

Vanochtend hebben wij performance problemen geconstateerd. Deze problemen hebben van 9:00 uur t/m 10:30 uur geduurd. Een aantal processen namen erg veel tijd en capaciteit in beslag. Hierdoor liepen de andere processen op de server met vertraging. Dit had voornamelijk te maken met het berekenen van autorisaties. Inmiddels hebben wij acties ondernomen en zijn deze problemen opgelost. Wij zien ook in de monitoring de performance weer stabiliseren. 

Update 21 september 2022 - 09:00 - We zien dat de acties die we gisteren hebben uitgevoerd, hebben geholpen en dat de performance van Self Service weer stabiel is. Hiermee sluiten we dit bericht.   Update 20 september 2022 - 17:00 - We hebben een aantal corrupte bestanden verwijderd en verwachten dat de performance in de loop van de avond verbetert. We nemen nog contact op met Microsoft Azure om de dieperliggende oorzaak te achterhalen. Morgen volgt er een nieuwe update.   20 september 2022 - 14:00 - Op dit moment is er sprake van een verstoring binnen Self Service waarbij verschillende foutmeldingen optreden waardoor de toegang is vertraagd  of geblokkeerd. We onderzoeken de oorzaak en houden je op de hoogte. 

14 september 08:45 - De verstoring is opgelost. Wij sluiten deze melding. 13 september 11:30 - Door verminderde performance in Self Service kan foutmelding 500 verschijnen. Op dit moment wordt hier onderzoek naar gedaan. Wij houden je op de hoogte van de voortgang.

Update 25 april 2022 - 17:00 uur - We zien dat de performance weer goed is en dat de 500-errors niet meer voorkomen.   Update 25 april 2022 - 10:15 uur - We hebben de oorzaak gevonden en zijn bezig met het voorbereiden van de oplossing. Om 11.00 uur zullen wij de oplossing in productie nemen wat kan betekenen dat Self Service tijdelijk niet te benaderen is (maximaal 30 minuten). Hierna zullen de performance problemen verholpen zijn.   25 april 2022 - Op dit moment is de performance binnen Self Service vertraagd. Ook ontstaan er 500-errors in verschillende workflows. We werken aan een oplossing en houden je op de hoogte.

Wij hebben zojuist een korte verstoring gehad in de performance. Deze heeft geduurd van 9.37 uur tot 9.40 uur. Gedurende deze tijd kan het zijn dat u performance problemen hebben gehad. Deze verstoring komt door een update vanuit Microsoft. Wij blijven dit monitoren, maar er worden geen verdere updates verwacht. 

Goedemiddag,   Tijdens het uitvoeren van de release (https://community.visma.com/t5/Nieuws-Youforce-Self-Service/Release-26-01-2024/ba-p/635268) was er onverwacht een impact op de performance. De oorzaak is achterhaald en dit zal een volgende keer niet voorkomen. Excuus voor het ongemak.    

3-10-2023 16:45 uur: De performance is weer op peil en gestabiliseerd.    3-10-2023 16:30 uur: We zien op dit moment problemen met de service instances in de monitoring. Het kan zijn dat je hierdoor vertragingen en/of witte schermen ervaart.   We zijn al bezig om dit te stabiliseren en op normaal niveau te brengen.