Verstoringen Youforce API & bestandsuitwisseling

2024-03-13 16:00 Alle API's zijn inmiddels bijgewerkt en het mutatieproces werkt weer normaal.  Hiermee is de verstoring verholpen. 2024-03-13 9:00 De verstoring in de infrastructuur is opgelost. Op dit moment wordt de data opnieuw geladen. Dit kan enkele uren duren.  De komende tijd zullen wij het proces nauwlettend volgen en indien nodig maatregelen nemen. Wij gaan er vanuit dat in de loop van de dag alle data in de API weer in sync is met HR Core Beaufort 2024-03-12 16:00 Op dit moment hebben wij een verstoring in onze interne infrastructuur van onze domein API's waardoor mutaties uit HR Core Beaufort niet doorkomen in de API. Deze verstoring geldt voor alle domein API's. Op dit moment werken wij aan een oplossing. Zodra wij de verstoring opgelost hebben, zal de data in de API's automatisch weer bijgewerkt worden.   

12:00 - We hebben performance problemen geïdentificeerd in de databases van de File API. We werken momenteel aan het vinden van een oplossing hiervoor. Onze File API-abonnees kunnen time-outs ervaren bij het weergeven/downloaden van bestanden. Er wordt geen impact verwacht op het aanleveren van bestanden aan de File API. [Update] 14:13 - De uitvoering van de oplossing is gestart. Enkele minuten downtime worden verwacht voor alle abonnees totdat de nieuwe database-index is gerecreëerd. Bestandsuitwisselingsgebruikers worden ook nu beïnvloed.   [Update] 14:36 - De uitvoering van de oplossing is zojuist voltooid en de service is weer operationeel. Bestands-API-abonnees en Bestandsuitwisselingsgebruikers kunnen weer bestanden bekijken en downloaden.

[Update]  Bestandsuitwisseling is weer beschikbaar. Door de technische oorzaak van de storing is het helaas niet mogelijk Bestandsuitwisseling in een normaal browser venster te openen zonder eerst uw PC te herstarten. Een andere mogelijkheid is het open van Bestandsuitwisseling in een nieuw Incognito browser venster (https://files.youforce.com)   Op dit moment is er een storing bij het openen van de Bestandsuitwisseling applicatie. We zijn op de hoogte van het probleem en zijn bezig om het zo snel mogelijk voor je op te lossen.    

[Update] Het probleem is nu opgelost en de service werkt weer normaal.   We onderzoeken momenteel een probleem in de File API. Bestanden worden succesvol geüpload door de uitgevers, maar ze worden niet bezorgd aan de abonnees.

Afgelopen weekend heeft er een storing plaatsgevonden bij het authentiseren van API calls. De storing heeft zich enkel voorgedaan bij API gebruikers met credentials uit de Visma Developer portal (developers.visma.com) en de API call POST https://connect.visma.com/connect/token   Door de storing waren de domein API's en de File API van zondag 28 mei 14:00 uur tot en met maandag 29 mei rond 14:00 uur niet bereikbaar.    De storing is inmiddels opgelost en de alle API's werken weer normaal.  

Uit interne monitoring zien wij dat het verwerken van mutaties uit Beaufort in de API meer tijd vergt dan gebruikelijk.  Op dit moment wordt het issue door de teams onderzocht en opgelost. De vertraging kan verschillen per klant. De teams zijn hiervan op de hoogte.   impact: alle API's     Update: 15 mei 2023 Uit onderzoek blijkt dat de verbinding met de database server niet optimaal werkt. Daardoor zien we - met name op piekmomenten - dat er vertragingen optreden bij de verwerking van data. Teams zijn druk bezig met corrigerende maatregelen om te zorgen dat de verbinding weer optimaal werkt.   Update: 17 mei 2023 Afgelopen weekeinde is er onderhoud uitgevoerd op onze infrastructuur om de performance van de verwerking te verhogen. Ondanks de uitgevoerde werkzaamheden constateren onze teams incidentiele verstoringen waarbij communicatie tussen systemen niet optimaal presteert. In de komende dagen én het aankomende weekend worden wijzigingen doorgevoerd met als doel deze communicatie te verbeteren.   Update: 23 mei 2023 De afgelopen periode zijn alle verstoringen onderzocht en verholpen. Inmiddels werkt de service weer zoals voorheen.  Hiermee sluiten wij het incident. Uiteraard zullen wij op de achtergrond de service nog extra blijven monitoren om nieuwe verstoringen te voorkomen.

  Update : Op dit moment bereikt ons het bericht dat alle services weer operationeel zijn   Op dit moment is er een verstoring in de Youforce API's. De volgende services zijn hierdoor getroffen: Youforce API for IAMoperationeel zijn Youforce API for Learning Youforce API for WFM Youforce API for MLM Youforce Extensions API Er wordt met de grootst mogelijk spoed aan een oplossing gewerkt. Zie ook de status pagina https://status.visma.com/ voor meer informatie

Vandaag, 8 maart 2023, is er storing geweest in de domein API. Hierdoor waren alle domein APIs tijdelijk niet bereikbaar en werd een error "503 Service Temporally Unavailable" gegeven.   Inmiddels is het probleem weer opgelost en zijn alle API's weer bereikbaar. Mocht u of uw integratie partner bovenstaande melding hebben gehad, dat kunt u vanaf de api calls opnieuw uitvoeren en krijgt u de data terug zoals verwacht. 

Opmerking: 07-03-2023 17:51 We hebben het probleem geanalyseerd en opgelost. De Youforce File API werkt nu zoals verwacht. We zullen het nauwlettend in de komende periode blijven volgen om verdere verstoringen te voorkomen.   Opmerking: 07-03-2023 11:22 Op dit moment hebben wij een storing in de Youforce File API. Wij onderzoeken dit met de hoogste prioriteit en houden je op de hoogte van de voortgang.

De afgelopen week heeft een aantal klanten mogelijk een melding 429 Too many request bij één of meerdere API calls ontvangen. Deze melding maakt onderdeel uit van de security mechanisme rond onze API's. De melding betekent dat de API de betreffende API call niet heeft kunnen afhandelen in verband met de algemene drukte op de API zelf. Deze 429 melding is echter een kortstondige onderbreking bij de verwerking van de API  call. Het systeem is zo ingericht dat deze melding weer verdwijnt als het rustiger wordt op de API.  De afgelopen dagen hebben wij nogmaals naar het algemeen gebruik van de API gekeken en zijn maatregelen genomen om deze 429 melding zoveel mogelijk te voorkomen. Wij hopen dat hiermee de problemen zoveel mogelijk zijn opgelost. Aandachtspunt voor developers Een 429 Too many request melding is speciale foutmelding die aangeeft dat de betreffende call als gevolg van algemene drukte op het systeem niet verwerkt kon worden. Vaak is deze piek maar van tijdelijke aard en kan het systeem de call na korte onderbreking gewoon verwerken. Wij adviseren developers om op basis van deze 429 melding een retry mechanisme in te bouwen en de call nogmaals uit te voeren met een kleine vertraging. Bijvoorbeeld na 100 - 200 msec nadat de 429 error is ontvangen.  Dit retry mechanisme kan 2 a 3 keer uitgevoerd zonder dat dit tot problemen leidt.  Verder geldt dat wij developer adviseren om niet te veel calls parallel uit te voeren en de quota van 100 calls per minute zoveel mogelijk te respecteren.