Over de recente klachten van gebruikers over Claude's "verstandelijke achteruitgang" in de afgelopen maand: soms zijn de antwoorden op vragen onbegrijpelijk, en soms verschijnen er vreemde tekens, zoals het Thaise teken "สวัสดี" in een Engelse zin. Anthropic heeft zojuist een gedetailleerde verklaring gegeven en bevestigd dat de problemen met Claude het gevolg zijn van drie bugs in de infrastructuur, en niet van een opzettelijke degradatie van het model of door te veel verkeer. Wat zijn deze drie bugs precies? Bug 1: Verkeerde verzending van verzoeken Begin augustus werden sommige korte contextverzoeken per ongeluk naar servers gestuurd die speciaal zijn ontworpen voor lange contexten. Aanvankelijk was slechts 0,8% van de verzoeken getroffen, maar tegen het einde van augustus, na een aanpassing van de belasting, steeg het foutpercentage tot 16%. Bovendien, omdat de serverroutering een geheugenfunctie heeft, is de kans groot dat dezelfde gebruiker herhaaldelijk problemen ondervindt. Bug 2: Onverwachte vreemde tekens Op 25 augustus veroorzaakte een optimalisatie verwarring in de modeloutput. Sommige gebruikers ontdekten dat Claude bij het beantwoorden van Engelse vragen plotseling "สวัสดี" (Thais) of Chinese tekens produceerde. Deze fout verscheen heel plotseling en het probleem duurde ongeveer een week. Bug 3: Diep verborgen TPU-compilerprobleem Eveneens eind augustus activeerde een optimalisatie een verborgen bug in de onderliggende compiler XLA van de Google TPU-chips. Deze bug kan ervoor zorgen dat Claude af en toe het meest waarschijnlijke woord verliest, wat leidt tot een onbetrouwbare en fluctuerende kwaliteit van de antwoorden. Door de combinatie van deze drie problemen, die elk verschillend tot uiting kwamen, was het een enorme uitdaging om ze op te sporen en op te lossen. Anthropic voltooide de geleidelijke reparatie pas begin september. Toekomstige verbetermaatregelen Anthropic heeft aangegeven dat deze storing enkele tekortkomingen in de tests blootlegde. In de toekomst zullen ze de gevoeligheid van de monitoring verhogen en blijven ze gebruikersfeedback verzamelen om problemen sneller te ontdekken en op te lossen. Ze moedigen gebruikers ook aan om, als ze ongebruikelijk gedrag van Claude opmerken, dit altijd via de interface van Claude te melden. Anthropic belooft dat de kwaliteit van de Claude-service altijd hun hoogste prioriteit heeft.