Bug / „Kill Pill“ im Citrix Lizenz Server 11.17.2 Build 51000 im CSP

Für alle Citrix Service Provider die heute aufgewacht sind und plötzlich keine Lizenzen mehr im Lizenz Manager hatten: Im Citrix Lizenz Server 11.17.2 Build 51000 gibt es einen Bug mit CSP Lizenzen!

Update 06.03.2025 (14:45 Uhr): Anruf vom Citrix Support mit Anweisung die „extension.dat“ zu löschen, den Server neuzustarten sowie die zurückgegeben und neu ausgestellten Lizenzen zu importieren. Es sieht derzeit gut aus.

Update 05.03.2025 (19:45 Uhr): Rückmeldung vom Support (s.u.). Plötzlich werden Lizenzen beim „License Activation Service“ angezeigt.

Update 04.03.2025 (19:30 Uhr): Rückmeldung vom Support bzgl. Rückfrage „Was tun, wenn das CSP 2.0 Lizenzfile auch das UB=1 Attribut hat?„. Antwort: Alle Citrix Virtual Apps and Desktops Lizenzen im Portal zurückgeben und erneut zuteilen. Spoiler: Das neue Lizenzfile ist identisch zum alten und hat in unserem Fall nur ein neues Ausstellungsdatum (ISSUED=5-mar-2025) bekommen. Ich reihe die Antwort der Vollständigkeithalber unten als Zitat ein. 🙂 Ebenso habe ich eine erste Rückmeldung zum Thema „Was tun, um Compliant zu sein?„.

Update 04.03.2025 (16:00 Uhr): Die Links zum Google Drive, die eine Anmeldung und im Anschluss Zugriffsfreigabe auf die Dateien benötigten, wurden entfernt. „Wie üblich“ kann man sich jetzt mit seinem Citrix Account einloggen und bekommt die extensions.dat zum Download angeboten.

Update 03.03.2025 (Uhrzeit unbekannt): Citrix hat einen Support Artikel (CTX692740 – Citrix – CSP Monthly Consumption licenses EOL) bereitgestellt. Weiter unten ein paar Punkte dazu.

Objective

On 01-Mar-2025, Citrix Service Providers running License Server v11.17.2 build 51000 with a combination of certain types of licenses were unable to launch end user sessions. The impacted licenses were associated with a discontinued licensing offering. There were some cases where partners on the new CSP 2.0 annual license, but with older license files were also impacted.

Update 03.03.2025 16:15: Weiter unten habe ich eine Rückmeldung zum Case vom Distributor als Zitat eingefügt. Spoiler: Die Build 51000 hat tatsächlich eine „Kill Pill“ implementiert bekommen!

Update 03.03.2025 09:30: Hier einmal vorab sowie kürzer und schmerzloser ein Blick ins „legacyLicenseMgmtTool.log“ (Tipp: Der Timestamp „1740783600“ in CET: Samstag, 01 März 2025 00:00:00) zu finden unter „C:\Program Files (x86)\Citrix\Licensing\LS\Logs“:

24/12/2024 11:46:29.994 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
24/12/2024 11:47:58.362 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
…
13/01/2025 23:57:06.018 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
14/01/2025 00:07:07.011 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
…
27/02/2025 05:43:06.024 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
27/02/2025 05:53:07.015 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
27/02/2025 06:03:08.014 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
…
28/02/2025 23:47:18.006 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
28/02/2025 23:57:19.012 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
01/03/2025 00:07:20.022 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
01/03/2025 00:07:20.022 [Warning] : main : legacylicensemgmttool.cpp : 206 : Time to clean the licenses
01/03/2025 00:07:20.022 [Warning] : main : legacylicensemgmttool.cpp : 266 : SUCCESS!! Tool Execution Complete
01/03/2025 00:07:21.584 [Warning] : main : legacylicensemgmttool.cpp : 196 : Using default time 1740783600
01/03/2025 00:07:21.584 [Warning] : main : legacylicensemgmttool.cpp : 206 : Time to clean the licenses

(Dieser Citrix Lizenz Server wurde am 24.12.2024 gegen 11:45 Uhr auf die Version 11.17.2 Build 51000 geupdated!)

Hier einmal kurz und schmerzlos die ersten Rückmeldung vom Citrix Support zum Dilemma:

Samstag, 01.03.2025:

Hi Jan,

I hope you’re doing well. Tried calling you to the contact provided on case but not able to reach.

We sincerely apologize for any disruption to your business activities. Please rest assured that we are taking all necessary steps to prevent such occurrences in the future.

We would like to inform you of an ongoing issue with the Citrix License Server, version 11.17.2, Build 51000, which has caused the valid license file to disappear unexpectedly.

This issue is impacting the server’s ability to communicate with the installed and renewed license file.

As a temporary workaround, we recommend downgrading the license server version to 11.17.2, Build 49000. This version will resolve the issue and allow the license server to successfully communicate with the renewed license file.

To implement this solution, please follow these steps:

1. Uninstall the current version of Citrix License Server (11.17.2, Build 51000).
2. Download and install Citrix License Server version 11.17.2, Build 49000 from the below link:
   https://www.citrix.com/downloads/citrix-virtual-apps-and-desktops/product-software/citrix-virtual-apps-and-desktops-1912ltsr-cu10-all-editions.html.
3. Install the renewed license file on the license server. Reference article: https://docs.citrix.com/en-us/licensing/current-release/citrix-licensing-manager/install
4. Restart the Citrix licensing services and verify that it now successfully communicates with the valid license file.

We apologize for the inconvenience this issue has caused and appreciate your understanding.
Our team is working diligently with Citrix to ensure a permanent resolution is implemented as soon as possible.

Should you need any assistance with the workaround or have further questions, please don’t hesitate to contact our support team at call us at your earliest convenience on our toll free number +1 800-XXX-XXXX option 2 at any time with the case number to expedite your request.

For immediate assistance please contact Customer Service via Phone or LiveChat. Live Chat is available 24 hours on weekdays(Monday – Friday).

Thanks and Regards,
XXX
Cloud SG Licensing (Infosys)

---

Sonntag, 02.03.2025:

Hi Jan,

License server downgrade to 49000 build will be compliable for the CVAD release 2411 please check.

Please reply to this email or call us at your earliest convenience on our toll free number +1 800-XXX-XXXX option 2 at any time with the case number to expedite your request.

For immediate assistance please contact Customer Service via Phone or LiveChat. Live Chat is available 24 hours on weekdays(Monday – Friday).

Thanks and Regards,
XXX
Cloud SG Licensing (Infosys)

---

Montag, 03.03.2025:

(Rückmeldung vom Distributor und dessen technischem Kontakt bei Citrix)

Hi Jan,

I have spoken to my technical contact at Citrix and was only able to clarify what has already been described here in the course of the mail:

A lot of ‘pressure’ was put on the partner to update the licence server to version 51000.
This activates a ‘kill pill’ which means the following:

If the partner is not shown as fully compliant in our telemetry, then the licence file is removed from the licence server – and then nobody can work anymore or everything goes into grace period – at least those for whom this licence server version is active

Quite a few requirements have to be met in order to be compliant.

The quick workaround is to downgrade the licence server to an older version and – if still available – import a licence file that was activated before 01.09.2024.

I have not yet received an official statement

Regards
XXX

---

Dienstag, 04.03.2025:

Hi Jan,

Thank you for your response.

We kindly request that you return the entire license count and allocate the licenses accordingly, ensuring they reflect the MSP2 attribute.

Please let us know if you require any further assistance. We will be happy to help.

For immediate support, please contact Customer Service via Phone or LiveChat. LiveChat is available 24 hours a day, Monday through Friday.

Regards,
XXX
Cloud SG Lead
Email: XXX@cloud.com
Working Hours: MON-FRI, 04:00 AM-01:00 PM EST

---

Mittwoch, 05.03.2025:

Hi Jan,

Thank you for the response.

We would like to let you know that UB=1 and MSP2 attributes will be available with the new license file.

If the license set is returned completely and allocated, I request you to install the new license file and validate if licenses are reflecting.

Regards,
XXX
Cloud SG Lead
Email: XXX@cloud.com
Working Hours: MON-FRI, 04:00 AM-01:00 PM EST

---

Zum CTX692740 Artikel:

Es ist an der Stelle völlig korrekt, dass Citrix die alten Lizenzen zum Dezember abgekündigt hat. An keiner Stelle wurden wir als Partner darauf hingewiesen, dass es einen „Kill Switch“ im Lizenz Server geben wird, der an einem Samstag im März umgelegt wird. Schauen wir uns weiter die betroffenen Lizenzen an:

What license types were impacted?

• Legacy MRR or CSP 1.0 licenses.
• New CSP 2.0 annual licenses which were on or before September 20, 2024.

Da wir leider unter 2000 Citrix Lizenzen im Monat reporten und somit von der Zwangsumstellung zu Arrow (Partnering with Arrow Electronics to Boost Support for Smaller CSP Partners in North America and EMEA – Citrix Blogs) beglückt wurden, was alles andere als gut und rund lief, stammten unsere CSP 2.0 Lizenzen aus Dezember 2024. Somit waren wir also eigentlich gar nicht betroffen. 🙂

Schauen wir weiter im o.g. Artikel und lesen, wie man zwischen den legacy CSP 1.0 Lizenzen und den coolen, hippen CSP 2.0 Lizenzen unterscheidet:

How to distinguish between legacy and new CSP 2.0 license files?

The license server uses different identifiers to distinguish between licensing programs. The legacy CSP MRR license files contained ‘UB=1’ identifier, while the new licenses contain the ‘MSP2’ attribute.

Schauen wir in unser CSP 1.0 und CSP 2.0 Lizenzfile rein. Oben das alte CSP 1.0 File und unten das CSP 2.0 File und stellen fest:

• Die CSP 1.0 MRR Lizenzdatei hat tatsächlich den Eintrag „UB=1„
• Das aktuelle CSP 2.0 File aus Dezember hat neben dem korrekten „MSP2“ Attribut auch das „UB=1“
  • UB=1: Citrix Provisioning for Desktops
  • UB=1: Citrix Provisioning
  • MSP2 + UB=1: Citrix Virtual Apps and Desktops Premium

Hier jetzt noch ein kurzer Exkurs mit einem ersten Stand zum Thema „Was tun, um Compliant zu sein?„:

1. Der Citrix Lizenz Server muss Lizenz Telemetriedaten nach Hause senden ✅
2. Der Citrix Lizenz Server muss bis zum 31. Januar 2025 auf v11.17.2 Build 51000 geupdatet werden ✅
3. Lizenzen die vor dem 20. September 2024 zugewiesen wurden müssen zurückgegeben und erneut zugewiesen werden ✅

An dieser Stelle ein wenig Kontext zum Update vom 05.03. 19:45:

• Nachdem das Lizenzfile nach Anweisung vom Support dennoch import wurde (und der Haken zum Löschen bei Duplikat gesetzt war), haben wir die doppelte Menge an Lizenzen. Nice. 😉
  
• Zusätzlich tauchten aus dem Nichts(?) Lizenzen unter dem Punkt „License Activation Service“ auf. Da war bis heute Mittag noch gähnende Leere und bereits vor dem erneuten Import des neuen Lizenzfiles wurden mir auch dort die doppelte Menge an Lizenzen angezeigt.
  

Das Update vom 06.03.2025:

Auch wenn es vorher mit (oder auch ohne) „extension.dat“ schon korrekt aussah, jetzt nochmal alles mit Bestätigung vom Support. Ich bin derzeit zwar weiterhin ein wenig skeptisch bzgl. der Gesamtsituation und werde mir deshalb vorsorglich für Sonntag, den 01.06., einen Wecker stellen. We’ll se, was die „Kill Bill Pill Volume 2″ zu bieten hat. Da ich hier im Artikel noch nirgends direkt eine Quelle für die nächste „Kill Pill“ präsentiert habe, hole ich das direkt nach:

Somit gab es gestern und gibt es heute sowie morgen dann auch einen weiteren Tag mit dem Citrix Support in Sachen Lizenzen. 🙂