Evalutatie Open BSW

Er worden technische beproevingen gedaan van oplossingen zoals LaSuite & OpenDesk. Hieronder worden de bevindingen bijgehouden. Elke evaluatie kan op verschillende niveaus gedaan worden, namelijk:

• Proof of Concept: demobaar product maar geen security, reliability, backups, schalen en monitoring
• Pilot: werkbaar maken voor kleine gebruikersgroep, schaalbaarheid en monitoring wordt nog niet meegenomen
• Productie: Werkbare omgeving voor grote groep mensen die voldoet aan de meeste eisen zoals security, reliability etc.

Tijdens de evaluatie kijken we naar een aantal componenten. De mate waar we ernaar kijken ligt aan het niveau waarop we de evaluatie doen. Deze componenten komen uit de ISO 25010.

• Security
• Maintainability
• Flexibility
• Reliability
• Compatibility

Zoals u ziet worden er nog geen rekening gehouden met functionele geschiktheid of Prestatie-efficiëntie. Dit komt mede omdat we nog geen requirements beschikbaar hebben waaraan de producten moeten voldoen. Ook houden we nog geen rekening met Prestatie-efficiëntie omdat dat in deze fase van het project nog geen belang heeft.

Termen

We houden een lijst van termen bij. Dit doen we zodat iedereen dezelfde definities en interpretaties gebruikt voor termen en het vermijd verwarring.

Evaluatie LaSuite

Momenteel worden de evaluatie van LaSuite gedaan op Proof of concept niveau.

Intro

LaSuite is de merknaam voor een groep van SaaS oplossingen die aangeboden worden door de franse overheid (DINUM) aan alle overheidsmedewerkers zoals uitvoering instanties, provincies, gemeentes, ministeries, scholen etc. De meeste applicaties zijn opensource, maar niet allemaal. Het doel is een meer efficiënte, simpele en soevereine samenwerk oplossing.

De basis van de oplossing is een Identiteits- en toegangsbeheer systeem waarbij alle overheden aangesloten zijn genaamd ProConnect. De producten worden beschikbaar gesteld over het internet en alle overheids medewerkers kunnen inloggen via het identiteits systeem en direct interdepartmental samenwerk op alle aangeboven tools.

Componenten

LaSuite bestaat uit de componenten:

Onze Franse collega’s vertelden dat ze van plan zijn de technology onder Webinar en WebConf te vervangen door liveKit - source code.

Bovenstaande lijst is nog niet gevalideerd door onze Franse collegas en heeft dus nog wat onzekerheid.

Bevindingen

Generiek

De documentatie van LaSuite is moeilijk te vinden. Ook is lastig te achterhalen welke software precies draait onder de applicaties. Uiteindelijk hebben we alle repositories op github moeten analyseren die onder DINUM vallen.

Alle componenten van LaSuite worden SaaS aangeboden. Er is geen informatie beschikbaar om de volledige suite te hosten. Bij een aantal producten zijn helm charts beschikbaar die we kunnen gebruiken om die applicaties op kubernetes te installeren. We zullen dus de componenten apart moeten bekijken.

Voordat je kan beginnen met LaSuite moet men eerste een identity provider hebben. We hebben voor KeyCloak gekozen omdat de developers hier al mee bekend zijn. Om het inlogproces in Rijksoverheid huisstijl te tonen hebben we gebruik gemaakt van ROOS van RVO. Dit is de implementatie van het NL Design System die het meest volwassen en toepasbaar is. Wel is het de vraag of dit toekomstvast is omdat het voor RVO ontwikkeld wordt en niet voor andere overheidsorganisaties. Take-aways hierbij zijn dat het verstandig is om de flow en layout van Keycloak te volgen.

Meet heeft real time verbindingen nodig die niet makkelijk over ingress gaan. Dus je moet een goed begrip hebben van het netwerk om deze goed te installeren.

Als we het over TChap hebben hieronder bedoelen we eigenlijk element synapse matrix implementatie incusief the clients voor web, mobile and pc van element.

Als alternatief voor Resana hebben we nextcloud + collabora online uitgetest omdat resana geen open source product is. Hierbij testen we de features file storage & Sharing en online co-editing. Andere features zoals agenda etc kan ook in nextcloud maar hebben we niet uitgetest.

Performance Efficiency

Grist heeft minimaal 0.6 cpu aan resources nodig voor de database, anders is hij onbruikbaar traag AI-webservice: deze heeft GPUs nodig anders is het te traag TChap: Het kan even duren voordat rooms(chat groepen) gesynced zijn met alle andere homeservers.

Security

• Grist heeft sandbox opties voor kubernetes
• TChap maakt gebruikt van OLM encyptie
• Nextcloud & Collabora secure krijgen heeft een significante effort nodig.

Maintainability

• Grist support custom styling
• Grist is open source en dus aan te passen als nodig.
• Docs is open source en dus aan te passen als nodig.
  • Het upgrade proces is nog niet duidelijk beschreven en handmatig upgraden kan foutmeldingen opleveren.
• Meet is open source en dus aan te passen als nodig.
• TChap is open source en dus aan te passen als nodig.
• Nextcloud kan custom styling krijgen en is open source dus aan te passen als nodig
• collabora is open source en dus aan te passen als nodig

Flexibility

• Grist support Single Sign on met OpenID connect en SAML.
• Grist heeft mogelijkheid om API endpoints voor AI te configureren
• Grist is containerized wat het makkelijk deploybaar maakt op kubernetes
• Docs heeft styling parameter in de backend maar vermoed dat voor grote styling changes we de frontend next.js application moeten aanpassen
• Meet support single sign on
• TChap support Single sign on
• Tchap kan integreren met verschillende video conferenctie tools
• Tchap admin panel valt onder betaalde licentie.
• NextCloud heeft vele apps die geinstalleerd kunnen worden.
• NextCloud kan eigen apps toegevoegd krijgen
• NextCloud heeft apps voor standard protocollen zoals OpenID Connect
• NextCloud heeft support voor open document formaten (ODF)
• Collabora heeft support voor WOPI. Dat is voor externe storage zoals NextCloud, Owncloud, SharePoint & wordpress en vele anderen

Reliability

• Grist support backups naar s3
• grist heeft detail telemetry
• Docs heeft integratie met sentry
• Meet heeft integratie met s3
• Tchap heeft detail telemetry
• Nextcloud heeft detailed telemetry

Compatibility

• Grist kan integreren met google drive
• Grist slaat de data op in SQLite formaat
• Grist kan Import van CSV formaat
• Grist kan met meerdere type SQL databases integreren
• Grist heeft AI support compatible met OpenAI Interface
• Docs kan met meerdere s3 stores integreren
• Docs kan met SMTP mailservers integreren
• Docs kan met meerdere type SQL databases integreren
• Docs support OpenID Connect
• Docs heeft AI inference endpoint support compatible met OpenAI Interface
• Meet heeft AI support compatible met OpenAI Interface
• AI-webservice ollama support openai interface wat er voor zorgt dat andere tool makkelijk kunnen integreren.
• Tchap volgt the matrix standard voor chat
• NextCloud heeft federation sharing. Dit is gebaseerd op OpenCloudMesh standard
• NextCloud heef WebDAV support.
• NextCloud kan S3 compatible storage gebruiken.

Evaluatie OpenDesk

Intro

openDesk is de aanpasbare kantoor- en samenwerkingssuite. Deze oplossing is grotendeels samengesteld door de Duitse overheid. ZenDiS is de organisatie die de tool ontwikkelt. OpenDesk combineert veel open-source producten in deze oplossing en integreert ze met elkaar. De tool heeft een sterke focus op data soevereiniteit en veiligheid. De suite heeft versie 1.0 gerelease in oktober 2024 en wordt op moment van schrijven (december 2024) door ongeveer 600 mensen gebruikt. Versie 1.1 wordt in december 2024 gereleased.

De sourcecode voor OpenDesk is volledige beschikbaar gemaakt op opencode

Voor de evaluatie hebben we de tool v1.0 geinstalleerd op https://portal.opendesk.apps.digilab.network/

Componenten

OpenDesk bestaat uit veel componeneten. De hoofd componenten zijn:

Alle informatie kan gevonden worden op opencode.

Bevindingen

Generiek

• OpenDesk is gedocumenteerd. Een aantal documenten zijn in het Duits wat het opzetten van OpenDesk vertraagd. Maar met de huidige vertaal oplossingen was dit geen groot probleem.
• Een aantal opties leken nog niet goed te werken als we die aan zetten zoals ReadWriteMany storage.
• OpenDesk bestaat uit een installatie pakket waarbij je componenten aan en uit kan zetten.
• OpenDesk heeft een afhankelijkheid van een LDAP server waar de gebruikers en andere metadata opgeslagen wordt.
• OpenDesk gebruik een keycloak extensie TOKEN_EXCHANGE, de keycloak is gekoppeld aan de ldap server
• OpenDesk is gemaakt om op kubernetes te installeren,
• Opendesk heeft een admin paneel waar je informatie van de LDAP server kan manipuleren.
• Opendesk heeft custom LDAP integraties nodig voordat SSO via openid connect werkt. De gebruiker moet in ldap staan voordat hij kan inloggen

Performance Efficiency

In de basis installatie zijn er 80 container applicaties, default vragen tussen de 0.1 en 1 cpu. totaal komen de resource requirements neer op +- 10 CPU cores en +-21GB geheugen. Wel is er redelijke response van alle services.

Security

Na het installeren moeten nog wat stappen genomen worden om security beter te regelen zoals kubernetes network policies en podSecurityPolicies.

Maintainability

• OpenDesk is opgebouwd uit opensource componenten, dus men kan alles aanpassen
• Alle containers worden momenteel uit de container registry gehaald van ZenDiS. Als we deze willen aanpassen zullen we onze eigen containers moeten bouwen of opties inbouwen in de OpenDesk Containers
• OpenDesk is makkelijk te installeren als Proof of concept op kubernetes omdat er alleen basis kubernetes componenten gebruikt worden.

Flexibility

• Er zijn heel veel helm charts wat het moeilijk maakt om alle opties te overzien.
• OpenDesk heeft veel configuratie voor kubernetes Nginx ingress. Dit betekend dat een andere ingress server veel werk met zich mee zal brengen omdat je zelf al deze resources moet herschrijven, als het al mogelijk is.

Reliability

• Momenteel worden databases en storage componenten mee gedeployed in OpenDesk als containers, deze zou je bij voorkeur afnemen van je hosting provider zodat backup direct geregeld is
• Tijdens overleg met onze Duitse collega’s bleek dat voor het opschalen een enterprise licentie genomen moet worden die extra componenten toevoegen. Ook was de migratie van versies nog niet perfect maar daar werkte ze nu hard aan.
• Er zijn End to End testen beschikbaar

Compatibility

Geen bevindingen

Evaluatie LEOS

Momenteel worden de beproevingen van LEOS gedaan op Proof of concept niveau.

Intro

LEOS is een webtool ter ondersteuning van het opstellen van wetgeving in de EU met online samenwerking, versiebeheer en co-editing. De software is ontwikkeld onder de Europese Commissie.

We hebben versie 5.1.3 uitgeprobeerd. De deployment code is beschikbaar op https://github.com/MinBZK/leos en de website draait https://leos.apps.digilab.network/

De sourcecode van LEOS is te vinden op https://code.europa.eu/leos/core

Bevindingen

Dit zijn de bevindingen voor LEOS.

Generiek

• Documentatie is duidelijk voor Proof of concept. Voor productie is er weinig informatie te vinden.
• Er wordt vermeld dat een aantal belangrijke componenten uit staat om ease of use te verbeteren, maar kan nergens vinden welke componenten dit zijn en hoe ik ze wel aan zet als we de volledige ervaring willen.
• Het is onduidelijk wat Annotate en LEOS met elkaar te maken hebben (er wordt wel in de documentatie naar Annotate gerefereerd als benodigd component)
• Leos lijkt niet Cloud Native ontwikkeld te zijn.
• Er is een OpenAPI spec beschikbaar wat fijn is.

Performance Efficiency

Het opstarten van LEOS heeft een relatief hoge hoeveelheid cpu en memory nodig. Wij gebruiken nu 0.3 cpu en 6Gi memory bij geen load. Bij deze specs duur het ongeveer 360 seconden om op te starten. Bij minder dan 3Gi memory start de applicatie niet.

Security

LEOS vereist java 8.0 (2014). Java 17 and Java 21 zijn momenteel de Long-Term-Support (LTS) varianten. Oracle geeft sinds 2019 geen public updates meer voor java 8.0. Wel is er een optie voor commericial klanten om updates te krijgen als ze een java 8 licentie afnemen.

Maintainability

LEOS is opensource en kan naar wens aangepast worden.

Flexibility

LEOS support een aantal verschillende databases en kan met JDBC geconfigureerd worden.

LEOS kan integeren met een idendity provider in SAML formaat.

i18n wordt gesupport wat meerdere talen support mogelijk maakt, default Engels en frans.

Reliability

Geen bevindingen

Compatibility

LEOS gebruik open standarden zoals het AKN4EU AkomaNtoso XML format, dit maakt het makkelijk voor andere applicaties die deze standaard supporten om de data te gebruiken.

LEOS gebruikt SAML, ik zou graag ook OpenID Connect zien.