<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//TaxonX//DTD Taxonomic Treatment Publishing DTD v0 20100105//EN" "../../nlm/tax-treatment-NS0.dtd">
<article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:tp="http://www.plazi.org/taxpub" article-type="research-article" dtd-version="3.0" xml:lang="en">
  <front>
    <journal-meta>
      <journal-id journal-id-type="publisher-id">69</journal-id>
      <journal-id journal-id-type="index">urn:lsid:arphahub.com:pub:8D21F818-6EEF-540F-91C7-D50E3E5A13E0</journal-id>
      <journal-title-group>
        <journal-title xml:lang="en">Maandblad voor Accountancy en Bedrijfseconomie</journal-title>
        <abbrev-journal-title xml:lang="en">MAB</abbrev-journal-title>
      </journal-title-group>
      <issn pub-type="ppub">0924-6304</issn>
      <issn pub-type="epub">2543-1684</issn>
      <publisher>
        <publisher-name>Amsterdam University Press</publisher-name>
      </publisher>
    </journal-meta>
    <article-meta>
      <article-id pub-id-type="doi">10.5117/mab.95.71304</article-id>
      <article-id pub-id-type="publisher-id">71304</article-id>
      <article-categories>
        <subj-group subj-group-type="heading">
          <subject>Essay</subject>
        </subj-group>
        <subj-group subj-group-type="scientific_subject">
          <subject>Bestuurlijke informatieverzorging (Management information)</subject>
          <subject>Corporate governance (Corporate governance)</subject>
          <subject>Overige vakgebieden (Other disciplines)</subject>
        </subj-group>
      </article-categories>
      <title-group>
        <article-title>Moraliteit programmeren? Financiële ethiek en fintech</article-title>
      </title-group>
      <contrib-group>
        <contrib contrib-type="author" xlink:type="simple" corresp="no">
          <name name-style="western">
            <surname>Soppe</surname>
            <given-names>Aloy</given-names>
          </name>
        </contrib>
        <contrib contrib-type="author" xlink:type="simple" corresp="yes">
          <name name-style="western">
            <surname>Joosten</surname>
            <given-names>Henriëtta</given-names>
          </name>
          <email xlink:type="simple">hj@henriettajoosten.nl</email>
          <uri content-type="orcid">https://orcid.org/0000-0003-1112-9515</uri>
        </contrib>
        <contrib contrib-type="author" xlink:type="simple" corresp="no">
          <name name-style="western">
            <surname>Wagensveld</surname>
            <given-names>Koos</given-names>
          </name>
        </contrib>
      </contrib-group>
      <aff id="A1">
        <label>1</label>
        <addr-line content-type="verbatim">Hogeschool Arnhem en Nijmegen, Arnhem, Netherlands</addr-line>
        <institution>Hogeschool Arnhem en Nijmegen</institution>
        <addr-line content-type="city">Arnhem</addr-line>
        <country>Netherlands</country>
      </aff>
      <author-notes>
        <fn fn-type="corresp">
          <p>Corresponding author: Henriëtta Joosten (<email xlink:type="simple">hj@henriettajoosten.nl</email>).</p>
        </fn>
        <fn fn-type="edited-by">
          <p>Academic editor: Chris D. Knoops</p>
        </fn>
      </author-notes>
      <pub-date pub-type="collection">
        <year>2021</year>
      </pub-date>
      <pub-date pub-type="epub">
        <day>25</day>
        <month>11</month>
        <year>2021</year>
      </pub-date>
      <volume>95</volume>
      <issue>9/10</issue>
      <fpage>321</fpage>
      <lpage>327</lpage>
      <uri content-type="arpha" xlink:href="http://openbiodiv.net/03B51879-C2E9-56A0-A340-F68F4DAC3883">03B51879-C2E9-56A0-A340-F68F4DAC3883</uri>
      <history>
        <date date-type="received">
          <day>08</day>
          <month>07</month>
          <year>2021</year>
        </date>
        <date date-type="accepted">
          <day>05</day>
          <month>11</month>
          <year>2021</year>
        </date>
      </history>
      <permissions>
        <copyright-statement>Aloy Soppe, Henriëtta Joosten, Koos Wagensveld</copyright-statement>
        <license license-type="creative-commons-attribution" xlink:href="https://creativecommons.org/licenses/by-nc-nd/4.0/" xlink:type="simple">
          <license-p>This is an open access article distributed under the terms of the Creative Commons Attribution License (CC BY-NC-ND 4.0), which permits to copy and distribute the article for non-commercial purposes, provided that the article is not altered or modified and the original author and source are credited.</license-p>
        </license>
      </permissions>
      <abstract>
        <label>Samenvatting</label>
        <p>Financiële technologische ontwikkeling, de zogeheten fintech, is <italic>hot en happening</italic>. De ontwikkelingen gaan snel maar leiden geregeld tot moreel kwetsbare praktijken. Een geautomatiseerd systeem de schuld geven van economische uitbuiting, uitsluiting en privacyschending is onzinnig. De auteurs gaan in op de vraag wat de rol van financiële ethiek (nog) is als de besluitvorming en gedragssturing bij en in het <italic>ontwerp</italic> van allerlei systemen (grotendeels) <italic>vooraf</italic> bepaald wordt.</p>
      </abstract>
      <kwd-group>
        <title>Trefwoorden</title>
        <kwd>Financiële ethiek</kwd>
        <kwd>fintech</kwd>
        <kwd>moraliteit</kwd>
        <kwd>MoralScan</kwd>
        <kwd>programmeren</kwd>
        <kwd>ethics by design</kwd>
      </kwd-group>
    </article-meta>
  </front>
  <body>
    <sec sec-type="Relevantie voor de praktijk" id="SECID0EDD">
      <title>Relevantie voor de praktijk</title>
      <p>Dit artikel is relevant voor financieel professionals die fintech vormgeven en/of gebruiken. Helaas zijn er geen kant-en-klare oplossingen om moraliteit te programmeren. De auteurs roepen lezers daarom op om bij het managen van de nieuwe innovatiegolf te blijven streven naar vormen van goed bestuur en <italic>best practices</italic></p>
    </sec>
    <sec sec-type="1. Inleiding" id="SECID0EKD">
      <title>1. Inleiding</title>
      <p>Financiële technologische ontwikkeling, de zogeheten fintech, is <italic>hot en happening</italic>. Inmiddels is de technologie van sommige fintech-bedrijven zo ver dat informatie als facebookupdates en twitter-uitspraken kunnen worden meegenomen bij het automatisch berekenen van kredietwaardigheid van individuen. Een ander voorbeeld is het door de belastingdienst gehanteerde ‘fraude signalering systeem’ dat na eigen onderzoek in strijd bleek met de actuele privacywetgeving (<xref ref-type="bibr" rid="B14">Kleinnijenhuis 2020</xref>). Dit soort ontwikkelingen zet de deur open voor – op zijn minst – moreel kwetsbare praktijken. Een geautomatiseerd systeem de schuld geven van economische uitbuiting, uitsluiting en privacyschending zou onzinnig zijn. De vraag rijst in hoeverre de technologische ontwikkelingen zélf – en de ordeningen die deze in de samenleving teweegbrengen te verantwoorden zijn. In welke mate speelt ethiek bij de ontwikkeling en het gebruik van fintech nog, of juist opnieuw, een rol?</p>
      <p>In de wetenschappelijke literatuur is sprake van een toenemende aandacht voor de ethische aspecten van management accounting &amp; control systemen (<xref ref-type="bibr" rid="B2">Chabrak et al. 2016</xref>; <xref ref-type="bibr" rid="B3">Cugueró-Escofet and Rosanas 2013</xref>; <xref ref-type="bibr" rid="B4">2017</xref>; <xref ref-type="bibr" rid="B16">Linder et al. 2020</xref>; <xref ref-type="bibr" rid="B18">Merchant and White 2017</xref>). Enerzijds wordt onderzocht hoe deze systemen worden gebruikt en worden de reacties van management accountants en controllers op morele dilemma’s onderzocht (Fisher and Lovell 2000). Anderzijds worden de consequenties van keuzes bij het ontwerp van de systemen voor de besluitvorming van managers en voor het (ethisch) gedrag van de managers en medewerkers onderzocht (<xref ref-type="bibr" rid="B3">Cugueró-Escofet and Rosanas 2013</xref>; <xref ref-type="bibr" rid="B4">2017</xref>; <xref ref-type="bibr" rid="B20">Rosanas and Velilla 2005</xref>). Dit artikel levert een bijdrage aan deze laatste stroming van literatuur door te focussen op een zeer actueel vraagstuk, ontstaan door de hierboven genoemde steeds verder gaande technologische ontwikkelingen. Het betreft de vraag wat de rol van (financiële) ethiek (nog) is als de besluitvorming en gedragssturing bij en in het <italic>ontwerp</italic> van allerlei systemen reeds (grotendeels) <italic>vooraf</italic> bepaald wordt.</p>
      <p>Om deze vraag te beantwoorden gaan we eerst in op wat wij verstaan onder financiële ethiek. Ook geven we een voorbeeld van een nieuw instrument, de MoralScan, waarmee organisaties de discussie over kernwaarden kunnen entameren en conclusies in de besluitvorming kunnen meenemen. Vervolgens zoomen we in op de fintech en het gebruik van morele richtsnoeren bij de ontwikkeling ervan. Daarna laten we zien dat het gebruik van morele richtsnoeren bij het ontwerp en de ontwikkeling van fintech bij lange na geen afdoende manier is om met de morele vraagstukken om te gaan die bij de ontwikkelingen in de fintech spelen. Als laatste beantwoorden we de vraag wat de rol van (financiële) ethiek (nog) is als de besluitvorming en gedragssturing bij en in het <italic>ontwerp</italic> van allerlei systemen reeds (grotendeels) <italic>vooraf</italic> bepaald wordt.</p>
    </sec>
    <sec sec-type="2. Financiële ethiek" id="SECID0ECF">
      <title>2. Financiële ethiek</title>
      <p>Financiële ethiek kan omschreven worden als het systematisch ontwikkelen van de juiste meningsvorming, die leidt tot het juiste handelen ten aanzien van financiële processen van ondernemingen, instituties en organisaties in relatie tot de hun omringende (financiële) markten (<xref ref-type="bibr" rid="B24">Soppe 2017</xref>, p. 27). Belangrijk hierbij is om onderscheid te maken tussen ‘ethiek’ en ‘moraal’. Moraal is het geheel aan normen en waarden; ze bepalen of je iets goed of fout vindt. Je zou kunnen zeggen dat ethiek het (kritisch) nadenken is over de moraal. Voorgaande definitie van financiële ethiek is ruim, veelomvattend en daardoor complex. Vooral het centrale element – wat is de juiste meningsvorming die leidt tot het juiste handelen – is meerdimensionaal en vooral conceptueel van karakter. Bovendien roept het woord ‘juist’ in de eenentwintigste eeuw soms verwarring op. Met ‘juist’ bedoelen wij ‘het meest passende in een specifieke situatie’. Het is dus contextafhankelijk. Dit betekent dat je steeds weer zal moeten bepalen wat een juiste meningsvorming – in een specifieke situatie – is. Maar dit betekent niet dat er geen houvast is om te bepalen wat een juiste meningsvorming is. Het betreft onzes inziens een meningsvorming die gestoeld is op meerdere uitgangspunten. Zonder te pretenderen volledig te zijn, onderscheiden we de volgende zeven kernwaarden: rechtvaardigheid, natuur, duurzaamheid, de juiste verhouding tussen risico en rendement, participantenbenadering, legitimiteit en monisme. We lichten deze kernwaarden hier kort toe. In <italic>New financial ethics; a normative approach</italic> (<xref ref-type="bibr" rid="B24">Soppe 2017</xref>) zijn deze waarden uitgebreid beschreven en verder onderbouwd.</p>
      <p>De eerste kernwaarde die we onderscheiden is rechtvaardigheid. Wat is een rechtvaardige samenleving en hoe moet een verdeling van welvaart tussen de verschillende belanghebbenden van een (financiële) onderneming worden geregeld? Hoe behoudt iedere belanghebbende een juist motivatiepatroon dat is gebaseerd op een rechtvaardige claim op de economische en morele vruchten van een onderneming? De tweede kernwaarde is een respectvolle houding naar de natuur. De natuur is na arbeid en kapitaal de derde grote productiefactor in de economie. Milieueconomie en milieu-ethiek zijn de laatste decennia een geheel eigen vakgebied geworden. De financiële sector kan hier een geheel eigen rol in spelen door de juiste voorwaarden te stellen aan bedrijfsfinanciering om (het behoud of zelfs het herstel van) milieu en natuur te stimuleren. De derde waarde heeft betrekking op duurzaamheid. Dit betekent in dit verband het in ogenschouw nemen van de juiste verhouding tussen de belangen van verschillende generaties. Wat zijn de korte- en langetermijnbelangen van een economisch project? Hoe worden door huidige financiële instanties, de economie en bedrijfscultuur in het nu vormgegeven – en vooral ook: hoe wordt de (financiële) economie achtergelaten voor toekomstige generaties? De vierde kernwaarde die een belangrijke rol speelt in het ontwikkelen van de juiste meningsvorming is de afweging tussen risico en rendement. Deze dimensie hoort traditioneel thuis in de financieringsliteratuur, maar wordt in deze context verbreed naar de (financiële) ondernemingsorganisatie in zijn geheel (inclusief de rol van arbeid). Vertrekkend vanuit het <italic>Capital Asset Pricing Model</italic> (<abbrev id="ABBRID0EWF">CAPM</abbrev>)<sup><xref ref-type="fn" rid="en1">1</xref></sup> verbreden we dit model naar een ‘participanten-aanspraakmodel’ waarbij de juiste samenhang tussen risico en verwacht rendement wordt geanalyseerd voor meerdere participanten in de onderneming. Hiermee komt de vijfde kernwaarde in beeld: het participantenmodel dat wordt uitgebreid naar duaal aandeelhouderschap (<italic>stakeholder equity</italic>) in de onderneming (Soppe 2008). Het traditionele aandeelhoudersparadigma – de ultieme zeggenschap en het risico liggen bij aandeelhouders – wordt verbreed naar een duurzaam samenwerkingsmodel tussen alle participanten in de moderne onderneming. We gaan op zoek naar een moreel verantwoorde participantenbenadering van de onderneming. Als zesde waarde onderscheiden we de rol van legitimiteit van ondernemingshandelen of het handelen van marktdeelnemers. Bij dit criterium concentreren we ons op de rol van de <italic>hard</italic> en de <italic>soft law</italic> die nodig dan wel gewenst is om financiële activiteiten te reguleren of juist niet. Ten slotte benadrukken we de onderlinge samenhang tussen de eerdere zes kernwaarden vanuit een monistische optiek. Met de zevende dimensie monisme wordt gepoogd om ruimte te maken voor spiritualiteit en het besef dat alles met elkaar verbonden is. Zo benadrukken en bewerkstelligen we de eenheid tussen de verschillende kernwaarden. De ene waarde is niet superieur aan de andere. Het is altijd de samenhang en consistentie van de grondlijnen die het eindoordeel vormen om tot een ‘juiste’ beslissing te komen.</p>
      <p>Financiële ethiek is in feite een vorm van toegepaste ethiek waarbij bovenstaande zeven ethische kernwaarden worden geïntegreerd met alle interne en externe processen en is gericht op optimalisatie van besluitvormingsprocessen binnen een onderneming. Financiële rendementen zijn weliswaar een randvoorwaarde voor goed beleid, maar meervoudige waardecreatie dient de kern van het ondernemingsbeleid te zijn. Het gaat bij de integratie van financiële ethiek in de organisatie om het systematisch werken aan een nieuwe ‘mentale’ structuur bij werknemers, organisaties en instituties ten aanzien van hun omgang met kapitaal en andere waardensoorten.</p>
    </sec>
    <sec sec-type="3. MoralScan" id="SECID0EFG">
      <title>3. MoralScan</title>
      <p>Een MoralScan is een hulpmiddel om niet alleen de financiële kant van bedrijfsactiviteiten beheersbaar te maken, maar tevens de discussie over bovenstaande kernwaarden te entameren en de conclusies in de besluitvorming mee te nemen (<xref ref-type="bibr" rid="B25">Soppe and Wagensveld 2020</xref>). Het is een meetinstrument dat op basis van een nulmeting meet in hoeverre een onderneming oog heeft voor moreel gezonde concurrentieverhoudingen en duurzame aspecten van het ondernemen. Het uiteindelijke doel van de MoralScan is het initiëren van het gesprek over de resultaten en het verhogen van de prestaties op de meervoudige waardesoorten in de onderneming. Het meetinstrument – dat iedereen zelf kan bouwen in Excel – maakt gebruik van Likert-scores in enquêtes en interviews met medewerkers en andere participanten van de onderneming. Daarnaast worden gegevens verwerkt zoals die in het jaarverslag van de onderneming worden gepubliceerd. Bij een juiste communicatie van de resultaten kan het product worden gezien als een innovatief informatiesysteem, dat diagnostisch en interactief is en input kan genereren op basis waarvan het <italic>belief</italic>systeem (de kernwaarden/ethische basiswaarden van een organisatie) verder kan worden ontwikkeld (<xref ref-type="bibr" rid="B23">Simons 1995</xref>).</p>
      <p>In Figuur <xref ref-type="fig" rid="F1">1</xref> worden de kernwaarden van de financiële ethiek en die in de MoralScan zijn verwerkt, nogmaals verbeeld. De Figuur poogt in zijn rondheid het holistische denken ten aanzien van de financiële ethiek te representeren, waar een beweging in het ene domein leidt tot een reactie in het andere. Disciplines vloeien in dit model theoretisch in elkaar over. Het zwarte en het witte veld verbeelden het dualistische denken, waarin het één slechts kenbaar is door het andere. Goed is slechts kenbaar door de aanwezigheid van kwaad, bijvoorbeeld. Bovendien representeert de Yin &amp; Yang vorm dat midden in het witte stuk een zwarte vlek opduikt en omgekeerd: in het zwarte stuk zit een witte vlek. Met andere woorden, goed en kwaad zijn niet altijd gemakkelijk te onderscheiden omdat in het goede vaak ook kwaad steekt en omgekeerd. In het economisch proces zijn de reële en de monetaire economie onverbrekelijk met elkaar verbonden. Het ene is niet beter dan het andere, beide zijn nodig voor de heelheid van de economie. Kern van de Figuur is dat twee tegengestelde waarden evenwaardig zijn aan elkaar. De financiële ethiek is de dans van de dualiteit. Evenwaardig betekent in deze gelijk èn toch verschillend. Het één is onkenbaar zonder het andere. Het proces van het zoeken naar de juiste, of de meest passende keuze speelt zich af binnen ieder individu, maar ook tussen partijen en instituties. Als voorbeeld kan de vraag gesteld worden of het voor een goededoelenorganisatie moreel geoorloofd is om op zeer indringende en misschien wel manipulatieve wijze reclame te maken om zo hoog mogelijke opbrengsten te werven voor het goede doel. Wat is legitiem? Wat is rechtvaardig? Zonder risico geen rendement. Is zulk beleid duurzaam voor de organisatie en voor de donateurs?</p>
      <fig id="F1" position="float" orientation="portrait">
        <object-id content-type="arpha">9106E4AF-87A9-5D89-8CC9-9CEAE2FC5C6D</object-id>
        <label>Figuur 1.</label>
        <caption>
          <p>Elementen van de MoralScan. Bron: <xref ref-type="bibr" rid="B24">Soppe 2017</xref>, p.141.</p>
        </caption>
        <graphic xlink:href="mab-95-321-g001.jpg" position="float" orientation="portrait" xlink:type="simple" id="oo_614808.jpg">
          <uri content-type="original_file">https://binary.pensoft.net/fig/614808</uri>
        </graphic>
      </fig>
    </sec>
    <sec sec-type="4. Fintech en het gebruik van morele richtsnoeren" id="SECID0EMH">
      <title>4. Fintech en het gebruik van morele richtsnoeren</title>
      <p>In deze paragraaf zoomen we in op fintech en het gebruik van morele richtsnoeren bij de ontwikkeling ervan als een manier om moraliteit in technologische systemen te integreren.</p>
      <p>FinTech is een samentrekking van de Engelse woorden <italic>financial</italic> en <italic>technology</italic>. Wij verstaan onder dit begrip alle innovatieve financiële producten en diensten die de manieren waarop we met geld omgaan digitaliseren. Het zijn vooral financiële startups die dit proces aanjagen en inspelen op het massale gebruik van smartphones en de talloze apps die (financiële) dienstverlening faciliteren. Hypotheekaanvragen, bijvoorbeeld, kunnen volledig via internet plaatsvinden, evenals personeelsselectie via algoritmes en <italic>crowdfunding</italic> via online platforms. Risico’s kunnen steeds beter worden ingeschat (<italic>predictive analysis</italic>) waardoor zorgverzekeraars de gezondheid van verzekerden, en banken het risicoprofiel van debiteuren kunnen voorspellen én beïnvloeden. Zo kan de prijsstelling van producten worden beïnvloed. Informatietechnologie (<abbrev id="ABBRID0E2H">IT</abbrev>) maakt deze nieuwe diensten mogelijk die vaak dicht tegen de privacy van individuen en de bedrijfsgeheimen aanzitten.</p>
      <p>De ontwikkelingen in de fintech geven volop aanleiding om meer aandacht te schenken aan de morele kwesties die deze ontwikkelingen oproepen. We geven ter illustratie twee voorbeelden van toepassingen van fintech die allerlei vragen over de eerdergenoemde ethische kernwaarden met zich meebrengen. Allereerst blockchain. Deze technologie maakt het mogelijk om <italic>buiten het reguliere bancaire systeem om</italic> zeer snel betalingen tussen deelnemers uit te voeren (<xref ref-type="bibr" rid="B5">De Nederlandse Bank 2016</xref>). Hoe zit het dan met de legitimiteit? En hoe houd je rekening met de belangen van alle stakeholders? Het risico dat nieuwe financiële activiteiten buiten het toezicht vallen, zoals bij digitale valuta het geval is, is ook verweven met vragen rondom rechtvaardigheid en menselijkheid. Filosoof <xref ref-type="bibr" rid="B8">Februari (2019)</xref> verkent in een column in de NRC het plan van Facebook om een eigen munt te introduceren. Facebook maakt het volgens eigen zeggen voor mensen zonder bankrekening mogelijk om online te betalen. Februari vraagt zich af wat er voor Facebook inzit; meestal krijgen mensen immers geen bankrekening als ze er niets op kunnen zetten.</p>
      <p>Een andere technologische ontwikkeling die (<abbrev id="ABBRID0ENAAC">ook</abbrev>) binnen de financiële wereld grote impact heeft en niet los gezien kan worden van allerlei ethische kwesties is <italic>big data</italic>. Big data is een machtig instrument waarbij via <italic>machine learning</italic> zakelijk interessante trends en toepassingen worden ontwikkeld. Maar ook de handel in financiële producten zelf – die tegenwoordig vrijwel volledig plaatsvindt via <italic>high frequency trading</italic> – wordt uitgevoerd met behulp van algoritmes. Vooral dit laatste zorgt voor prudentiële risico’s en systeemrisico’s in de zo belangrijke financiële sector in onze economie. Verder biedt machine learning – in combinatie met bijvoorbeeld chatbots – mogelijkheden om in de nabije toekomst het adviseren van klanten te ondersteunen en waarschijnlijk ook (deels?) over te nemen. Maar ook al nemen computers beslissingen, het zijn mensen die de regels in het algoritme bepalen of ervoor kiezen om kunstmatige intelligentie zichzelf te laten ontwikkelen. Maar in hoeverre kan een programma wel zelflerend zijn? En welke aannames en keuzes zijn in de (trainings)data verwerkt? En het is maar de vraag of een algoritme rekening kan houden met de belangen van toekomstige generaties.</p>
      <p>Het gebruik van morele richtsnoeren bij de ontwikkeling van fintech is een voor de hand liggende manier om de discussie over kernwaarden te entameren en de conclusies in het ontwerp en de bouw van systemen mee te nemen. Een algemeen moreel richtsnoer hierbij is dat een mensheid met kunstmatige intelligentie in de financiële sector meer zou moeten floreren dan een wereld zonder. In dat verband zijn de 17 duurzame ontwikkelingsdoelen van de VN uit 2015 een goede leidraad die onderbouwt wat de mensheid aan behoeftes en veiligheid nodig heeft. Technologische en financiële innovatie kan gevaarlijk, zwaar of repeterend werk vereenvoudigen en wellicht meer morele inhoud geven. Van cruciaal belang is de vraag wat de sociale invloed is van fintech-ontwikkelingen op de sector zelf, de klanten en de andere stakeholders. Mooi is in dat verband het initiatiefadvies (2017/C 288/01) van Catelijne Muller, lid van het Europees Economisch en Sociaal Comité (<abbrev id="ABBRID0EYAAC">EESC</abbrev>), de Europese variant van de Nederlandse Sociaal Economische Raad (<abbrev id="ABBRID0E2AAC">SER</abbrev>). In een persbericht ter aankondiging van dit advies over de maatschappelijke impact van kunstmatige intelligentie stelt Muller: “We hebben pan-Europese normen en standaarden nodig voor AI, zoals we die nu voor voeding en huishoudelijke apparaten hebben […] om ervoor te zorgen dat AI-systemen compatibel blijven met de beginselen van menselijke waardigheid, integriteit, vrijheid en culturele- en genderdiversiteit, evenals met de fundamentele mensenrechten” (EESC 2017).<sup><xref ref-type="fn" rid="en2">2</xref>2</sup></p>
    </sec>
    <sec sec-type="5. Morele richtsnoeren schieten (altijd) tekort" id="SECID0EDBAC">
      <title>5. Morele richtsnoeren schieten (altijd) tekort</title>
      <p>Het gebruik van morele richtsnoeren bij het ontwerp en de ontwikkeling van fintech is echter bij lange na geen afdoende manier om met de morele vraagstukken om te gaan die bij de ontwikkelingen in de fintech spelen. Een reden daarvoor is dat we vaak niet in staat zijn om de steeds complexer wordende technologieën naar onze hand te zetten. Dit laat zich illustreren aan de hand van zogenaamd zelflerende systemen, ook wel neurale netwerken genoemd. Banken gebruiken deze om te bepalen hoeveel geld in een geldautomaat moet zitten, om verdachte transacties op te sporen of om de overlevingskansen van een klant/onderneming te analyseren. Deze kunstmatige intelligentie of neurale netwerken worden getraind met enorme hoeveelheden data. De software gaat als het ware zelf aan de slag en leert van zijn fouten. De resulterende algoritmes zijn ingewikkeld en bestaan soms uit duizenden parameters. Op een gegeven moment snappen de makers ook niet meer hoe deze precies werken. Volgens taal- en computerwetenschapper Jelle Zuidema kunnen we deze neurale netwerken maar beter benaderen als <italic>black boxes</italic>, zo noteert journalist <xref ref-type="bibr" rid="B21">Schoonen (2020)</xref>. We moeten ze als het ware van buitenaf gaan bestuderen. Dit betekent dat we deze zelflerende systemen niet zo maar kunnen aanpassen omdat de ‘besluiten’ of uitkomsten van deze algoritmes ons morele richtsnoer schenden.</p>
      <p>De tweede reden is dat technologie veel meer is dan een neutraal hulpmiddel. Mens en technologie beïnvloeden elkaar over en weer; sterker nog, ze raken steeds meer met elkaar verweven – soms letterlijk wanneer je een betaalchips in je hand laat implanteren (<italic>biohacking</italic>). Ook zorgt technologie ervoor dat we – vaak ongemerkt – anders gaan denken over wat we belangrijk vinden, hoe we met elkaar omgaan en hoe we over onszelf en de wereld denken. Het is vergelijkbaar met de aanwezigheid van het coronavirus: alleen al het bestaan van het virus maakt dat we elkaar plotsklaps – of we willen of niet – opvatten als potentiële besmettingsbronnen. Iets vergelijkbaars gebeurt met technologie. De aanwezigheid van camera’s (of ‘slimme’ brillen) maakt dat mensen zich anders gaan gedragen, ongeacht of de camera’s werken of niet. Het gebruik van algoritmes in het verzekeringswezen maakt dat we in de samenleving heel anders zijn gaan denken over het belang van solidariteit. Deze beïnvloeding over en weer kan niet vooraf worden vastgesteld.</p>
      <p>Een derde reden is te vinden in het boek ‘Frictie; ethiek in tijden van Dataïsme’ van Miriam <xref ref-type="bibr" rid="B19">Rasch (2020)</xref>. In dit boek levert ze een goed onderbouwde en originele bijdrage aan de discussie over de rol van ethiek in tijden van digitalisering. Dataïsme omschrijft ze als: het geloof dat besluitvorming in ons leven te vertalen is naar data. Via automatisering en digitalisering kan het menselijk gedrag strikt rationeel en beter beheersbaar in processen en algoritmes worden weergegeven – althans, daar willen overheden en ook bedrijven graag in geloven. <xref ref-type="bibr" rid="B9">Harari (2018)</xref> verwijst overtuigend naar dat proces in zijn <italic>Homo Deus</italic>. De computer kan veel systematischer en objectiever vaststellen dan de mens, of bijvoorbeeld een krediet moet worden verstrekt aan een ondernemer. Rasch heeft veel moeite met dat lonkende vooruitzicht en stelt dat de permanente digitale mal de mens dreigt te ontzielen en er een vlakke digitale ontologie ontstaat die classificeert, indeelt, en daarmee oordeelt en veroordeelt. De wereld wordt in een digitale mal geduwd (<xref ref-type="bibr" rid="B19">Rasch 2020</xref>), die door informatie ethici <xref ref-type="bibr" rid="B1">Capurro (2006)</xref> en <xref ref-type="bibr" rid="B6">Eldred (2009)</xref> ook wel de ‘digitale ontologie’ wordt genoemd. Kunnen nullen en enen de subtiliteit van onze moraliteit vangen?</p>
    </sec>
    <sec sec-type="6. Motieven om moreel verantwoord te handelen" id="SECID0ELCAC">
      <title>6. Motieven om moreel verantwoord te handelen</title>
      <p>We hebben eerder in dit artikel vastgesteld dat financiële ethiek over juiste besluitvorming op basis van juiste meningsvorming gaat. De eerder besproken kernwaarden bieden hierbij houvast. We zagen dat het gebruik van deze kernwaarden – bijvoorbeeld in de vorm van morele richtsnoeren – bij de ontwikkeling van fintech niet eenvoudig is vanwege de complexiteit van fintech, het feit dat mens en technologie elkaar over en weer beïnvloeden en het maar de vraag is of nullen en enen de subtiliteit van onze moraliteit kunnen vangen. Maar tot nu toe hebben we nog geen aandacht gegeven aan de mens zelf – de ontwikkelaars en aanbieders van fintech – en dan met name diens motieven om moreel verantwoord te handelen en wat dat betekent voor de ontwikkeling van fintech. Dat doen we in deze sectie aan de hand van het model van Kohlberg.</p>
      <p>Onderstaand model beschrijft verschillende bronnen voor of motieven om moreel verantwoord te handelen. Het is een variant op het verkorte model van de psycholoog <xref ref-type="bibr" rid="B15">Kohlberg (1973)</xref> over verschillende stadia in morele ontwikkeling van kinderen. Het verkorte model wordt verder toegelicht door <xref ref-type="bibr" rid="B26">Verstegen and Soppe (2020</xref>, pp. 26–28).</p>
      <p>Het model laat drie niveaus voor moraliteit zien. Het eerste niveau – het pre-conventionele – is vooral instrumenteel, gebaseerd op eigenbelang en afgedwongen door gezag. Het tweede niveau – het conventionele – wordt gedomineerd door de sociale orde van een groep, cultuur of staat. De normen van de groep maak je je eigen omdat je bij de groep wilt horen of omdat je waarde hecht aan de geldende regels en wetten. Het derde niveau – het post-conventionele – is voor de conclusies van dit onderzoek van belang. Hier gaat het over de individuele mens als bron van gezag en moraliteit. Hierbij speelt bewustwording van en oriëntatie op universele morele waarden een belangrijke rol.</p>
      <p>De eerste twee niveaus van het boven gepresenteerde Kohlbergmodel, het pre-conventionele en het conventionele, zijn op het eerste gezicht relatief eenvoudig af te bakenen en daardoor goed programmeerbaar. Je zou kunnen stellen dat conventionele en pre-conventionele moraliteit eigenlijk niet veel meer zijn dan regels die voortkomen uit wetten of culturen. Deze uitingen van moraliteit kunnen worden geprogrammeerd. Maar bij een nadere beschouwing is het toch wel iets ingewikkelder, zo zagen we al eerder. Ook normen en waarden veranderen – deels onder invloed van technologie. Bovendien kun je je afvragen hoeveel ruimte er blijft voor praktische wijsheid wanneer fintech de besluiten neemt. En laten we ook niet vergeten dat de toepassing van nieuwe technologieën de samenleving op ongekende schaal verandert; wetgeving loopt per definitie achter op de ontwikkelingen.</p>
      <p>Tel daarbij op de ongekende én ongekend brede impact van fintech op de samenleving en de morele kwesties die deze oproept. De keuzes die ontwikkelaars en aanbieders van fintech maken, kunnen leiden tot moreel kwetsbare praktijken waaronder economische uitbuiting, uitsluiting en privacyschending. Bij deze brede impact hoort een morele verantwoordelijkheid die het eigenbelang en de sociale orde te boven gaan. Om te oordelen over de potentieel morele problemen van fintech, moet, onzes inziens, het antwoord (steeds weer) gezocht worden op het post-conventionele niveau. Daar waar gezocht wordt naar universele morele waarden. Waar sta ik als mens – en wij als organisatie – voor? Wat doet er in het leven toe? En wat betekent dat voor de ontwikkeling van fintech? Met name ontologische en epistemologische vragen over de rol van de mens op deze aarde worden relevant in de morele omgang met techniek, machines en algoritmes.</p>
      <p>Hier komen de grenzen van de wetenschap en het menszijn vol in zicht. Als mens zijn we beperkt. We kunnen de waarheid, noch de toekomst per definitie niet kennen. Dat betekent dat we dus ook niet in staat zijn moraliteit <italic>ex ante</italic> te programmeren. Als we het einddoel van de mens niet kunnen kennen, dan blijven alleen de tussenstappen in het leven over.<sup><xref ref-type="fn" rid="en3">3</xref></sup> Deze tussenstappen worden door cruciale wetenschappelijke ontdekkingen steeds ingrijpender veranderd. Het menselijk leven kan inmiddels al substantieel worden verlengd en zelfs genetisch worden gemanipuleerd. Het is niet onwaarschijnlijk dat de mens in de 21<sup>e</sup> eeuw zal gaan streven naar onsterfelijkheid. Keuzeproblemen die ontstaan zijn eerder kostenafwegingen dan wat er genetisch en medisch allemaal mogelijk is. Dit soort keuzes raken ons allemaal en horen dan ook onderwerp van publiek gesprek te zijn (<xref ref-type="bibr" rid="B12">Joosten 2019</xref>; <xref ref-type="bibr" rid="B13">2020</xref>). De talloze dilemma’s die dit met zich meebrengt worden haarfijn aangegeven in het indrukwekkende boek: <italic>Homo Deus</italic> van Harari (2017). Na zijn <italic>Homo Sapiens</italic> uit 2014 waarin wordt beschreven hoe de mens de wereld en al haar problemen verovert, betekenis geeft en gedeeltelijk overwint, komt in <italic>Homo Deus</italic> de vraag aan de orde of er een soort supermens kan ontstaan. Een sterke, extreem langlevende, hyperintelligente Godmens, al dan niet met een directe link naar een krachtige computer. Daaraan voorafgaand ontstaat wat Harari noemt: het dataïsme, ook wel <italic>Big Data</italic> genoemd. Daarbij worden uit collectieve bestanden individuen ontleed in losse onderdelen op basis van koop- en surfgedrag tot professionele prestaties en misschien wel ziektegeschiedenis. De data-analyse, het ‘systeem’, gaat onszelf misschien beter kennen dan wij onszelf kennen omdat ons handelen volledig in beeld wordt gebracht. Zou het echt zo eenvoudig zijn? Ook Harari eindigt zijn boek met vragen zoals: zijn organismes echt alleen maar algoritmes en is het leven alleen maar dataverwerking? En, wat is er belangrijker: intelligentie of bewustzijn? En dan zijn we weer terug bij de grote filosofische vragen zoals: wat is de mens en hoe moet hij leven?</p>
      <table-wrap id="T1" position="float" orientation="portrait">
        <label>Figuur 2.</label>
        <caption>
          <p>Variant van het model van Kohlberg</p>
        </caption>
        <table id="TID0E4IAE" rules="all">
          <tbody>
            <tr>
              <th rowspan="1" colspan="2">Niveau</th>
              <th rowspan="1" colspan="1">Waarom houdt een medewerker zich aan morele normen en waarden</th>
              <th rowspan="1" colspan="1">Kwalificatie</th>
            </tr>
            <tr>
              <td rowspan="1" colspan="1">
                <bold>1</bold>
              </td>
              <td rowspan="1" colspan="1">
                <bold>Pre-conventioneel</bold>
              </td>
              <td rowspan="1" colspan="1">• <bold>Omdat hij/zij een incentive krijgt • Of omdat hij/zij corrigerende maatregelen voorziet Kern: EIGEN BELANG</bold></td>
              <td rowspan="1" colspan="1">• <bold>Instrumenteel • Bron van gezag: de manager / de baas • Beloning &amp; straf</bold></td>
            </tr>
            <tr>
              <td rowspan="2" colspan="1">
                <bold>2</bold>
              </td>
              <td rowspan="2" colspan="1">
                <bold>Conventioneel</bold>
              </td>
              <td rowspan="1" colspan="1">
                <bold>A) Omdat hij/zij bij de groep wil horen  Kern: SOCIALE COHESIE</bold>
              </td>
              <td rowspan="2" colspan="1">• <bold>Sociaal • Bron van gezag: de groep, de regels • Anticiperen op sociale goed - en afkeuring</bold></td>
            </tr>
            <tr>
              <td rowspan="1" colspan="1">
                <bold>B) Omdat de REGELS/WET het voorschrijven/voorschrijft (<italic>law and order</italic>)</bold>
              </td>
            </tr>
            <tr>
              <td rowspan="1" colspan="1">
                <bold>3</bold>
              </td>
              <td rowspan="1" colspan="1">
                <bold>Post-conventioneel</bold>
              </td>
              <td rowspan="1" colspan="1">• <bold>Omdat het zelf deze morele waarden heeft omarmd  Kern: MOREEL BELANG</bold></td>
              <td rowspan="1" colspan="1">• <bold>Moreel • Bron van gezag: jezelf • Zelfontwikkelde waarden, onafhankelijk van directe omgeving</bold></td>
            </tr>
          </tbody>
        </table>
      </table-wrap>
    </sec>
    <sec sec-type="7. Conclusie" id="SECID0EBIAC">
      <title>7. Conclusie</title>
      <p>Concluderend wordt nu gesteld dat het onderscheid tussen conventionele, pre-conventionele en post-conventionele moraliteit het mogelijk maakt om een gelaagd antwoord te geven op de hoofdvraag omtrent de rol van de financiële ethiek in de fintech ontwikkeling – en dus de programeerbaarheid van moraliteit. Conventionele en pre-conventionele moraliteit zijn eigenlijk niet veel meer zijn dan regels die voortkomen uit wetten of culturen. Deze kunnen ten minste gedeeltelijk worden geprogrammeerd. Post-conventionele moraliteit daarentegen is niet te programmeren omdat de grenzen van ons mens-zijn per definitie niet gekend kunnen worden. Er is geen <italic>ex ante</italic> model te maken die een stabiele samenleving zeker stelt. Wat resteert is streven naar een vorm van goed bestuur en <italic>best practices</italic> op velerlei niveaus bij het managen van de nieuwe innovatiegolf, die zonder twijfel over ons heen gaat komen. We zullen ons moeten behelpen met pragmatische ethische modellen zoals de MoralScan, waar begrippen als rechtvaardigheid, legitimiteit, respect voor de natuur een rol spelen. Ook aandacht voor toekomstige generaties, risico &amp; rendement en veiligheid &amp; controleerbaarheid spelen een rol om alle belanghebbenden in een economisch systeem menswaardig tot hun recht te laten komen. Op wereldniveau hebben we de Verenigde Naties en haar duurzaamheidsdoelen, maar op een veel lager niveau, het bedrijfsniveau, komen alle morele elementen van organisaties weer vol in beeld. Dat is de eeuwige dans tussen goed en kwaad, waarin we dagelijks keuzes moeten maken op een microscopisch niveau.</p>
      <boxed-text id="box1" position="float" orientation="portrait">
        <p><bold>Dr. H. Joosten</bold>, tot september 2021 associate lector financiële ethiek, Hogeschool van Arnhem en Nijmegen, zelfstandig onderzoeker en spreker.</p>
      </boxed-text>
      <boxed-text id="box2" position="float" orientation="portrait">
        <p><bold>Dr. A. Soppe</bold>, nu gepensioneerd, daarvoor associate lector financiële ethiek en associate professor financiële ethiek, Hogeschool van Arnhem en Nijmegen / Erasmus Universiteit Rotterdam.</p>
      </boxed-text>
      <boxed-text id="box3" position="float" orientation="portrait">
        <p><bold>Dr. J. Wagensveld RA</bold> is lector en universiteitsdocent, Hogeschool van Arnhem en Nijmegen / Radboud Universiteit Nijmegen.</p>
      </boxed-text>
    </sec>
  </body>
  <back>
    <fn-group>
      <title>Noten</title>
      <fn id="en1">
        <p>Initieel ontwikkeld door <xref ref-type="bibr" rid="B22">Sharpe (1964)</xref> en <xref ref-type="bibr" rid="B17">Lintner (1965)</xref>.</p>
      </fn>
      <fn id="en2">
        <p>Muller heeft in samenwerking met twee andere leden van de EU High Level Expert Group on Artificial Intelligence deze ideeën verder uitgewerkt in ALLAI, een onafhankelijke organisatie die verantwoorde AI stimuleert (<ext-link xlink:type="simple" ext-link-type="uri" xlink:href="http://www.allai.nl">www.allai.nl</ext-link>, laatst geraadpleegd op 16 juni 2021). Het initiatiefadvies vormt ook een basis voor het voorgestelde Europese regelgevingskader voor kunstmatige intelligentie (zie: <ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.eesc.europa.eu/en/our-work/opinions-information-reports/opinions/regulation-artificial-intelligence">https://www.eesc.europa.eu/en/our-work/opinions-information-reports/opinions/regulation-artificial-intelligence</ext-link> . Laatst geraadpleegd, 5 juli 2021).</p>
      </fn>
      <fn id="en3">
        <p>Ook vanuit filosofische hoek – denk aan filosofen zoals Nietzsche en Sloterdijk – kom je tot de conclusie dat er niets anders rest dan ons op de tussenstappen te richten. Waar Plato de wereld opvat als een gegeven orde van <italic>zijnden</italic> (hoe de mensen, dieren, planten en dingen nu eenmaal zijn), vatten deze denkers het leven op als een continu <italic>worden</italic>. Nietzsche zal volmondig beamen dat wij mensen orde, welke dan ook, nodig hebben om onszelf te beschermen tegen de zinloosheid van het bestaan en om tot handelen over te kunnen gaan. Maar voor Nietzsche en consorten is er geen vast einddoel voor de mens. Alles is continu in beweging. Om te voorkomen dat we met ons verlangen naar orde en betekenis het leven ‘vastzetten’, benadrukt Nietzsche het belang van korte gewoontes. Voor meer informatie: zie <xref ref-type="bibr" rid="B11">Joosten (2016)</xref>.</p>
      </fn>
    </fn-group>
    <ref-list>
      <title>Literatuur</title>
      <ref id="B1">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Capurro</surname><given-names>R</given-names></name></person-group> (<year>2006</year>) <article-title>Towards an ontological foundation of information ethics.</article-title><source>Ethics and Information Technology</source><volume>8</volume>: <fpage>175</fpage>–<lpage>186</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/s10676-006-9108-0">https://doi.org/10.1007/s10676-006-9108-0</ext-link></mixed-citation>
      </ref>
      <ref id="B2">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Chabrak</surname><given-names>N</given-names></name><name name-style="western"><surname>Craig</surname><given-names>R</given-names></name><name name-style="western"><surname>Daidj</surname><given-names>N</given-names></name></person-group> (<year>2016</year>) <article-title>Financialization and the employee suicide crisis at France Telecom.</article-title><source>Journal of Business Ethics</source><volume>139</volume>(<issue>3</issue>): <fpage>501</fpage>–<lpage>515</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/s10551-015-2602-8">https://doi.org/10.1007/s10551-015-2602-8</ext-link></mixed-citation>
      </ref>
      <ref id="B3">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Cugueró-Escofet</surname><given-names>N</given-names></name><name name-style="western"><surname>Rosanas</surname><given-names>JM</given-names></name></person-group> (<year>2013</year>) <article-title>The just design and use of management control systems as requirements for goal congruence.</article-title><source>Management Accounting Research</source><volume>24</volume>(<issue>1</issue>): <fpage>23</fpage>–<lpage>40</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1016/j.mar.2012.11.001">https://doi.org/10.1016/j.mar.2012.11.001</ext-link></mixed-citation>
      </ref>
      <ref id="B4">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Cugueró-Escofet</surname><given-names>N</given-names></name><name name-style="western"><surname>Rosanas</surname><given-names>JM</given-names></name></person-group> (<year>2017</year>) <article-title>The ethics of metrics: Overcoming the dysfunctional effects of performance measurements through justice.</article-title><source>Journal of Business Ethics</source><volume>140</volume>(<issue>4</issue>): <fpage>615</fpage>–<lpage>631</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/s10551-016-3049-2">https://doi.org/10.1007/s10551-016-3049-2</ext-link></mixed-citation>
      </ref>
      <ref id="B5">
        <mixed-citation xlink:type="simple"><institution xlink:type="simple">De Nederlandse Bank</institution> (<year>2016</year>) Technologische innovatie en de Nederlandse financiële sector: Kansen en risico’s voor gevestigde instellingen, nieuwkomers &amp; het toezicht [position paper]. De Nederlandse Bank (Amsterdam).</mixed-citation>
      </ref>
      <ref id="B6">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Eldred</surname><given-names>M</given-names></name></person-group> (<year>2009</year>) The digital cast of being: Metaphysics, mathematics, carthesianism, cybernetics, capitalism, communication. Ontos Verlag (Frankfurt).</mixed-citation>
      </ref>
      <ref id="B7">
        <mixed-citation xlink:type="simple"><institution xlink:type="simple">EESC (European Economic and Social Committee)</institution> (<year>2017</year>, 30 mei) <article-title>Kunstmatige intelligentie: Europa heeft een ‘human in command-benadering’ nodig, zegt EESC [Persbericht].</article-title><ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.eesc.europa.eu/en/news-media/press-releases/artificial-intelligence-europe-needs-take-human-command-approach-says-eesc">https://www.eesc.europa.eu/en/news-media/press-releases/artificial-intelligence-europe-needs-take-human-command-approach-says-eesc</ext-link></mixed-citation>
      </ref>
      <ref id="B8">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Februari</surname><given-names>M</given-names></name></person-group> (<year>2019</year>) Nu ook verdienen aan mensen zonder geld. NRC, 9 juli. <ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.nrc.nl/nieuws/2019/07/09/nu-ook-verdienen-aan-mensen-zonder-geld-a3966469">https://www.nrc.nl/nieuws/2019/07/09/nu-ook-verdienen-aan-mensen-zonder-geld-a3966469</ext-link></mixed-citation>
      </ref>
      <ref id="B9">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Harari</surname><given-names>Y</given-names></name></person-group> (<year>2018</year>) Homo Deus; Een kleine geschiedenis van de toekomst. Thomas Rap (Amsterdam).</mixed-citation>
      </ref>
      <ref id="B10">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Harari</surname><given-names>Y</given-names></name></person-group> (<year>2015</year>) Sapiens; A brief history of mankind. Harper.</mixed-citation>
      </ref>
      <ref id="B11">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Joosten</surname><given-names>H</given-names></name></person-group> (<year>2016</year>) Streven naar beter. Nietzsche als gids voor het hbo. Uitgeverij Klement (Zoetermeer).</mixed-citation>
      </ref>
      <ref id="B12">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Joosten</surname><given-names>H</given-names></name></person-group> (<year>2019</year>) De publieke sfeer in de 21<sup>e</sup> eeuw. Hannah Arendt als gids voor professionals. ISVW Uitgeverij (Leusden).</mixed-citation>
      </ref>
      <ref id="B13">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Joosten</surname><given-names>H</given-names></name></person-group> (<year>2020</year>) <article-title>Transformatie als publiek vraagstuk.</article-title><source>New Financial Magazine</source><volume>36</volume>: <fpage>27</fpage>–<lpage>30</lpage>. <ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.newfinancialforum.nl/magazine/zomer-2021/">https://www.newfinancialforum.nl/magazine/zomer-2021/</ext-link></mixed-citation>
      </ref>
      <ref id="B14">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Kleinnijenhuis</surname><given-names>J</given-names></name></person-group> (<year>2020</year>) Belastingdienst had een geheime fraudelijst, in strijd met de privacywet. Trouw, 29 februari. <ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.trouw.nl/nieuws/belastingdienst-had-een-geheime-fraudelijst-in-strijd-met-de-privacywet~bdda4419/">https://www.trouw.nl/nieuws/belastingdienst-had-een-geheime-fraudelijst-in-strijd-met-de-privacywet~bdda4419/</ext-link></mixed-citation>
      </ref>
      <ref id="B15">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Kohlberg</surname><given-names>L</given-names></name></person-group> (<year>1973</year>) <article-title>The claim to moral adequacy of a highest stage of moral judgement.</article-title><source>Journal of Philosophy</source><volume>70</volume>(<issue>18</issue>): <fpage>630</fpage>–<lpage>646</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.2307/2025030">https://doi.org/10.2307/2025030</ext-link></mixed-citation>
      </ref>
      <ref id="B16">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Linder</surname><given-names>S</given-names></name><name name-style="western"><surname>Leca</surname><given-names>B</given-names></name><name name-style="western"><surname>Zicari</surname><given-names>A</given-names></name><name name-style="western"><surname>Casarin</surname><given-names>V</given-names></name></person-group> (<year>2020</year>) Designing ethical management control: Overcoming the harmful effect of management control systems on job-related stress. Journal of Business Ethics Published online: 13 April 2020. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/s10551-020-04490-9">https://doi.org/10.1007/s10551-020-04490-9</ext-link></mixed-citation>
      </ref>
      <ref id="B17">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Lintner</surname><given-names>J</given-names></name></person-group> (<year>1965</year>) The valuation of risk assets and the selection of risky investments in stock portfolios and capital budgets. Review of Economics and Statistics, 47, February.</mixed-citation>
      </ref>
      <ref id="B18">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Merchant</surname><given-names>KA</given-names></name><name name-style="western"><surname>White</surname><given-names>LF</given-names></name></person-group> (<year>2017</year>) <article-title>Linking the ethics and management control literatures.</article-title><source>Advances in Management Accounting</source><volume>28</volume>(<issue>1</issue>): <fpage>1</fpage>–<lpage>29</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1108/s1474-787120170000028001">https://doi.org/10.1108/s1474-787120170000028001</ext-link></mixed-citation>
      </ref>
      <ref id="B19">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Rasch</surname><given-names>M</given-names></name></person-group> (<year>2020</year>) Frictie: Ethiek in tijden van dataïsme. De Bezige Bij (Amsterdam).</mixed-citation>
      </ref>
      <ref id="B20">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Rosanas</surname><given-names>JM</given-names></name><name name-style="western"><surname>Velilla</surname><given-names>M</given-names></name></person-group> (<year>2005</year>) <article-title>The ethics of management control systems: Developing technical and moral values.</article-title><source>Journal of Business Ethics</source><volume>57</volume>(<issue>1</issue>): <fpage>83</fpage>–<lpage>96</lpage>. <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/s10551-004-3826-1">https://doi.org/10.1007/s10551-004-3826-1</ext-link></mixed-citation>
      </ref>
      <ref id="B21">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Schoonen</surname><given-names>W</given-names></name></person-group> (<year>2020</year>) Laat kunstmatige intelligentie vooral haar eigen gang gaan. Trouw, 29 augustus: 14,15. <ext-link xlink:type="simple" ext-link-type="uri" xlink:href="https://www.trouw.nl/wetenschap/laat-kunstmatige-intelligentie-vooral-haar-eigen-gang-gaan~b04322ed/">https://www.trouw.nl/wetenschap/laat-kunstmatige-intelligentie-vooral-haar-eigen-gang-gaan~b04322ed/</ext-link></mixed-citation>
      </ref>
      <ref id="B22">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Sharpe</surname><given-names>W</given-names></name></person-group> (<year>1964</year>) Capital Asset Prices: a theory of market equilibrium under conditions of risk. Journal of Finance, 19, September.</mixed-citation>
      </ref>
      <ref id="B23">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Simons</surname><given-names>R</given-names></name></person-group> (<year>1995</year>) Levers of control. How managers use innovative control systems to drive strategic renewal. Harvard Business School Press (Boston).</mixed-citation>
      </ref>
      <ref id="B24">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Soppe</surname><given-names>A</given-names></name></person-group> (<year>2017</year>) New Financial Ethics; A normative approach. Routledge (London, New York).</mixed-citation>
      </ref>
      <ref id="B25">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Soppe</surname><given-names>A</given-names></name><name name-style="western"><surname>Wagensveld</surname><given-names>K</given-names></name></person-group> (<year>2020</year>) Applying Ethics; Developing a MoralScan for middle-sized companies. In San-Jose L, Retolaza J, van Liedekerke L (eds.) Handbook on Ethics in Finance. International Handbooks in Business Ethics. Springer (Cham). <ext-link xlink:type="simple" ext-link-type="doi" xlink:href="10.1007/978-3-030-00001-1_22-1">https://doi.org/10.1007/978-3-030-00001-1_22-1</ext-link></mixed-citation>
      </ref>
      <ref id="B26">
        <mixed-citation xlink:type="simple"><person-group><name name-style="western"><surname>Verstegen</surname><given-names>G</given-names></name><name name-style="western"><surname>Soppe</surname><given-names>A</given-names></name></person-group> (<year>2020</year>) Ethiek voor financieel professionals. Boom, Management Impact (Amsterdam).</mixed-citation>
      </ref>
    </ref-list>
  </back>
</article>
