Lectio Praecursoria: Hybrid Narratives – Organizational Reputation in the Hybrid Media System

lectiokuvaPresented in the public defense of Salla-Maaria Laaksonen on June 16th 2017, at the University of Helsinki. [Lektio suomeksi täällä]

* *

Dear Custos, Mr Opponent, ladies and gentlemen,

Once upon a time the Internet was born.

The Internet that allowed us to find information, send messages, to express ourselves. The Internet that grew up and became an essential part of our everyday. Or so it is told.

Last autumn, I attended a professional workshop. The consultant asked us to write down the name of the biggest influencer of our life. Four out of seven participants wrote down “Internet”. I believe this is a feeling many of us can identify.

Indeed, it is a compelling narrative to tell how technology changed everything. We humans are programmed to tell and hear stories. We imagine narratives even to places where they do not exist. For us, narratives are a way to organize our lifeworld, and a means to explain changes such as the one brought by the rise of modern communication technologies and social media.

Actually, it is a more complex narrative to tell. It would be far too easy to say technology did it all. Instead, as I argue in my thesis, we are in the middle of not technological but a technosocial revolution that affects, among other things, the ways how we, as customers and citizens, interact with organizations.

* *

A central concept in my thesis is the concept of hybrid media system. This concept refers to our current media environment, mediated and maybe even amplified by technology. It is a reality, where the forms and logics of traditional media become merged with the forms of social media.

An illustrative example of the hybrid media space is the newsfeed of Facebook, in which updates written by ones peers are shown side by side with news produced by traditional media – either shared by media themselves or by one’s friends. Another prominent example is the collaborative online encyclopedia Wikipedia, where the content produced by users is to a large extent built by referring to news content or content elsewhere on the web. A third example is Google, the search engine that plays a very central role in our everyday, showing and sorting various media content for our queries and needs.

In my dissertation I explore the hybrid media system as a place of telling stories. From this perspective each blog post, status update or tweet is a small story, a fragment of a story, that the technology invites us to share about our everyday experiences. These small stories have become important building blocks of our daily lives. Certain online technologies act as storytelling tools in a very special way: they organize, curate and modify the stories we tell by combining and remixing them. For example Wikipedia functions exactly in such a manner, as well as does any search function in a service.

As we are using these technologies, every day, narratives are formed, and the narrators of these stories are both us humans and the technology on which we narrate. Next, let me explain how I came to this conclusion.

* *

In this dissertation I investigate, how reputation narratives concerning companies and other organizations are formed in the hybrid media system. That means that I am not that interested in the ways how the organizations themselves do marketing or communication. Instead, I am interested in the ways how human actors and non-human actors such as technology together write stories about the organizations.

This approach is actually quite common to reputation studies. Reputation is a concept that refers to the views the stakeholders of the organization have regarding that organization. What makes reputation special compared to its sister concepts such as brands or company images is that reputation always reflects the full historical performance of the organization. That is, reputations connect to the actual doings and deliverables of the organization. Brands and images can be constructed, but reputations need to be earned.

Thus, reputation narratives are not stories told by the organizations themselves. They are narratives told by customers, partners, reporters, analysts and by laypeople. They are stories, that are often based to the real encounters between the organization and its stakeholders – to the real experiences people have had with the organization or with its products and services.

Of course, such stories have always existed. They have been told on market squares, on coffee tables, and in swimming hall saunas. Maybe a friend has told he had a good experience in a restaurant. A neighbor recommended a good handyman to help with renovations.

Technology, however, changes the ways how stories about organizations are born and how they spread. What happens now is that emotional tweets made by fired employees are embedded in the news about shutting down a factory unit. A customer dissatisfied with a hotel room can go and make a public YouTube video that shows the ugly room, and then ends up in the Facebook feeds of thousands of people, and most likely will be eventually covered by traditional media. A horror story of a dishonest car dealer is anonymously spelled out in Suomi24 and ends up in the Google search of a random user – and this happens even years after the original post has been made.

In this dissertation I study these stories from two perspectives. First, using online discussions, Wikipedia material and interviews of professionals I study how such reputation narratives are formed in the hybrid media system. Second, using an experimental setting I investigate how these stories affect the people who read them, and how they are shown as psychological and physiological reactions in our bodies.

* *

Thus, from the perspective of organizational reputation studies I am building a novel approach to reputation by seeing it from the perspective of communication. Traditionally organizational reputation has been studied either as a form of capital, an intangible asset, or as an interpretative element of the organization. In this dissertation I put forth a suggestion that reputation can be seen as a communicative phenomena, which exists as individual mental frame but also as socially constructed narratives. These narratives can have measurable effects to the people consuming them, and hence, to the mental frames of reputation.

* *

One important factor behind these effects is emotion. The results of my dissertation also show that reputation itself is not only rational but also an affective concept. Traditionally reputation research as well as various reputation measurements have focused on rational aspects of reputation: quality of products, leadership, financial success.

However, the psychophysiological measurements conducted in the sub studies of this dissertation show, that good and bad reputation companies elicit different physiological responses in out test participants while they are reading online news and comments concerning these organizations.

Reputation is thus not only about rational evaluation, but also an emotional assessment, embodied in our physiology. That is why reputation unconsciously affects our decisions when for example making choices between brands. And that is why for organizations both reputation and reputation narratives indeed are a form of intangible capital.

Emotions are also a prominent element of the hybrid media system, and of the reputation narratives themselves. The narratives concerning organizations online are often very emotional. Organizations make us love and hate, they drive us to create fan communities and noisy hate groups. The properties of the technology from emojis to like buttons are also inviting us to express our emotions.

The importance of feelings shows also in the ways how communication professionals interpret and evaluate different media forms of the hybrid media. There is an aura of rationality attached to traditional media and an aura of emotionality attached to social media. In particular, the professionals see social media as an arena overwhelmed with emotion and therefore difficult to grasp.

* *

As the main result of this dissertation I propose that the reputation narratives that are born in the online are very specific forms of narrative by nature: they are hybrid reputation narratives.

Hybrid reputation narratives are polyphonic and emotional narratives born in the interaction between human and non-human actors. They are narratives in which the story elements can be stored in databases, searched, and hyperlinked by various, interacting actors, who through their use of the technical platforms generate the reputation narrative from fragmentary story pieces, one time after another. That is why there are no two similar reputation narratives.

So, narratives in this dissertation, are not conceptualized in a traditional sense, as a coherent story that has a beginning, the middle, and the end. Instead, they are new kinds of stories enabled by technologies, which allow for the participation of many authors and many platforms, collecting a narrative from various story pieces here and there. I argue that in such a technological environment the narrator can also be the user who is searching, selecting and clicking; navigating through different texts and images and creating their own, non-linear storyline.

This is a process in which opinions and facts, as well as rational and emotional content become merged, and in which the storytelling power of the technology interacts and intervenes with the storytelling power of the human actors. In the hybrid media system, the user is bestowed with agency and storytelling capacity, but this agency is both limited and enabled by the technology through which the storytelling takes place.

* *

For years, social scientists have been arguing over the relationship between technology and the society. The most extreme stance is known as technological determinism, that is the assumption that the technology determines the development of the social structure in a given society.

In science and technology studies a reconciling approach has been called the mutual shaping approach, suggesting that society and technology are not mutually exclusive to one another but, instead, they influence and shape each other.

This dissertation suggests that technology changes the ways how stakeholders are telling reputation narratives. In the hybrid media system the users’ storytelling capabilities are both enabled and constrained by the technology, on which the stories are being told. Technology and society studies explain this agency with the term affordance, the possibility of an action given by an object or environment.

This influence, however, is not purely technological. It does not refer only to like buttons and smart phones, but also to the forms and social practices born on a given platform, or in the hybrid media system as a system: practices such as taking pictures of our everyday lives, sharing media content to our friends, updating Wikipedia pages according to the editing rules, or expressing emotions using small yellow faces, are all examples of the media logics of the hybrid media system.

In the end the social action and human choices while using the technology affect what kind of stories are told. The specific ways of using technology, the media logics, are affected by the cultural and social context of the hybrid media system. Therefore, hybrid media cannot be studied only as technology, but they cannot be studied without the technology either.

A concrete example that shows the importance of social action is that social media tools were created for personal communication. They were not created to serve as media where people could express their dissent towards organizations or politicians or to start revolutions. Nonetheless, they have grown to have a role as such tools.

This is why it can be stated that the technology changes the way how business and society relationships unfold in the current media system. That is why technology matters, and why also social scientists should show pay attention to it.

Hate speech detection with machine learning — a guest post from Futurice

This blog post is a cross-posting from Futurice and written by Teemu Kinnunen (edits, comments and suggestions given by project participants Matti and Salla from Rajapinta)

* *

(Foreword by Teemu Turunen, Corporate Hippie of Futurice)

The fast paced and fragmented online discussion is changing the world and not always to the better. Media is struggling with moderation demands and major news sites are closing down commenting on their articles, because they are being used to drive an unrelated political agenda, or just for trolling. Moderation practice cannot rely on humans anymore, because a single person can easily generate copious amounts of content, and moderation needs to be done with care. It’s simply much more time consuming than cut and pasting your hate or ads all across the internet. Anonymity adds to the problem, as it seems to bring out the worst in people.

Early this year the nonprofit Open Knowledge Finland approached [Futurice] with their request to get pro bono data science help in prototyping and testing a machine learning hate speech detection system during our municipal elections here in Finland.

The solution would monitor public communications of the candidates in social media and attempt to flag those that contain hate speech, as it is defined by the European Commission and Ethical Journalism Network.

The Non-Discrimination Ombudsman (government official appointed by our government to oversee such matters) would review the results. There are also university research groups involved. This would be an experiment, not something that would remain in use.

After some discussion and head scratching and staring into the night we [at Futurice] agreed to take the pro bono project.

A tedious and time consuming repetitive task is a good candidate for machine learning, even if the task is very challenging. Moderation by algorithms is already done, just not transparently. An example? Perspective API by Jigsaw (formerly Google Ideas) uses machine learning models to score the perceived impact a comment might have on a conversation. The corporations that run the platforms we broadcast our lives on are not very forthcoming in opening up these AI models. The intelligence agencies of course even less so.

So we feel there’s a need for more open science. This technology will reshape our communication and our world. We all need to better understand its capabilities and limitations.

We understand that automatic online discussion monitoring is a very sensitive topic, but we trust the involved parties – specifically the non-discrimination ombudsman of Finland – to use the technology ethically and in line with the Finnish law.

In this article [Futurice’s] Data Scientist Teemu Kinnunen shares what we have done.

Technology

The hate speech detection problem is very challenging. There are virtually unlimited ways how people can express thoughts including also hate speech. Therefore, it is impossible to write rules by hand or a list of hate words, and thus, we crafted a method using machine learning algorithms.

The main goal in the project was to develop a tool that can process messages in social media and highlight the most likely messages containing hate speech for manual inspection. Therefore, we needed to design a process to find potential hate speech messages and to train the hate speech detector during the experiment period. The process we used in the project is described in Fig. 1.

Figure 1: Process diagram for hate speech detection.

At first, a manually labeled training set was collected by a University researcher. A subset from a dataset consists of public Facebook discussions from Finnish groups, collected for a University research project HYBRA, as well as another dataset containing messages about populist politicians and minorities from the Suomi24 discussion board. The training set was coded by several coders to confirm agreement of the data (kappa > .7). The training set was used to select a feature extraction and machine learning method and to train a model for hate speech detection. Then we deployed a trained model that was trained with manually labeled training samples. Next, we downloaded social media messages from a previous day and predicted their hate speech scores. We sorted the list of messages based on predicted hate speech scores and send messages and their scores to a manual inspection. After the manual inspection, we got new training samples which we used to retrain the hate speech detection model.

Feature extraction

Bag-of-features

There are many methods to extract features from text. We started with standard Natural Language Processing methods such as stemming and Bag-of-Words (BoW). At first, we stemmed words in the messages using Snowball method in the Natural Language Toolkit library (NLTK). Next, we generated a vocabulary for bag-of-words using the messages in manually labelled training samples. Finally, to extract features for each message, we computed a distribution of different words in the message i.e. how many times each word in the vocabulary exists in the message.

Some of the words appear nearly in each message, and therefore, provide less distinctive information. Therefore, we gave different weights for each word based on how often they appear in different messages using the Term Frequency – Inverse Document Frequency weighting (TF-IDF). TF-IDF gives higher importance for the words which are only in few documents (or messages in our case).

Word embeddings

One of the problems in bag-of-features is that it does not have any knowledge about semantics of words. The similarity between two messages is calculated based on how many matching words there are in the messages (and their weights from TF-IDF). Therefore, we tried word embeddings which encodes words that are semantically similar with similar vectors. For example, a distance from an encoding of ‘cat’ to an encoding of ‘dog’ is smaller than a distance from an encoding of ‘cat’ to an encoding of ‘ice-cream ’. There is an excellent tutorial to word embeddings on Tensorflow site for those who wants to learn more.

In practice, we used the fastText library with pre-trained models. With fastText, one can convert words into vector space where semantically similar words tend to appear close by each other. However, we need to have a single vector for each message instead of having varying number of vectors depending on the number of words in a message. Therefore, we used a very simple, yet effective, method: we computed a mean of word encodings.

Machine learning

The task in this project was to detect hate speech, which is a binary classification task. I.e the goal was to classify each sample into a no-hate-speech or a hate-speech class. In addition to the binary classification, we gave a probability score for each message, which we used to sort messages based on how likely they were hate speech.

There are many machine learning algorithms for binary classification task. It is difficult to know which of the methods would perform the best. Therefore, we tested a few of the most popular ones and choose the one that performed the best. We chose to test Naive Bayes, because it has been performing well in spam classification tasks and hate speech detection is similar to that. In addition we chose to test Support Vector Machine (SVM) and Random Forest (RF), because they tend to perform very well in the most challenging tasks.

Experiments and results

There are many methods for feature extraction and machine learning that can be used to detect hate speech. It is not evident which of the methods would work the best. Therefore, we carried out an experiment where we tested different combinations of feature extraction and machine learning methods and evaluated their performance.

To carry out an experiment, we needed to have a set of known sample messages containing hate speech and samples that do not contain hate speech. Aalto researcher Matti Nelimarkka, Juho Pääkkönen, HU researcher Salla-Maaria Laaksonen and Teemu Ropponen (OKFI) labeled manually 1500 samples which were used for training and evaluating models.

1500 known samples is not much for such as challenging problem. Therefore, we used k-Fold cross-validation with 10 splits (k=10). In this case, we can use 90% sample for training and 10% for testing the model. We tested Bag-of-Words (BOW) and FastText (FT) (Word embeddings) feature extraction methods and Gaussian Naive Bayes (GNB), Random Forest (RF) and Support Vector Machines (SVM) machine learning methods. Results of the experiment are shown in Fig. 2.

Figure 2: ROC curves for each feature extraction – machine learning method combination. True Positive Rate (TPR) and False Positive Rate (FRP). The FPR axis describes the ratio of mistake (lower is better) and the TPR axis describe the overall success (higher is better). The challenge is to find a balance between TPR and FPR so that TPR is high but FPR is low.

Based on the results presented in Fig. FIGEXP, we chose to use BOW + SVM to detect hate speech. It clearly outperformed other methods and provided the best TPR which was important for us, because we wanted to sort the messages based on how likely they were hate speech.

Model deployment

Based on the experiment, we chose a feature extraction and machine learning method to train a model for hate speech detection. In practice, we used the score of the binary classifier to sort the messages for manual inspection and annotation.

We ran the detector once a day. At first, we downloaded social media messages from a previous day, then predicted hate speech (scored each message) and stored the result in a CSV file. Next, we converted this CSV file to Excel for manual inspection. After manual inspection, we got new training samples which were used to retrain the hate speech detection model.

During the field experiment, we found out that the model was able to sort the messages based on the likelihood of containing hate speech. However, the model was originally trained with more biased set of samples, and therefore, it gave rather high scores also for messages not containing hate speech. Therefore, manual inspection was required to make the final decision for the most prominent messages. Further measures concerning these messages were done by the Non-Discrimination Ombudsman, who in the end contacted certain parties regarding the findings.

Conclusions

In a few weeks, we built a tool for hate speech detection to assist officials to harvest social media for hate speech. The model was trained with rather few samples for such a difficult problem. Therefore, the performance of the model was not perfect, but it was able to find a few most likely messages containing hate speech among hundreds of messages published each day.

In this work, training -> predicting -> manual inspection -> retraining – iteration loop was necessary, because in the beginning, we had quite limited set of training samples and the style of the hate speech can change rapidly e.g. when something surprising and big happens (A terrorist attack in Sweden happened during the pilot). The speed of the iteration loop defines how efficiently the detector works.

Hybridejä mainenarratiiveja, tunteella ja teknologialla – väitöstilaisuus 16.6.2017

Screen Shot 2017-06-06 at 00.19.27VTM Salla-Maaria Laaksonen eli allekirjoittanut väittelee 16.6.2017 kello 12 Helsingin yliopiston valtiotieteellisessä tiedekunnassa aiheesta “Hybrid narratives – Organizational Reputation in the Hybrid Media System“. Tervetuloa mukaan väitöstilaisuuteen kuulemaan akateemista debattia organisaatiomaineesta ja verkkojulkisuudesta! Alla lyhyt yhteenveto tutkimuksesta.

***

Tutkin väitöskirjassani sitä, miten yrityksiä ja muita organisaatioita koskevat mainetarinat muodostuvat hybridissä mediatilassa. Tutkimusongelma on kaksitahoinen: tutkin, miten uusi viestintäympäristö vaikuttaa organisaatiomaineen muodostumiseen, ja toisaalta sitä, minkälaisia kognitiivisia ja emotionaalisia vaikutuksia maineella ja mainetarinoilla on. Hybridi mediatila on viestinnän tutkimuksen tuoreehko käsite (Chadwick 2013), joka pyrkii ymmärtämään nykyistä mediamaisemaa. Hybridiys viittaa eri mediamuotojen sekoittumiseen: sosiaalisen median ja perinteisen median sisällöt ja muodot elävät verkkojulkisuudessa vahvasti sekoittuneena.

Tarkastelen väitöskirjassani hybridia mediatilaa tarinankerronnan paikkana. Tästä näkökulmasta jokainen blogikirjoitus tai twiitti on pieni kertomus, jollaisia teknologia kutsuu meitä kertomaan arjesta ja kokemuksistamme. Monet kertomuksista käsittelevät suorasti tai epäsuorasti yrityksiä ja muita organisaatioita – jolloin ne ovat määritelmällisesti mainetarinoita. Niitä on jaettu arjessa aikaisemminkin, mutta teknologia mahdolistaa uudenlaista tarinankerrontaa: tarinat leviävät lähipiiriä laajemmalle, ne arkistoituvat, ja nistä tulee etsittäviä ja muokattavia.

Osa verkon teknologioista toimiikin tarinankerronnan apuvälineinä hyvin erityisellä tavalla: ne järjestävät, kuratoivat ja muovaavat kertomuksia yhdistämällä erilaisia tarinanpalasia yhteen näkymään. Näin toimii esimerkiksi joukkovoimin ylläpidetty tietosanakirja Wikipedia tai verkon sisältöä penkovat hakukoneet. SIksi hybridissä mediassa maineen tarinankertojina toimivat sekä ihmistoimijat että teknologia yhdessä. Väitöskirjani pohjalta esitänkin, että teknologia muuttaa niitä tapoja, joilla sidosryhmät kertovat tarinoita organisaatioista. Verkkojulkisuuden alustoilla syntyvissä tarinoissa sekoittuvat paitsi eri mediamuodot, myös faktat ja mielipiteet sekä rationaalinen ja emotionaalinen sisältö.

Väitöskirjani korostaakin tunteiden merkitystä maineelle. Niin maineen tutkimuksessa kuin erilaisissa mainemittareissakin on perinteisesti keskitty rationaalisiin ominaisuuksiin: tuotteiden laatuun, johtajuuteen, taloudelliseen menestykseen. Maine näyttäisi kuitenkin olevan yhtä paljon myös emotionaalinen käsite. Organisaatioita käsittelevät kertomukset verkossa ovat hyvin tunnepitoisia: yritysten kanssa ihastutaan ja vihastutaan, niiden ympärille rakentuu faniyhteisöjä ja vihaisia kohuyhteisöjä. Teknologian ominaisuudet emoji-hymiöistä tykkää-nappulaan myös kannustavat ilmaisemaan tunteita.

Eikä tunteissa ole kyse vain ilmaisusta. Väitöskirjan osatutkimuksessa osoitettiin, että hyvä ja huono maine näkyvät eri tavoin koehenkilöiden kehollisissa reaktioissa, kun he lukevat yritystä koskevia verkkouutisia tai verkkokommentteja. Maine on siis myös tulkintakehys: tiedostamaton, kehollinen reaktio, joka ohjaa ihmisen toimintaa esimerkiksi ostoksilla valintatilanteessa.

Mainetutkimuksen näkökulmasta rakennankin työssäni uudenlaista kulmaa mainetutkimukseen. Mainetta on perintisesti tutkittu joko organisaation taloudellisena voimavarana tai tulkinnallisena elementtinä sidosryhmien mielissä. Tässä työssä määrittelen maineen viestinnällisenä ilmiönä, joka on olemassa yksilöiden tulkintakehyksenä sekä sosiaalisesti rakentuneina narratiiveina. Mainenarratiiveilla on kuitenkin myös mitattavia vaikutuksia niitä lukeviin ihmisiin ja heidän tulkintakehyksiinsä. Siksi sekä maine että mainetarinat ovat organisaatioille aineetonta pääomaa.

Väitöskirja koostuu viidestä artikkelista ja yhteenvetoluvusta. Artikkeleissa on käytetty neljää eri aineistoa: viestinnän ammattilaisten haastatteluja, sosiaalisen median verkkokeskusteluaineistoja, Wikipedia-aineistoa sekä psykofysiologisia mittauksia. Näin ollen tutkimus yhdistää metodisesti laadullista, narratiivista analyysia kokeelliseen tutkimukseen.

***

TLDR; “Hybridi mainetarina syntyy kun 😩 ja 👾 yhdessä käyttäen apunaan📱💻, muodostavat 📜💌📜 , jotka verkkojulkisuudessa 💾 ja 📢 ja joilla on 📉 vaikutuksia 🏭🏨 🏢:lle.” (ref. Your Research, emojified)

Väitöskirjan elektroninen versio on luettavissa E-thesis -palvelussa.

Väitöskirjaa ovat rahoittaneet Liikesivistysrahasto ja Tekes.

Juhlavuoden kunniaksi, #WikiSuomi100

Suomi täyttää tänä vuonna 100. Juhlavuodesta ja hyvistä tavoista viettää sitä voi olla montaa mieltä. Suomessa maksuttoman koulutuksen saaneena, tätä nykyä ulkomailla työskentelevänä, ja voittopuolisesti englanniksi kirjoittavana tutkijana minusta joka tapauksessa tuntuu, että jonkinlainen huomionosoitus olisi paikallaan.

Tästä lähtökohdasta syntyi idea #WikiSuomi100-kampanjasta. Kyse on uudenvuodenlupauksesta, jolla sitoutan itseni tekemään tämän vuoden aikana (vähintään) sata lisäystä ja/tai muokkausta suomenkieliseen Wikipediaan. Se ei ole paljon, mutta toivonkin tämän olevan ennen muuta yllyke toisillekin tehdä samoin – sekä lähtölaukaus meille kaikille kirjoittaa Wikipediaan enemmän ja useammin, (myös) suomeksi.

Tule mukaan! Jos olet jo aktiivinen wikipedisti, nostan hattua ja kannustan muokkaamaan haasteen sopivaksi. Voit vaikkapa keksittyä juhlavuoden kunniaksi tiettyihin teemoihin, laajentaa kotiseutujuttuja sukulaisten avustuksella, tai auttaa jonkun sellaisen haasteen kanssa alkuun, jolle Wikipedian editoiminen tuntuu vieraalta ajatukselta.

Ja jos oikein innostutaan, ehkä voitaisiin kutsua koolle Rajapinnan omat #WikiSuomi100-talkoot myöhemmin tänä vuonna!

Nyt malttia Kela – digitalisaatio ja julkinen hallinto

computer2bsays2bnoEräs työkaverini huomasi, että Kelakin on lähtenyt mukaan digitalisaatiopöhinään. Kela hienosti kuvaa, kuinka ensimmäisenä sujuvoitetaan prosesseja ja mietiään, miten tämä pitäisi tehdä; vasta tämän jälkeen asia digitalisoidaan. Samaan aikaan tekstistä kuitnekin huokuu tietty usko siihen, että palveluprosessia voi selkeyttää käyttämällä Suomessa tällä hetkellä ah-niin-trendikästä tekoälyä.

Jansson & Erlingsson (2014) kuvaavat sähköisen hallinnon (e-Government) kehittymistä Ruotsissa 1980-luvulta 2000-luvulle. Heidän mielenkiintoisin löydös liittyi useisiin yrityksiin automatisoida ja vähentää julkishallinnon asiakaspalvelun määrää: automaattiset prosessit eivät koskaan osaa tulkita sääntöjä rivien välistä sekä harkita kokonaisuutta. Toki voidaan sanoa, ettei kokonaistilanteen tulkinta ei ole ollut ennekään Kelan vahvuus, joten ehkä tässä ei menetetä mitään. On kuitenkin syytä pitää mielessä Janssonin & Erlingssonin huomio

The fact that technology does not discriminate, but treats everyone as equal, there- fore becomes both its biggest advantage and disadvantage—the former because arbitrariness can be avoided and the latter because various needs, issues, or skills are not captured

Kelan kuvaama visio digitalisaation mahdollisuuksista todellakin tuo esille sitä, että vihdoinkin on mahdollista palvella kaikki samalla tavalla ja hehkutetaan, kuinka tämä on parannus nykytilanteeseen. Esimerkiksi Kelan esimerkki siitä kuinka työttömäksi jäänyttä autetaan tulevaisuudessa näyttää tietyn deterministisyyden lähestymistavassa:

Kone voi hahmottaa esimerkiksi työttömäksi jääneen ihmisen tilannetta jatkokysymyksillä. Tiedätkö, milloin uusi työ on alkamassa? Oletko kiinnostunut koulutuksesta? Haetko työttömyysetuutta?

Tarkoitukseni ei ole kuitenkaan vain nurista tai änkyröidä. Digitalisaatiossa on paljon mahdollisuuksia prosessien yksinkertaistamisessa. Esimerkiksi automaatisoitu veroehdotus on hyvä esimerkki siitä, miten kokonaista ajatusmaailmaa voidaan kääntää kerralla oikeaan suuntaan.

Kelassakin on varmasti prosesseja, joita voi automatisoida erittäin helpposti – esimerkiksi opintotuen myöntäminen sekä lapsilisät. Näissä elämänvaiheissa ei yleensä ole muuten isoa kriisiä missä olisi syytä tarkastella koko yhteiskunnan turvaverkon toimintaa.

Mutta esimerkiksi työttömyydessä – vaikka se perusturvan myöntäminen on helppoa – voisi olla hyväksi samaan aikaan tarkastella elämää laajemmin. Olisiko syytä yrittää hakea toimeentulotukea? Miten Kelan, kunnan ja työvoimaviranomaisten palvelut muodostavat yhtenevän kokonaisuudeen? Näitä kysymyksiä ei sellaisenaan voine jättää automaation varaan, varsinkaan jos se toteutetaan mitä Neyland & Möllers (2016) kutsuivat if-then -säännöillä, eli yksinkertaisiksi “jos tämä pitää paikkansa tee näin”-mallehin. Minun ei ole mitään syytä epäilä, etteikö Kelan pyrkimys olisi tämän kaltaiseen automatisaatioon, koska kaikki ehdot voitaisiin silloin ottaa suoraan Kelan sääntelystä. Tällöin kyseessä on joustamaton ja etukäteen määritelty lähestymistapa sosiaaliturvaan.

Toki tekoälyllä voisi tehdä paljon muutakin! Voidaan mielikuva-harjoituksena miettiä osittain ohjattua tai ohjaamatonta koneoppimista sosiaaliturvan osana: sen sijaan, että säädökset sanoisivat tarkkaan, mitä tukea annetaan ja kuinka paljon, annettaisiin tekoälylle hieman vapautta säädellä itseään. voitaisiin miettiä myös muuta tapaa lähteä (mihin uskon Kelan paljon puhuman tekoälyn perustuvan; siellä tuskin on taustalla esimerkiksi pyrkimystä tehdä laajaa koneoppivaa prosessia, joka korjaisi toimintaansa huomattuaan, mitä vaikutuksia sosiaaliturvapäätöksillä oli. (Ei, en pidä tätä hyvänä ideana; mutta venytellään vähän aivoja siitä, mitä tekoälyllä voisi saada aikaan.)

Tiivistäen: digitalisaatio ei mielestäni ole sellaisenaan hyvä tai paha. Kysymys on enemmän löytää tasapaino automatisoitujen palveluiden ja automatisoimattomien palveluiden kohdalla. Koen, että sosiaaliturva on eräs alue, missä tiukka byrokratia (joko algoritmisesti tai algoritmittomasti) ei välttämättä tuota yhteiskunnan kannalta parasta lopputulosta. Sen sijaan pitäisi pyrkiä arvioimaan kokonaiskuvaa ja rakentaa tukijärjestelmiä tämän kautta – missä ihmiset ovat usein parempia kuin mikään tekoälyllinen prosessi.

 

Smarter Social Media Analytics Underhoodilla

IMG_20170403_161015Vietimme viikon 3.-7.4. SSMA-projektin tutkijaporukkalla startupyritys Hupparihörhön luona. Kenttätyöviikon tarkoituksena oli tutustua Hupparihörhön kehittämään Underhood-palveluun, joka mittaa yritysten mainetta sosiaalisen median dataan perustuen.

Underhood on ollut lähikuukausina uutisissa toteutettuaan Aamulehden kanssa kuntavaalitulosta Tampereella ennustavan mainemittarin. SSMA-projektin puolesta olemme kiinnostuneita tutkimaan, miten sosiaalisen median datalla voidaan mitata ja ennustaa yhteiskunnallisia ilmiöitä. Viikko Underhoodilla kuntavaalien alla tarjosi erinomaisen mahdollisuuden seurata konkreettisen tapauksen ennustamista somedatasta perehtyen samalla Underhoodilaisten näkemyksiin data-analytiikan mahdollisuuksista.

Alkuviikon aikana tutustuimme Underhoodin somedatasta yrityksille laskemaan mainepisteytykseen, joka perustuu kolmelle eri mittarinarvolle. Ensinnäkin Underhood seuraa yritysten näkyvyyttä, joka lasketaan yrityksen Facebook-sivun saamien tykkäysten ja Twitter-seuraajien määristä sekä Facebookin antamasta buzz-arvosta. Toiseksi Underhood mittaa yritysten dialogia someyleisön kanssa, joka määrittyy yrityksen keskimääräisen julkaisumäärän ja julkaisujen saamien kommenttien, tykkäysten sekä jakojen perusteella. Lisäksi dialogimittarin arvoon vaikuttaa yrityksen vastausaste saamiinsa kommentteihin. Kolmanneksi mainepisteytykseen vaikuttavat yrityksen ja yleisön käyttämien sanojen samanlaisuus ja sentimenttianalyysilla saatu yleisön kommenttien sävy. Näkyvyyttä, dialogia ja samanlaisuutta mittaavat pisteet skaalataan Underhoodissa asteikolle 0-10. Näiden pisteiden keskiarvosta lasketaan sitten varsinainen mainepisteytys, jonka arvo on myös asteikolla 0-10.

Underhood-pisteytyksen ja sen tekijöiden tarkastelussa meitä kiinnostaviksi kysymyksiksi nousivat eri mittareiden väliset suhteet ja mittauskohteet: mitä oikeastaan mitataan, kun kerätään dataa esimerkiksi yritysten ja Facebook-tykkääjien yhteisesti käyttämien sanojen määristä? Millä perustein voisimme ajatella, että somedatan pohjalta määritetyt mittarit olisivat luotettava ennustaja ilmiöille, joita koskeva uutisointi ja keskustelu eivät rajoitu sosiaaliseen mediaan?

Underhood-pisteytys on aikaisemmin ennustanut oikein esimerkiksi semifinalistien valinnan Ison-Britannian X-Factor -ohjelmassa, mutta kilpailun voittajan ennuste sen sijaan oli väärä. Yksi selitys tälle on, että ennusteen sotki kansainvälisen sosiaalisen median osoittama kiinnostus: X-Factor UK:ssa äänestäminen oli mahdollista ainoastaan Isossa-Britanniassa, mutta Underhood-pisteytys heijasteli finalistien suosiota kansainvälisellä tasolla. Tämä on esimerkki tapauksesta, jossa sosiaalisen median dataan perustuvat mittarit mittaavat ennusteen kohteesta (pärjääminen Ison-Britannian X-Factorissa) erillistä ilmiötä (suosio kansainvälisessä sosiaalisessa mediassa).

Saimme käyttöömme Underhoodin pisteytyksen perustana olevan datan, joka sisälsi eri mittareiden arvot ja näihin vaikuttavat tekijät päiväkohtaisesti tallennettuina elokuulta 2016 alkaen (dataa yhteensä 3958 yritykseltä ja poliitikolta). Viikon aikana tutkimme datan eri muuttujien riippuvuutta toisistaan ja vertasimme eri mittarinarvojen muutosta muun muassa yritysten toimialan ja liikevaihdon suhteen. Kiinnostavasti havaitsimme, että yritysten ja someyleisön kielenkäytön keskinäinen samanlaisuus korreloi yritysten julkaisujen saaman kommenttimäärän kanssa. Tämä viittaisi siihen, että samanlaisuusmittari saattaa kuvata käytetyn kielen yhteneväisyyden lisäksi myös keskustelun volyymia sosiaalisessa mediassa.

Eri sosiaalisen median dataan perustuvien mittareiden välinen “työnjako” vaikuttaisi olevan yksi merkittävä tekijä ilmiöiden ennusteiden arvioissa. Ennusteen luotettavuuden arvioinnissa on tärkeää tietää, mitä ilmiön puolia eri mittarit mittaavat. Erillisiä mittareita käytettäessä olisi hyvä varmistua, että ilmiön eri puolia mittaavat pisteytykset eivät riipu keskenään samoista tekijöistä, kuten esimerkiksi keskustelun aktiivisuudesta. Näin mittareiden keskinäisen tärkeyden tai painotuksen arviointi selkeytyy ennustetta muodostaessa.

Underhoodin mittareiden keskinäiset painotukset ovat viime päivinä nousseet esille myös Aamulehden mainemittarin antamien kuntavaaliennusteiden yhteydessä. Mittarin ennusteet eivät lopulta vastanneet kuntavaalitulosta Tampereella. Aamulehdessä tämän arvioitiin johtuvan ehdokkaiden suuresta määrästä ja suhteellisesta vaalitavasta, jotka vaikeuttivat mainemittarin antamien lukujen tulkintaa. Underhoodin mukaan mittari taas olisi antanut tarkemman tuloksen, jos Facebook-tykkääjien määrää olisi painotettu nykyistä enemmän.

Keskeisellä sijalla tässäkin tapauksessa on kysymys: minkä ehtojen vallitessa voimme pitää sosiaalisen median suosiota luotettavana ennustajana vaalitulokselle? Underhoodin mainemittarin antamat ennusteet eri ilmiöistä – olivat ne sitten onnistuneita tai eivät – tuottavatkin hyödyllistä aineistoa, jonka avulla tätä ongelmaa voidaan tutkia.

Tule mukaan: ECSCW 2017 Workshop on Nomadic Culture Beyond Work Practices

Tule mukaan loppukesästä ECSCW-konferenssin yhteydessä, osin rajapintalaisin voimin, järjestettävään työryhmään:

ECSCW 2017 Workshop on Nomadic Culture Beyond Work Practices
August 29th, 2017, Sheffield, UK

************ IMPORTANT DATES ************
* Submission deadline: May 26th, 2017
* Notification of acceptance: June 16th, 2017
* Camera ready: June 30th, 2017
* Workshop day: August 29th, 2017

Workshop themes
*********************
Ten years after a successful workshop at ECSCW 2007 on a related theme, we set out to revisit the notion of nomadicity in light of recent research and empirical changes, such as the spread of wireless connectivity, the rise of the so-called ‘gig economy’ and the development of a nomadic culture entangling economic, social, cultural and technological practices enabling and constituting nomadicity.

We seek contributions that will deepen the current understanding of “nomadic culture”, as well as highlight opportunities and challenges for design. Contributors may wish to address a range of issues, including, but not restricted to:

* The transition from micro to macro aspects of nomadicity and from place-making practices to trajectories of nomadic lives;
* The transition from a work-centred to a practice-centred research entailing the work and non-work dimensions of people’s lives, and the negotiation and reconfiguration of work-life boundaries;
* Accounts of nomadic practices as emerging from novel spatial and organisational contexts;
* The range of organisational aspects, motivational factors, personal values and expectations underling the flexibility stemming from this way of working;
* The adoption of methodologies and frameworks to investigate trajectories of nomadic lives in changing organisational, technological and personal circumstances.
* The role of the constellations of technologies and digital platforms in enabling nomadic cultures, but also in creating a potential range of problems/issues to be dealt with;
* An examination of how we might identify those forces, contexts and dynamics that hinder, resist or work against the momentum of ‘nomadic culture’
* The technological, cultural, political and economic rationalities that underpin and legitimise contemporary enactments of nomadic work and the reproduction of nomadic culture;
* Methodological innovations in the study of nomadic culture;
* Analysis of the relationship between greater merging of human and machine and formations of nomadic culture;
* The role of technology as discourse in socially, culturally and ideologically shaping nomadic culture and nomadic worker subjectivity;
* Analysis of how a nomadic culture that emphasises constant technological innovation constitutes the relationships between capitalist goals of competition and profit and individual life aims;
* Explorations of what present and future “Nomadic Culture(s)” might look like, and of the challenges and issues we will be addressing by 2027.

Interdisciplinary participation from designers, developers, sociologists, psychologists, ethnographers, etc. is appreciated. In this way, the workshop will provide an important opportunity for researchers from both academia and industry to share ideas and possibly coordinate their efforts.

Submission format
*********************
Participants interested in contributing with a position paper have to send in a submission (max. 4 pages) containing a brief overview over the key ideas of the presentation and some information on their occupational background. Submissions must adhere to the IRSI series Format

Submission process
***********************
Papers must be submitted directly to the workshop organisers through the e-mail: nomadic-culture-ws@googlegroups.com

Review process
******************
Contributions will be reviewed by the workshop organisers and selected on the basis of their quality, compliance with the workshop theme, and the extent (and diversity) of their backgrounds in terms of fieldwork, design, and technology.

Publication
*************
Position papers accepted and presented in the workshop will be published in the workshop proceedings, which will be edited by the workshop organisers. The proceedings will include the final versions of all accepted contributions, adjusted to satisfy reviewers’ recommendations. It will be published as an issue of the International Reports of Social-Informatics (IIRSI) series from the International Institute of Socio-Informatics (IISI) in Bonn, Germany.

Organisers
*************
Chiara Rossitto, Stockholm University
Aparecido Fabiano Pinatti De Carvalho, University of Siegen
Luigina Ciolfi, Sheffield Hallam University
Airi Lampinen, Stockholm University
Breda Gray, University of Limerick

Contact
*********
E-Mail: nomadic-culture-ws@googlegroups.com

More information can be found at https://nomadicculturews.wordpress.com/