Sarcasm Detector

quote:

So the American secret service is looking for a way to detect sarcasm on Twitter. Of course they are.
Keen to develop a way of automating its social media monitoring service, the spy agency has put out a tender to find a company able to develop a program allowing its computers to filter sarcastic threats from serious ones, as well as conducting “sentiment analysis”.

Ed Donovan, a spokesperson for the Secret Service, apparently claimed, without a trace of irony: “The ability to detect sarcasm and false positives is just one of 16 or 18 things we are looking at.”

Yeah, right. Not. There is nothing easier to spot with a bit of clever programming and some smart algorithms. Language experts may suggest they pick up on the idea – entirely serious and po-faced after all – put forward by the mischievous journalist Bernard Levin some years ago, when he suggested there should be a special typeface for these circumstances, named “ironic”, just so that people such as Americans could detect the presence of irony where no other indications are present.

It would be quite simple to introduce this on a global scale, across every language, and culture, and have Twitter, Google and others in the more traditional media agree to it.

Maybe it isn’t even necessary, as satire is so easy to see: after all, centuries ago, Jonathan Swift’s A Modest Proposal for Preventing the Children of Poor People From Being a Burthen to Their Parents or Country, and for Making Them Beneficial to the Publick – advocating the consumption of babies – was instantly recognised as the early spoof it was.

Well, let’s not be sarky or falsely positive here. Let’s be positively positive. Western spying agencies have always been paragons of efficiency, and purveyors of intelligence. They have never been outfoxed by a bunch of drunken British gentlemen spies such as the Cambridge ring, and their failure to assassinate Fidel Castro using an exploding cigar should not mean they are held up to ridicule as the bunglers they are sometimes made out to be. Our spies are so much better than that. So that’s all good, then.

quote:

'Fantastisch idee': Secret Service koopt detector voor sarcastische dreigtweets
Door: Lisa van der Velden − 05/06/14, 16:08

De Secret Service, onder meer verantwoordelijk voor de beveiliging van de Amerikaanse president Obama, wil een monitor kopen die sarcasme op sociale media kan herkennen. Dat blijkt uit online documenten van de Amerikaanse veiligheidsdienst. Op die manier hopen de geheim agenten straks beter in te kunnen schatten of dreigtweets serieus zijn, of dat ze de humor ervan moeten inzien. Op Twitter waren de reacties op het nieuws - niet geheel onverwacht - vooral sarcastisch.


In het document, in feite een verzoek aan ontwikkelaars, valt te lezen dat de Secret Service op zoek is naar sofware die onder andere 'in staat is om sarcasme en overdreven positieve uitlatingen op sociale media op te sporen'. Het plan werd op verschillende blogs en sociale netwerken met hoongelach ontvangen. 'Elke poging om sarcasme via algoritmes te detecteren zal mislukken', zegt schrijver en blogger Charlie Stross. 'Sarcasme refereert altijd aan de persoon die het uit.' Het is, kortom, persoonlijk.


Niet onmogelijk
Hoogleraar Antal van den Bosch van de Radboud Universiteit Nijmegen erkent dat het voor computers moeilijk is om sarcasme te ontdekken: 'Dat is niet zo gek, ook mensen hebben er moeite mee'. Toch is het volgens hem niet onmogelijk: 'Sarcasme kun je wel degelijk herkennen.' Voor een onderzoek ontwikkelde Van den Bosch een spamfilter dat tweets met de hashtag #sarcasme analyseerde, zodat het systeem dezelfde woordkeuze in tweets zonder die hashtag zou herkennen. Het filter herkende bijvoorbeeld 'intensiveerders': woorden als 'super' en 'fantastisch'. Van den Bosch: Een tweet als 'Joepie! Geweldig weer vanochtend, lekker door de regen gefietst' werd er daardoor uitgefilterd.

Niet alleen in de Verenigde Staten, ook in Nederland worden dreigtweets gemonitord en gefilterd, via zogeheten 'Realtime Intelligence Centers'. In Nederland worden per dag zo'n 35 duizend bedreigingen via Twitter geuit. Rond de 200 daarvan zijn zo ernstig dat de politie ze natrekt. Van den Bosch: 'Sarcasme is cultureel bepaald, in Amerika komt de stijlfiguur eigenlijk nog relatief weinig voor. Nederlanders gebruiken veel vaker sarcasme, net als de Britten.' Alleen al om de hoeveelheid dreigtweets zijn filters en detectors nuttig, vindt Van den Bosch. 'Ze kunnen helpen met het maken van een betere schifting, een indicatie geven van een vermoeden.'

Toch zijn het uiteindelijk mensen, of het nu de wijkagent of de Secret Service is, die een inschatting moeten maken. Erik Tjong Kim Sang, werkzaam bij het Meertens Instituut: 'Als het programma 90 procent van de potentiële dreigtweets kan herkennen als ongevaarlijk hoeft maar 10 procent te worden bekeken door mensen. Dat is handig. Maar de laatste stap, interpretatie door menselijke experts, blijft altijd nodig.'


Gevecht tegen de tweets
Overal ter wereld worstelen veiligheidsdiensten en politie-eenheden met het onderscheiden van humoristische tweets en dreigementen. Uiteindelijk wordt vrijwel elke dag ergens in Nederland een Twitteraar door de politie opgepakt of berispt voor het bedreigen via sociale media. Niet alleen sarcasme, maar ook ironie en andere grappen worden lang niet altijd als zodanig herkend.

Dat werd bijvoorbeeld duidelijk bij de Brit Paul Chambers, die om zijn humoristisch bedoelde dreigement voor de rechter moest verschijnen. Zijn tweet: 'Crap! Robin Hood airport is closed. You've got a week and a bit to get your shit together otherwise I'm blowing the airport sky high!!' Chambers werd door een rechter vrijgesproken, maar raakte wel zijn baan kwijt.

Op eigen bodem werd in april nog een 14-jarig meisje uit Rotterdam gearresteerd, omdat ze een dreigtweet naar American Airlines verstuurde. Ze deed op Twitter alsof ze Ibrahim uit Afghanistan was en namens Al Qaida 'iets groots' van plan was. Meteen daarna tweette ze dat het een grapje was, maar dat mocht niet meer baten. Ze ging voor een nacht de cel in.

quote:

Op maandag 9 juni 2014 08:49 schreef Pietverdriet het volgende:
Zou deze detector ook de ironie zien van een vals positief sarcasme en een echte bedreiging daardoor missen?

quote:

Op maandag 9 juni 2014 08:51 schreef CherryOnTop het volgende:

[..]

Daar zat ik dus ook aan te denken. Ik denk niet dat het gaat werken.

quote:

Op maandag 9 juni 2014 08:52 schreef Pietverdriet het volgende:

[..]

Amerikanen en sarcasme, nooit een goede combinatie

quote:

Op maandag 9 juni 2014 08:54 schreef CherryOnTop het volgende:

[..]

Dat blijkt wel, ze hebben er een heel programma voor nodig om het te herkennen. Nu wordt het dus gewoon een spel voor mensen om dat programma/de secret service te zieken.

quote:

Op maandag 9 juni 2014 08:54 schreef CherryOnTop het volgende:

[..]

Dat blijkt wel, ze hebben er een heel programma voor nodig om het te herkennen. Nu wordt het dus gewoon een spel voor mensen om dat programma/de secret service te zieken.

quote:

Op maandag 9 juni 2014 08:59 schreef Barbusse het volgende:

[..]

En dan moeten ze weer een trollfilter ontwikkelen. LEAVE THE SECRET SERVICE ALÓÓÓÓÓNE!!!

quote:

Op maandag 9 juni 2014 09:03 schreef CherryOnTop het volgende:

[..]

Ja precies.

quote:

Op maandag 9 juni 2014 09:38 schreef Woestijnvos het volgende:

SPOILER

Hey, gringo, if you're reading my post and didn't understand it; it's called sarcasm, mofos.

quote:

Op maandag 9 juni 2014 12:03 schreef Weltschmerz het volgende:
Goed dat ze zo hun best doen om ons te beschermen tegen terrorisme.