De Blogoloog Blogt

Links in tweets + short-URLs worden nu meegerekend

Naar aanleiding van de reacties op het bericht van gisteren heb ik gisterennacht nog wat aan de code van de spider van De Blogoloog geknutseld.  De belangrijkste wijzigingen:

• URLs in Twitterberichten worden nu effectief meegeteld als links.  Voordien was dit niet het geval, omdat ze niet in <a href="..."></a> tags ingebed waren en dus niet herkend werden.
• Een aantal URL-shortening diensten worden nu herkend en de links worden omgezet naar de 'lange' vorm voor ze in de database gaan.  Dit heeft als gevolg dat er een betere telling kan gebeuren van welke links nu echt populair zijn.
• Hashtags in Twitter worden beter herkend.  Leestekens aan het einde worden automatisch afgekapt, om te vermijden dat hashtags aan het einde van een zin hun punt, komma of ellipsis meenemen.
• Van elke nieuwe link en tag wordt nu bijgehouden wanneer hij voor het eerst door De Blogoloog gezien is.    

Al deze wijzigingen hebben tot doel om (in de toekomst) accuratere en meer relevante populariteitslijstjes te kunnen opstellen.  Vooral dat nu ook links in tweets worden meegenomen gaat de kwaliteit van de lijst van populaire links ten goede komen hoop ik.

De 'ontdekkingsdata' van tags en links gaan het mogelijk maken top-x'en op te stellen van populaire links/tags binnen een bepaalde periode, in plaats van (zoals gisteren) op goed geluk de x recentste links mee te nemen in een berekening.

De invloedrijkste bloggers van Vlaanderen (op dit moment)?

Ik ben al een tijdje bezig met het schrijven van een aantal scriptjes om uit te puzzelen hoe populaire links zich verspreiden binnen de Vlaamse blogosfeer.  Ondertussen heb ik na heel wat zoeken en aanpassen volgende methode ontwikkeld:

• Neem de 30000 nieuwste links die De Blogoloog gezien heeft
• Bereken daar de top 100 van qua aantal malen gelinkt in Vlaamse blogberichten  
• Kijk welke blogs naar die honderd gelinkt hebben en geef elke blog punten per link.
• De punten zijn omgekeerd evenredig aan de volgorde van linken, zodat wie eerst naar een zeer populaire link verwijst meer punten scoort dan wie laatst is of linkt naar een minder populaire link.  Voorbeeld: wie eerst linkt naar een url waar vijf keer naar verwezen is, krijgt vijf punten.  De tweede krijgt er vier, de derde drie, de vierde twee en de laatste nog één punt.   

Deze methode beloont dus zowel wie veel naar url's verwijst die vervolgens door een paar mensen worden opgepikt, maar ook wie een belangrijke url 'ontdekt' krijgt veel punten.

Ik heb net de scriptjes doen lopen die bovenstaande telling implementeren, en qua top tien geeft dat dan dit:

42 bnox http://www.bnox.be

 http://www.debloedgroep.be (13)

 http://vimeo.com/stampmedia (5)

 http://vimeo.com/5042215 (5)

 http://www.foxinabox.be (3)

 http://twitter.com/StampMedia (3)

 http://www.jpgmag.com/stories/11918 (3)

 http://en.wikipedia.org/wiki/Wikipedia:Featured_articles (2)

 http://www.rob-matthews.com/index.php?/project/wikipedia (2)

 http://twitter.com/debloedgroep (2)

 http://www.wbdd.org (2)

 http://nl.netlog.com/groups/debloedgroep (2)

30 Imke Dielen http://imkedielen.wordpress.com

 http://www.debloedgroep.be (11)

 http://tweeterwall.mallplace.com/tw/belgium/ms-twitter (5)

 http://www.dragmetohell.net (3)

 http://www.foxinabox.be (2)

 http://twitter.com/StampMedia (2)

 http://www.bloedgevendoetleven09.be (3)

 http://www.clopin.be/archives/2009/06/08/debloedgroep (2)

 http://www.stampmedia.be/?p=2499 (2)

28 wann.es http://blog.wann.es

 http://www.debloedgroep.be (14)

 http://vimeo.com/stampmedia (6)

 http://vimeo.com/5042215 (6)

 http://www.twitter.com/stampmedia (2)

18 frederikmisplon.be http://www.frederikmisplon.be

 http://www.debloedgroep.be (10)

 http://vimeo.com/stampmedia (4)

 http://vimeo.com/5042215 (4)

15 Monuments http://www.monuments.nu

 http://www.debloedgroep.be (15)

14 LamaZone Blog http://lamazone.be

 http://www.debloedgroep.be (7)

 http://vimeo.com/stampmedia (3)

 http://vimeo.com/5042215 (3)

 http://twitter.com/StampMedia (1)

14 Blogologie http://www.blogologie.be

 http://www.debloedgroep.be (9)

 http://en.wikipedia.org/wiki/Streisand_effect (3)

 http://www.politiekgedoe.be (1)

 http://www.twitter.com/stampmedia (1)

13 Pietel.be http://www.pietel.be

 http://www.toputourworkon.com/kimberlizer (7)

 http://www.facebook.com/username (3)

 http://www.squeezethelime.com/bounce-competition (3)

13 MouseOver http://www.mouseover.be

 http://www.bing.com (11)

 http://www.stationsroman.be (2)

12 Michel Vuijlsteke's weblog http://blog.zog.org

 http://www.bing.com (10)

 http://www.englishdemocrats.org.uk (1)

 http://jacksonville.com (1)

Noot: het eerste cijfer is de totaalscore, de cijfers achter de links geven aan hoeveel punten die blog scoorde door naar die URL te verwijzen.  Wie eerst was krijgt uiteraard meer punten.  Let wel: eerst zijn wil misschien niet zeggen dat alle anderen de link vervolgens bij die persoon hebben gehaald.  Het kan ook zijn dat die persoon gewoon geluk had en eerst een persbericht/aankondiging/twitterbericht... had gezien voor de anderen.

Enfin, neem de cijfers met een korreltje zout, de scriptjes hebben nog veel verfijning nodig.  Maar de resultaten gaan toch de juiste richting uit zegt mijn buikgevoel.

Populaire thema's uit de verkiezingscampagne

Nu de uitslagen van de Vlaamse en Europese parlementsverkiezingen bekend zijn, vonden we het een leuk idee eens terug te kijken naar enkele thema's die aan bod kwamen in de afgelopen verkiezingscampagne.  We namen enkele sleutelwoorden en keken hoe vaak deze voorkwamen in Vlaamse blogposts en twitterberichten die De Blogoloog indexeerde de afgelopen drie maanden.

Merk op dat sommige termen waarschijnlijk ook in niet-politieke contexten gebruikt zijn.  Maar zelfs dan zijn de trends duidelijk.  Het economische thema heeft het publieke debat beheerst, althans on-line.  

Ook opvallend: specifieke campagnepunten gelanceerd door de partijen lijken niet al te hoog te scoren ('durfplan', 'groene big bang', 'kinderbijslag', 'jobkorting', 'wachtlijsten', 'vlaktaks'...)

In grafiekvorm:

De volledige cijfers:

jobs 2946

economische crisis 884

Fortis 729

islam 486

openbaar vervoer 386

pensioen 364

Europees parlement 348

KBC 331

moslims 323

belastingen 294

mobiliteit 279

racisme 246

welzijn 238

kredietcrisis 210

criminaliteit 204

staatshervorming 130

groene economie 117

Vlaanderen in Actie 115

klimaatverandering 107

Lange Wapper 104

vrije meningsuiting 90

vreemdelingen 89

pensioenen 82

Opel Antwerpen 72

jobkorting 71

koopkracht 70

staatsschuld 68

immigratie 63

verkeersveiligheid 58

wachtlijsten 55

hernieuwbare energie 53

BHV 50

kerncentrales 48

Brussel Halle Vilvoorde 47

uitkeringen 45

kinderbijslag 45

fiscale fraude 39

Turkije lid EU 36

inburgering 30

durfplan 25

hospitalisatieverzekering 24

overlopers 21

immobilisme 15

groene big bang 13

belastingverlaging 13

vlaktaks 11

fraudebestrijding 11

vreemdelingenhaat 6

generatiepact 6

registratierechten 5

onthaaste schooldag 3

EOV 1

eenzijdige onafhankelijkheidsverklaring 1

De meest geblogde politici, laatste update (nu met analyse achternamen)

In de afgelopen weken hebben we hier al twee keer gekeken hoe vaak de namen van een aantal politici terug te vinden zijn in artikels op Vlaamse weblogs en berichtjes op Vlaamse Twitter-accounts.  We keken hiervoor naar alle berichten die de laatste drie maanden zijn geïndexeerd door De Blogoloog, de eerste Vlaamse blogzoekmachine.  De lijst met politici kwam, zoals eerder gezegd, van De Standaard en De Obarometer.

Deze week hebben we echter nog een extra analyse gemaakt: we hebben ook eens gekeken naar het aantal vermeldingen van de achternamen van onze politici.  In een snelle blogpost of een vluchtige Twitter-conversatie zal men immers al snel spreken over 'Dedecker', 'Verhofstadt' of 'Leterme', zonder die lastige voornamen erbij.

Maar eerst de gewone top 10, zoals de vorige weken:

1 Jean-Marie Dedecker

Er is duidelijk een dalende trend merkbaar in het aantal vermeldingen, al voert hij nog steeds de kop aan met grote voorsprong op het grootste deel van het peloton.

2 Kris Peeters

Een lichte stijging de afgelopen paar dagen, waarschijnlijk samenvallend met 'Het Grote Debat' op één vorige zondag.

3 Guy Verhofstadt

De trend van de afgelopen weken zet door.  De blauwe campagnemachine komt ook op blogs en Twitter stilaan in versnelling.

4 Karel De Gucht

Af en toe een straffe uitspraak doen helpt blijkbaar duidelijk om meer vermeldingen los te krijgen...

5 Filip Dewinter

Zat ook in 'Het Grote Debat' en dat is te merken.

6 Herman Van Rompuy

Kabbelt rustig voort... een beetje zoals de federale regering dus.

7 Yves Leterme

Idem...

8 Frank Vandenbroucke

Profiteerde niet alleen van 'Het Grote Debat' maar ook van het feit dat hij naamgenoot is van een bekende wielrenner...

9 Bert Anciaux

Dankzij een reeks blogberichtjes op één blog is er een zeer sterke piek op het einde van deze grafiek, wat hem definitief boven de tiende plaats helpt te blijven.

10 Bart Somers

Probeert blijkbaar sinds de 'affaire Vijnck' een beetje uit de kijker te blijven, en slaagt daar ook in zo te zien.

Voor de volledigheid uiteraard ook weer de complete lijst, inclusief long-tail grafiekje:

Jean-Marie Dedecker 195

Kris Peeters 187

Guy Verhofstadt 147

Karel De Gucht 132

Filip Dewinter 116

Herman Van Rompuy 116

Yves Leterme 116

Frank Vandenbroucke 106

Bert Anciaux 94

Bart Somers 91

Bart De Wever 89

Kathleen Van Brempt 81

Caroline Gennez 80

Dirk Van Mechelen 80

Bart Staes 76

Jean-Jacques De Gucht 72

Mieke Vogels 61

Hilde Crevits 60

Patrick Janssens 60

Jean-Luc Dehaene 55

Geert Lambert 53

Vincent Van Quickenborne 48

Bart Tommelein 47

Guido De Padt 46

Jo Vandeurzen 43

Marie-Rose Morel 42

Frank Vanhecke 40

Jurgen Verstrepen 40

Marino Keulen 37

Patrick Dewael 32

Geert Bourgeois 31

Steven Vanackere 30

Annemie Turtelboom 29

Peter Dedecker 29

Veerle Heeren 29

Bart Martens 26

Hermes Sanctorum 26

Derk Jan Eppink 25

Freya Van Den Bossche 25

Ivo Belet 23

Anne De Baetzelier 21

Bruno Valkeniers 21

Inge Vervotte 21

Annick De Ridder 20

Marianne Thyssen 20

Bart Caron 19

Boudewijn Bouckaert 19

Annemie Neyts 15

Tanguy Veys 14

Vera Dua 14

Eric Van Rompuy 13

Peter Van Rompuy 13

Sam Van de Putte 13

John Crombez 12

Karin Temmerman 12

Mark Demesmaeker 12

Fientje Moerman 11

Frank Wauters 10

Liesbet Van Eeckhaut 10

Sven Gatz 10

Dirk Sterckx 9

Marleen Vanderpoorten 9

Hendrik Bogaert 8

Johan Vande Lanotte 8

Theo Francken 8

Saïd El Khadraoui 8

Barbara Bonte 7

Chokri Mahassine 7

Els Van Weert 7

Joke Van de Putte 7

Philippe De Coene 7

Tinne Van der Straeten 7

Tom Dehaene 7

Wouter De Vriendt 7

Erik Torbeyns 6

Peter Reekmans 6

Carl Decaluwé 6

Freija Dhondt 5

Freya Piryns 5

Gino De Craemer 5

Hans Verreyt 5

Adelheid Byttebier 4

Bram Boriau 4

Inge Jooris 4

Joris Rombaut 4

Minneke De Ridder 4

Philippe Bossin 4

Yamila Idrissi 4

Alexander De Croo 3

Bruno Lapauw 3

Bruno Tuybens 3

Davine Dujardin 3

Elke Tindemans 3

Patricia Ceyssens 3

Tie Roefs 3

Walter Kestens 3

Wouter Van Bellingen 3

Maarten Motté 3

Bert De Brabandere 2

Dirk Vansintjan 2

Jan Roegiers 2

Mohamed Ridouani 2

Irina De Knop 1

Jan Haegeman 1

Joke Renneboog 1

Karin Devis 1

Rudi De Kerpel 1

Maya Detiège 1

Michèle Hostekint 1

Annick Willemans 0

Guido Staes 0

Jan Pszeniczko 0

Maarten Vergauwen 0

Mathias De Clerq 0

Nancy Verbrugghe 0

Thomas Leys 0

De achternamen

Omdat politici zoals eerder gezegd ook vaak enkel met hun achternaam worden aangeduid, hebben we deze week ook die analyse eens gemaakt.  De resultaten zijn vrij verrassend, maar er zijn een aantal zaken die men in het achterhoofd moet houden:

• Sommige achternamen zijn ook 'gewone' woorden die vaak voorkomen
• Bepaalde politici delen een achternaam met een broer, vader, zoon... die ook aan politiek doet 
• Er zijn zelfs politici met een veel voorkomende achternaam
• De Blogoloog kijkt bij meerdere woorden niet persé naar de volgorde en de nabijheid: die 'van' kan dus elders in het bericht staan...
• De Blogoloog kan enkel zoeken op woorden van drie of meer letters, dus die 'de' telt ook niet mee... 

Houden we dit in het achterhoofd, dan krijgen we deze top tien:

1. Vogels

Naast een politica zijn er uiteraard ook nog de nodige gevederde vrienden die met dit woord worden aangeduid...

2. Moerman

Heeft waarschijnlijk meer te maken met de Twitter account van ene Nicolas Moerman dan met Fientje van de OpenVLD, want zijn gebruikersnaam 'moerman' verschijnt in al zijn 'tweets'.

3. Peeters

Niet toevallig een van de populairste achternamen in Vlaanderen...

4. Van Mechelen

Naast kandidaat-minister-president ook nog eens een middelgrote Vlaamse stad.

5. De Knop

Knoppen kunnen uitkomen, knopen kunnen aangenaaid worden en knopjes kunnen ingedrukt worden.  En daar wordt over geblogd.  En soms ook over Irina De Knop van OpenVLD misschien.

6. Dedecker

Zonder voornamen duikelt hij naar de zesde plaats, toch nog een zeer verdienstelijke score.

7. Verhofstadt

Deze achternaam vertoont een gestaag stijgende trend, net zoals de versie met de voornaam erbij.

8. Verstrepen

Dit is ook een scheeftrekking door een twitter account met dezelfde gebruikersnaam, al is ze in dit geval wel van de politicus Jurgen Verstrepen zelf.

9. De Ridder

Naast een OpenVLD politica met een gestolen campagne-caravan zijn er ook nog een boel mensen in harnas die deze naam gebruiken.

10. Janssens 

Uiteraard kan ook deze ultra-populaire achternaam niet in de top tien ontbreken.

Als grafiek en lijstje tenslotte geeft de analyse van de achternamen dit:

Met ander woorden, een nog veel sterkere long-tail curve dan met de voornamen erbij.

Vogels 1054

Moerman 998

Peeters 810

Van Mechelen 746

De Knop 643

Dedecker 529

Verhofstadt 364

Verstrepen 313

De Ridder 276

Janssens 264

Leterme 264

Martens 260

De Gucht 254

Van Rompuy 244

Lambert 226

Dewinter 192

Somers 189

Keulen 179

Bonte 178

Vandenbroucke 159

Wauters 144

De Wever 135

Belet 127

Anciaux 124

Dehaene 123

Van Brempt 117

Van de Putte 113

Staes 111

Gennez 110

Van Den Bossche 102

Crevits 99

Van Quickenborne 86

Bogaert 85

Turtelboom 85

Bourgeois 77

Van Weert 76

De Padt 74

Dua 73

Morel 73

Heeren 69

Temmerman 61

Tommelein 58

Vanhecke 53

Sanctorum 47

Dewael 42

Eppink 42

Vandeurzen 42

Bouckaert 41

Vanackere 39

Thyssen 36

De Croo 35

Vervotte 31

Caron 28

De Coene 28

Sterckx 28

Crombez 27

Valkeniers 27

De Baetzelier 22

De Craemer 22

Francken 20

Van der Straeten 20

Veys 20

Dhondt 19

De Kerpel 18

Neyts 17

Vande Lanotte 17

Van Eeckhaut 16

Decaluwé 15

Kestens 15

Demesmaeker 14

Vanderpoorten 14

Vergauwen 14

El Khadraoui 13

Gatz 13

Leys 12

Jooris 11

Tindemans 11

Torbeyns 11

De Vriendt 10

Rombaut 10

De Brabandere 9

Dujardin 9

Mahassine 9

Piryns 8

Verbrugghe 8

Reekmans 7

Ceyssens 6

Devis 6

Idrissi 6

Roegiers 6

Van Bellingen 6

Verreyt 6

Bossin 5

Byttebier 5

De Clerq 5

Haegeman 5

Boriau 4

Lapauw 4

Roefs 4

Motté 3

Ridouani 3

Tuybens 3

Detiège 2

Hostekint 2

Renneboog 2

Vansintjan 2

Willemans 1

Pszeniczko 0