După câteva weekend-uri și seri de implementat, refactorizat, experimentat și uneori hack-uit, am acum un pipeline foarte aproape de automat care poate⁽¹⁾ ține statisticile din Senat la zi.

Ce ar fi de remarcat la datele pe care le-am publicat azi:

• Aceste statistici sunt foarte greu de găsit oriunde altundeva. Spre deosebire de site-ul Camerei Deputaților care are liste semi-decente cu voturi, legi, voturi pentru fiecare candidat, etc, Senatul nu are așa ceva.

  Harta Politicii este acum primul site pe care, din câte știu eu, puteți vedea o listă ordonată cu legile votate din Senat, cele mai recente voturi ale unui anumit senator, iar despre procentul de prezență nici nu mai vorbesc.

• Deși cei mai absenți deputați sunt de cele mai multe ori miniștri, am fost foarte surprins să îl găsesc acolo pe candidatul la președenție Crin Antonescu, care deși din câte știu eu nu are nimic altceva oficial care să îl țină ocupat, nu s-a deranjat să dea pe la servici decât în două zile, și a participat activ doar la 1% din voturile posibile.
• Există cinci senatori care n-au participat deloc. Berceanu Radu Mircea, Blaga Vasile, Stănişoară Mihai, Diaconescu Cristian, Sârbu Ilie. Oare cei care i-au votat ce părere au? Lasă maică că știu ei ce fac? De ce naiba i-ați votat, dacă nu se duc în Parlament să muncească?
• Îmi place mult cum link-urile către legi de pe site-ul senatului sunt în forma http://webapp.senat.ro/sergiusenat.proiect.asp?cod=1[...] (exemplu). “Sergiu” ăla din URL îl dă un farmec aparte, aproape uman… și mai ales complet neprofesionist.
• La prima vedere, lucrurile la prezență stau chiar bine. Jumătate din Senatori s-au dus la servici peste 70% din timp, și doar cam doar o treime sub 50%. Comparat cu sfârșitul mandatului 2004-2008 când jumătate aveau sub 50%, numerele par să fie sensibil mai mari. E posibil să fi greșit eu ceva în cum am calculat statisticile.

Aflu de pe ipp.ro că peste 50% din voturile din Senat au fost votate ne-electronic. Trist.
Dacă aveți ceva feedback, lăsați un comentariu.

—–
⁽¹⁾ Când spun ‘poate’ să le țină la zi, înseamnă că e aproape posibil dar nu încă. Mai sunt niște mici pași manuali pe care trebuie să îi fac.

Also, acum trebuie să iau o mică pauză să repar niște mici hack-uri pe care le-am făcut ca să pot pune datele astea aici mai repede. Însă e de bine, sunt foarte aproape de un sistem generalizat care poate consuma un fișier text cu legi și voturi și produce toate astea.

Ieri a fost premierea Webstock09 și Harta Politicii a câștigat un loc doi la categoria Content Aggregation.

Eu nu mă așteptam să câștige nimic, proiectul este încă departe de ce visez eu când mă gândesc la el, idei de democrație participativă și împuternicirea cetățeanului… și de aceea chiar m-am bucurat, înseamnă că sunt pe drumul cel bun.

Pe lângă premiul doi, am primit și un premiu special de la CucuLand, pentru cel mai bun proiect de Atitudine Socială (sau ceva similar).

Am fost prezent virtual la gală, prin Skype, ca să îmi primesc premiul și să spun câteva cuvinte. Un moment care mie mi s-a părut foarte cool, dar prin toate seturile de poze de la eveniment nu am găsit decât una cu capul meu mare pe un perete. Poate celor care au făcut poze nu li s-a părut la fel de cool momentul.

Mulțumesc Irina și Dorin pentru susținere și ajutor când a fost nevoie.

[update] Cum am putut să îl uit pe Adinel, care m-a ajutat mult de tot cu date din jurul alegerilor. Mulțumesc Adinel!

Tot am vrut să adaug și numerele de la senat pentru Webstock, dar deși am tot lucrat la asta încă mai e de lucru.

Parțial asta se datorează și faptului că site-ul senatului (al naibii asp.net) a fost ceva mai încăpățânat în a se lăsa puricat automat și a durat ceva până ce am dibuit cum .

Altă chestie nouă pe care o încerc este să renunț la crawler-ul oarecum monolitic în Java pe care îl folosesc pentru cdep.ro și care face un fel de depth-first crawling și adună toate numerele și concluziile într-o singură etapă. În schimb încerc o abordare serială, cu etape și un pipeline în python care la fiecare pas face câte o singură operație pe niște date de intrare și produce niște date de ieșire.

Până acum pare o abordare mai curată, dar rămâne de văzut.