]> pere.pagekite.me Git - homepage.git/blob - blog/En_enklere_Osloskolehverdag_med_automatisk_sjekk_av_Fronter.html
Generated.
[homepage.git] / blog / En_enklere_Osloskolehverdag_med_automatisk_sjekk_av_Fronter.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: En enklere Osloskolehverdag med automatisk sjekk av Fronter</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9
10
11 </head>
12 <body>
13 <div class="title">
14 <h1>
15 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
16
17 </h1>
18
19 </div>
20
21
22 <div class="entry">
23 <div class="title">En enklere Osloskolehverdag med automatisk sjekk av Fronter</div>
24 <div class="date">12th February 2015</div>
25 <div class="body"><p>En stund nå har jeg vært nødt til å forholde meg til
26 <a href="https://fronter.com/osloskoler/">Fronter</a>, en nettløsning
27 Osloskolen bruker for kontakt mellom hjem og skole. Løsningen
28 imponerer ikke, og det er lagt opp til at vi foreldre skal logge inn
29 regelmessig for å se om noe har endret seg. Idéen om å la folk stikke
30 innom nettsider for å se om det har skjedd endringer er så idiotisk at
31 jeg har lett etter et alternativ. Fronterløsningen har en innebygget
32 løsning der en kan abonnere på forsiden (som viser en oppsummering av
33 det en har tilgang til), og få tilsendt en kopi hver natt, men det
34 fjerner jo bare behovet for å stikke innom, ikke den idiotiske ideen
35 om at folk skal huske hvordan nettsiden så ut sist og oppdage hva som
36 er endret.</p>
37
38 <p>For å gjøre livet enklere har jeg derfor brukt litt tid på å lage
39 et program som kobler seg opp og sjekker etter endringer automatisk,
40 slik at jeg kan få beskjed fra datamaskinen når noe endrer seg i
41 stedet for å forsøke å finne ut av det selv. I går ble scriptet
42 brukbart, og jeg er dermed klar til å dele det med deg.</p>
43
44 <p>Jeg startet med å skrive programmet i Python, og hadde en versjon
45 som logget inn og hentet ned enkeltsider fra Fronter. Men
46 Fronter-websidene suger golfballer gjennom en hangeslange, med
47 uleselig HTML, flere nivåer av iframes og en struktur på innholdet som
48 er svært vanskelig å finne ut av, så jeg ga til slutt opp lxml-parsing
49 med python og forsøkte meg med WWW::Mechanize for Perl som jeg kjente
50 fra før. I ettertid har jeg oppdaget at WWW:Mechanize også finnes for
51 python, så jeg kunne antagelig droppet språkbyttet. Men da jeg
52 oppdaget det hadde jeg kommet så langt med Perl-utgaven, så jeg hoppet
53 ikke tilbake.</p>
54
55 <p>For å logge inn i Fronter besøker en enten skolens websider eller
56 den sentrale innlogginsiden <tt>https://fronter.com/osloskoler/</tt>.
57 Perl-koden for å logge inn ser slik ut:</p>
58
59 <pre>
60 my $mech = WWW::Mechanize->new();
61 $mech->get('https://fronter.com/osloskoler/');
62 $mech->submit_form(fields => {
63 username => $username,
64 password => $password,
65 } );
66 </pre>
67
68 <p>Neste steg er å få oversikt over hvilke «rom» en har tilgang til.
69 På vår skole er det rom for skolen, biblioteket, elevrådet,
70 aktivitetsskolen og klasser der en har unger, og dette vil være
71 forskjellig fra person til person. Etter å ha romstert rundt i
72 Fronter-grensesnittet endel kom jeg over en grei HTMl-side med
73 oversikt over rommene,
74 <tt>https://fronter.com/osloskoler/adm/projects.phtml?mode=displayRoomchooser</tt>,
75 så jeg bruker denne til å hente ut romoversikt med rom-ID.</p>
76
77 <pre>
78 my %room;
79 $mech->get('https://fronter.com/osloskoler/adm/projects.phtml?mode=displayRoomchooser');
80 for my $link ($mech->links()) {
81 my $url = $link->url();
82 if ($url =~ m%/links/list_files.phtml\?edit=(\d+)$%) {
83 $room{$link->text()} = $1;
84 }
85 }
86 </pre>
87
88 <p>Når en har rom-ID kan en slå opp websiden for rommet, som starter
89
90 <tt>https://fronter.com/osloskoler/contentframeset.phtml?goto_prjid=$ROMID</tt>
91 (der $ROMID byttes ut med rom-ID-tallet). Det gir en side med
92 iframes, og en må tre nivåer ned i iframes før en får tak i
93 HTML-informasjonen som vises frem når en ser på det aktuelle rommet.
94 Her ga jeg opp den robuste parsingen og hardkodet endel URL-er som i
95 stedet bør spores opp maskinelt. HTML-informasjonen som vises lagres
96 i en fil etter at økt- og innloggs-nøkkel er fjernet og deretter
97 bruker jeg <tt>lynx --dump --nolist</tt> for å hente ut en tekstlig
98 utgave av websiden. Denne tekstlige utgaven sammenlignes med forrige
99 versjon og oversikt over endringer kan så sendes ut på egnet vis.</p>
100
101 <p>Jeg valgte å bruke git til å holde rede på endringer, så jeg
102 sjekker inn HTML og tekst-utgaver i git og bruker git til å vise frem
103 endringene i tekstutgavene. Programvaren for å gjøre dette er testet
104 på Debian GNU/Linux og kan
105 <a href="https://github.com/petterreinholdtsen/fronter-scraper-oslo">lastes
106 ned fra github</a>. For å bruke det, kjør følgende kommandoer på din
107 Debian-maskin (forutsetter sudo-tilgang for installasjon av
108 programvare):</p>
109
110 <pre>
111 sudo apt-get install git lynx-cur libio-prompter-perl libwww-mechanize-perl \
112 libconfig-inifiles-perl
113 git clone https://github.com/petterreinholdtsen/fronter-scraper-oslo
114 cd fronter-scraper-oslo
115 ./update-git
116 </pre>
117
118 <p>Det gjenstår endel, men systemet er allerede nyttig for meg. Jeg
119 ønsker at systemet også skal laste ned PDF-er og slikt som er lagt ut
120 for nedlasting på sidene, slik at f.eks. ukeplaner kommer inn i
121 git-arkivet mitt automatisk og jeg får automatisk beskjed når ny
122 ukeplan er lagt ut. Kanskje du kan bidra med å få det på plass, eller
123 kanskje du har andre ting du vil fikse? Jeg tar gjerne imot endringer
124 og forbedringer. Det er mye som kan gjøres bedre, og scriptet er ikke
125 veldig robust mot endringer hos nettsidene til Fronter. Jeg regner
126 dermed med at det vil trengs oppdateringer jevnlig etter hvert som
127 Fronter-løsningen endrer seg.</p>
128 </div>
129
130 <div class="tags">Tags: <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/web">web</a>.</div>
131
132
133 </div>
134
135
136
137
138 <div id="sidebar">
139
140
141
142 <h2>Archive</h2>
143 <ul>
144
145 <li>2015
146 <ul>
147
148 <li><a href="http://people.skolelinux.org/pere/blog/archive/2015/01/">January (7)</a></li>
149
150 <li><a href="http://people.skolelinux.org/pere/blog/archive/2015/02/">February (4)</a></li>
151
152 </ul></li>
153
154 <li>2014
155 <ul>
156
157 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/01/">January (2)</a></li>
158
159 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/02/">February (3)</a></li>
160
161 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/03/">March (8)</a></li>
162
163 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/04/">April (7)</a></li>
164
165 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/05/">May (1)</a></li>
166
167 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/06/">June (2)</a></li>
168
169 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/07/">July (2)</a></li>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/08/">August (2)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/09/">September (5)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/10/">October (6)</a></li>
176
177 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/11/">November (3)</a></li>
178
179 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/12/">December (5)</a></li>
180
181 </ul></li>
182
183 <li>2013
184 <ul>
185
186 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/01/">January (11)</a></li>
187
188 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/02/">February (9)</a></li>
189
190 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/03/">March (9)</a></li>
191
192 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/04/">April (6)</a></li>
193
194 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/05/">May (9)</a></li>
195
196 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/06/">June (10)</a></li>
197
198 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/07/">July (7)</a></li>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/08/">August (3)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/09/">September (5)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/10/">October (7)</a></li>
205
206 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/11/">November (9)</a></li>
207
208 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/12/">December (3)</a></li>
209
210 </ul></li>
211
212 <li>2012
213 <ul>
214
215 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
216
217 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
218
219 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
220
221 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
222
223 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
224
225 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
226
227 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (17)</a></li>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/08/">August (6)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/09/">September (9)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/10/">October (17)</a></li>
234
235 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/11/">November (10)</a></li>
236
237 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/12/">December (7)</a></li>
238
239 </ul></li>
240
241 <li>2011
242 <ul>
243
244 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
245
246 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
247
248 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
249
250 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
251
252 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
253
254 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
255
256 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
257
258 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
259
260 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
261
262 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
263
264 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
265
266 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
267
268 </ul></li>
269
270 <li>2010
271 <ul>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
274
275 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
276
277 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
278
279 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
280
281 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
282
283 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
284
285 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
286
287 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
288
289 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
290
291 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
292
293 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
294
295 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
296
297 </ul></li>
298
299 <li>2009
300 <ul>
301
302 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
303
304 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
305
306 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
307
308 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
309
310 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
311
312 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
313
314 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
315
316 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
317
318 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
319
320 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
321
322 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
323
324 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
325
326 </ul></li>
327
328 <li>2008
329 <ul>
330
331 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
332
333 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
334
335 </ul></li>
336
337 </ul>
338
339
340
341 <h2>Tags</h2>
342 <ul>
343
344 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
345
346 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
347
348 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
349
350 <li><a href="http://people.skolelinux.org/pere/blog/tags/bankid">bankid (4)</a></li>
351
352 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (8)</a></li>
353
354 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (15)</a></li>
355
356 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
357
358 <li><a href="http://people.skolelinux.org/pere/blog/tags/chrpath">chrpath (2)</a></li>
359
360 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (109)</a></li>
361
362 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (151)</a></li>
363
364 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (10)</a></li>
365
366 <li><a href="http://people.skolelinux.org/pere/blog/tags/dld">dld (15)</a></li>
367
368 <li><a href="http://people.skolelinux.org/pere/blog/tags/docbook">docbook (12)</a></li>
369
370 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
371
372 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (268)</a></li>
373
374 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (22)</a></li>
375
376 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
377
378 <li><a href="http://people.skolelinux.org/pere/blog/tags/freeculture">freeculture (14)</a></li>
379
380 <li><a href="http://people.skolelinux.org/pere/blog/tags/freedombox">freedombox (9)</a></li>
381
382 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (12)</a></li>
383
384 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (41)</a></li>
385
386 <li><a href="http://people.skolelinux.org/pere/blog/tags/isenkram">isenkram (10)</a></li>
387
388 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (19)</a></li>
389
390 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (9)</a></li>
391
392 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (8)</a></li>
393
394 <li><a href="http://people.skolelinux.org/pere/blog/tags/lsdvd">lsdvd (2)</a></li>
395
396 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
397
398 <li><a href="http://people.skolelinux.org/pere/blog/tags/mesh network">mesh network (8)</a></li>
399
400 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (32)</a></li>
401
402 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (260)</a></li>
403
404 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (172)</a></li>
405
406 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (15)</a></li>
407
408 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
409
410 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (51)</a></li>
411
412 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (82)</a></li>
413
414 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
415
416 <li><a href="http://people.skolelinux.org/pere/blog/tags/reactos">reactos (1)</a></li>
417
418 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
419
420 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (3)</a></li>
421
422 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (9)</a></li>
423
424 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
425
426 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
427
428 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
429
430 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (41)</a></li>
431
432 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
433
434 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (4)</a></li>
435
436 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (46)</a></li>
437
438 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (3)</a></li>
439
440 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (9)</a></li>
441
442 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (29)</a></li>
443
444 <li><a href="http://people.skolelinux.org/pere/blog/tags/sysadmin">sysadmin (2)</a></li>
445
446 <li><a href="http://people.skolelinux.org/pere/blog/tags/usenix">usenix (2)</a></li>
447
448 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (8)</a></li>
449
450 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (48)</a></li>
451
452 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (4)</a></li>
453
454 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (35)</a></li>
455
456 </ul>
457
458
459 </div>
460 <p style="text-align: right">
461 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.6</a>
462 </p>
463
464 </body>
465 </html>