]> pere.pagekite.me Git - homepage.git/blob - blog/tags/scraperwiki/index.html
615f88e9e9015c0e98925b5df4640eb1b24e42cc
[homepage.git] / blog / tags / scraperwiki / index.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: Entries Tagged scraperwiki</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9 <link rel="alternate" title="RSS Feed" href="scraperwiki.rss" type="application/rss+xml" />
10 </head>
11 <body>
12 <div class="title">
13 <h1>
14 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
15
16 </h1>
17
18 </div>
19
20
21 <h3>Entries tagged "scraperwiki".</h3>
22
23 <div class="entry">
24 <div class="title">
25 <a href="http://people.skolelinux.org/pere/blog/Hvem_samler_inn_flest_bensinpriser_.html">Hvem samler inn flest bensinpriser?</a>
26 </div>
27 <div class="date">
28 2nd July 2012
29 </div>
30 <div class="body">
31 <p>For ca. en måned siden så jeg på tjenester som forsøker å gjøre det
32 enklere å ta informerte valg om hvor en skal kjøpe drivstoff, for å
33 bedre konkurransesituasjonen i drivstoffmarkedet. Det er tre aktive
34 tjenester jeg kjenner til. NAF Bergens
35 <a href="http://www.drivstoffpriser.no/">Drivstoffpriser.no</a>,
36 Bitfactorys
37 <a href="http://www.bitfactory.no/bensinpris.html">Bensinpris-app</a>,
38 og Dinsides
39 <a href="http://www.dinside.no/php/oko/bensin/vis_prisliste.php">prisliste</a>.
40 Nå har jeg holdt øye med alle disse i over en måned, og kan fortelle
41 hvor mange priser for 95-oktan bensin de har klart å samle inn i juni
42 2012:</p>
43
44 <table border="1">
45 <tr><th>Tjeneste</th><th>Antall målinger i juni 2012</th></tr>
46 <tr><td>Bitfactorys bensinpris-app</td><td>7687</td></tr>
47 <tr><td>Drivstoffpriser.no</td><td>1788</td></tr>
48 <tr><td>Dinsides prisliste</td><td>322</td></tr>
49 <table>
50
51 <p>Det er dermed åpenbart at Dinsides tjeneste henger langt etter de
52 andre to, og at Bitfactorys løsning er den som har størst sjanse for å
53 gi bileiere gode råd ved kjøp av drivstoff. Det er ca. 1600
54 bensinstasjoner i Norge, så optimalt sett burde det vært samlet inn 30
55 * 1600 = 48 000 priser for å ha maksimalt en dag gamle priser for alle
56 bensinstasjoner i Norge. Ingen av tjenestene er i nærheten av å ha
57 komplett dekning. Og kun Dinside og NAF Bergens Drivstoffpriser gjør
58 prisinformasjonen tilgjengelig for alle på Internet.</p>
59
60 <p>Den store fordelen med Drivstoffpriser.no er at de også har
61 historiske priser liggende ute på åpne nettsider, slik at det er mulig
62 å se alle prisdata de har samlet inn så langt. Jeg har laget
63 <a href="https://scraperwiki.com/scrapers/naf-drivstoffpriser/">en
64 SQLite-database</a> med alle prisene samlet inn der, som oppdateres
65 jevnlig hos Scraperwiki. Tidligere anbefalte jeg å registrere priser
66 hos Dinside, men etter å ha utvekslet noen epost med dem og konkludert
67 med at der kommer det neppe til å skje noen videreutvikling med det
68 første, anbefaler jeg nå å registrere prisene hos NAF Bergens
69 drivstoffpriser.no. Jeg foretrekker å bidra til tjenester som åpent
70 deler data med andre, og det gjør ikke Bitfactory.</p>
71
72 </div>
73 <div class="tags">
74
75
76 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
77
78
79 </div>
80 </div>
81 <div class="padding"></div>
82
83 <div class="entry">
84 <div class="title">
85 <a href="http://people.skolelinux.org/pere/blog/Database_over_bensinpriser_fra_dinside_no.html">Database over bensinpriser fra dinside.no</a>
86 </div>
87 <div class="date">
88 30th May 2012
89 </div>
90 <div class="body">
91 <p>En god og offentlig kilde til bensinpriser i Norge er
92 <a href="http://www.dinside.no/1931/her-faar-du-billigst-bensin-diesel">dinside.no
93 sin prisoversikt</a> samlet inn på dugnad fra frivillige over hele
94 landet. Den har ikke like mange priser rapportert inn som Bitfactorys
95 mobil-app, men informasjonen som samles inn er enkelt offentlig
96 tilgjengelig på web. Dessverre forsvinner prisene fra web etter noen
97 dager, så for å kunne lage analyser og se trender må en lage en
98 database ved å hente ut informasjon fra dinside.no sine nettsider over
99 en lengre periode. Jeg startet for litt over en uke siden en
100 innsamlingstjeneste som gjør nettopp dette. Jeg har de siste ukene
101 lært meg å bruke <a href="http://www.scraperwiki.com/">Scraperwiki</a>,
102 et nytt og nyttig verktøy for å hente ut og strukturere informasjon
103 tilgjengelig fra nettsider, PDF-er og andre kilder og som trenger
104 strukturering. Hvis du vil se hvordan prisene har utviklet seg, ta en
105 titt på
106 <a href="https://scraperwiki.com/scrapers/dinside-bensinpriser/">scraperwiki-siden
107 med databasen</a> over bensinpriser. Den henter ned priser fra
108 dinside.no hver time. Hvis du vil bidra til å bedre oversikt over
109 bensinprisene i Norge
110 <a href="http://www.dinside.no/php/int/vis_endre.php?ny=1">registrer
111 deg</a> hos dinside.no og legg inn prisene fra dine lokale
112 bensinstasjoner.</p>
113
114 <p>Jeg har kun gjort dette med informasjonen fra dinside.no og ikke
115 informasjonen fra Bitfactory pga. bekymring rundt opphavsrettslige
116 problemstillinger. Faktainformasjonen samlet inn av brukerene av
117 dinside.no nettsider er åpenbart publisert offentlig, mens jeg
118 mistenker det er en juridisk gråsone om det samme gjelder
119 informasjonen samlet inn av brukerne av bitfactorys mobilapp. Derfor
120 bidrar jeg med å samle inn priser hos dinside.no, og anbefaler andre å
121 gjøre det samme. Jeg prioriterer å bidra hos de som forstår verdien
122 av å dele informasjon med andre uten bruksbegresninger.</p>
123
124 </div>
125 <div class="tags">
126
127
128 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
129
130
131 </div>
132 </div>
133 <div class="padding"></div>
134
135 <p style="text-align: right;"><a href="scraperwiki.rss"><img src="http://people.skolelinux.org/pere/blog/xml.gif" alt="RSS Feed" width="36" height="14" /></a></p>
136 <div id="sidebar">
137
138
139
140 <h2>Archive</h2>
141 <ul>
142
143 <li>2014
144 <ul>
145
146 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/01/">January (2)</a></li>
147
148 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/02/">February (3)</a></li>
149
150 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/03/">March (1)</a></li>
151
152 </ul></li>
153
154 <li>2013
155 <ul>
156
157 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/01/">January (11)</a></li>
158
159 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/02/">February (9)</a></li>
160
161 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/03/">March (9)</a></li>
162
163 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/04/">April (6)</a></li>
164
165 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/05/">May (9)</a></li>
166
167 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/06/">June (10)</a></li>
168
169 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/07/">July (7)</a></li>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/08/">August (3)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/09/">September (5)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/10/">October (7)</a></li>
176
177 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/11/">November (9)</a></li>
178
179 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/12/">December (3)</a></li>
180
181 </ul></li>
182
183 <li>2012
184 <ul>
185
186 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
187
188 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
189
190 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
191
192 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
193
194 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
195
196 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
197
198 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (17)</a></li>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/08/">August (6)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/09/">September (9)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/10/">October (17)</a></li>
205
206 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/11/">November (10)</a></li>
207
208 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/12/">December (7)</a></li>
209
210 </ul></li>
211
212 <li>2011
213 <ul>
214
215 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
216
217 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
218
219 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
220
221 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
222
223 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
224
225 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
226
227 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
234
235 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
236
237 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
238
239 </ul></li>
240
241 <li>2010
242 <ul>
243
244 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
245
246 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
247
248 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
249
250 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
251
252 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
253
254 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
255
256 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
257
258 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
259
260 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
261
262 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
263
264 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
265
266 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
267
268 </ul></li>
269
270 <li>2009
271 <ul>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
274
275 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
276
277 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
278
279 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
280
281 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
282
283 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
284
285 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
286
287 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
288
289 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
290
291 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
292
293 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
294
295 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
296
297 </ul></li>
298
299 <li>2008
300 <ul>
301
302 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
303
304 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
305
306 </ul></li>
307
308 </ul>
309
310
311
312 <h2>Tags</h2>
313 <ul>
314
315 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
316
317 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
318
319 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
320
321 <li><a href="http://people.skolelinux.org/pere/blog/tags/bankid">bankid (4)</a></li>
322
323 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (8)</a></li>
324
325 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (14)</a></li>
326
327 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
328
329 <li><a href="http://people.skolelinux.org/pere/blog/tags/chrpath">chrpath (2)</a></li>
330
331 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (94)</a></li>
332
333 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (144)</a></li>
334
335 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (10)</a></li>
336
337 <li><a href="http://people.skolelinux.org/pere/blog/tags/docbook">docbook (10)</a></li>
338
339 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
340
341 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (236)</a></li>
342
343 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (21)</a></li>
344
345 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
346
347 <li><a href="http://people.skolelinux.org/pere/blog/tags/freeculture">freeculture (12)</a></li>
348
349 <li><a href="http://people.skolelinux.org/pere/blog/tags/freedombox">freedombox (5)</a></li>
350
351 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (11)</a></li>
352
353 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (39)</a></li>
354
355 <li><a href="http://people.skolelinux.org/pere/blog/tags/isenkram">isenkram (7)</a></li>
356
357 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (18)</a></li>
358
359 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (8)</a></li>
360
361 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (7)</a></li>
362
363 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
364
365 <li><a href="http://people.skolelinux.org/pere/blog/tags/mesh network">mesh network (7)</a></li>
366
367 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (25)</a></li>
368
369 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (241)</a></li>
370
371 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (161)</a></li>
372
373 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (10)</a></li>
374
375 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
376
377 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (45)</a></li>
378
379 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (69)</a></li>
380
381 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
382
383 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
384
385 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (2)</a></li>
386
387 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (9)</a></li>
388
389 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
390
391 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
392
393 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
394
395 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (34)</a></li>
396
397 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
398
399 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (4)</a></li>
400
401 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (44)</a></li>
402
403 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (3)</a></li>
404
405 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (9)</a></li>
406
407 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (21)</a></li>
408
409 <li><a href="http://people.skolelinux.org/pere/blog/tags/sysadmin">sysadmin (1)</a></li>
410
411 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (8)</a></li>
412
413 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (39)</a></li>
414
415 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (4)</a></li>
416
417 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (28)</a></li>
418
419 </ul>
420
421
422 </div>
423 <p style="text-align: right">
424 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.6</a>
425 </p>
426
427 </body>
428 </html>