]> pere.pagekite.me Git - homepage.git/blob - blog/tags/scraperwiki/index.html
a296ebc3d688b1e3fb537969b32060208d7d594c
[homepage.git] / blog / tags / scraperwiki / index.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: Entries Tagged scraperwiki</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9 <link rel="alternate" title="RSS Feed" href="scraperwiki.rss" type="application/rss+xml" />
10 </head>
11 <body>
12 <div class="title">
13 <h1>
14 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
15
16 </h1>
17
18 </div>
19
20
21 <h3>Entries tagged "scraperwiki".</h3>
22
23 <div class="entry">
24 <div class="title">
25 <a href="http://people.skolelinux.org/pere/blog/Hvem_samler_inn_flest_bensinpriser_.html">Hvem samler inn flest bensinpriser?</a>
26 </div>
27 <div class="date">
28 2nd July 2012
29 </div>
30 <div class="body">
31 <p>For ca. en måned siden så jeg på tjenester som forsøker å gjøre det
32 enklere å ta informerte valg om hvor en skal kjøpe drivstoff, for å
33 bedre konkurransesituasjonen i drivstoffmarkedet. Det er tre aktive
34 tjenester jeg kjenner til. NAF Bergens
35 <a href="http://www.drivstoffpriser.no/">Drivstoffpriser.no</a>,
36 Bitfactorys
37 <a href="http://www.bitfactory.no/bensinpris.html">Bensinpris-app</a>,
38 og Dinsides
39 <a href="http://www.dinside.no/php/oko/bensin/vis_prisliste.php">prisliste</a>.
40 Nå har jeg holdt øye med alle disse i over en måned, og kan fortelle
41 hvor mange priser for 95-oktan bensin de har klart å samle inn i juni
42 2012:</p>
43
44 <table border="1">
45 <tr><th>Tjeneste</th><th>Antall målinger i juni 2012</th></tr>
46 <tr><td>Bitfactorys bensinpris-app</td><td>7687</td></tr>
47 <tr><td>Drivstoffpriser.no</td><td>1788</td></tr>
48 <tr><td>Dinsides prisliste</td><td>322</td></tr>
49 </table>
50
51 <p>Det er dermed åpenbart at Dinsides tjeneste henger langt etter de
52 andre to, og at Bitfactorys løsning er den som har størst sjanse for å
53 gi bileiere gode råd ved kjøp av drivstoff. Det er ca. 1600
54 bensinstasjoner i Norge, så optimalt sett burde det vært samlet inn 30
55 * 1600 = 48 000 priser for å ha maksimalt en dag gamle priser for alle
56 bensinstasjoner i Norge. Ingen av tjenestene er i nærheten av å ha
57 komplett dekning. Og kun Dinside og NAF Bergens Drivstoffpriser gjør
58 prisinformasjonen tilgjengelig for alle på Internet.</p>
59
60 <p>Den store fordelen med Drivstoffpriser.no er at de også har
61 historiske priser liggende ute på åpne nettsider, slik at det er mulig
62 å se alle prisdata de har samlet inn så langt. Jeg har laget
63 <a href="https://scraperwiki.com/scrapers/naf-drivstoffpriser/">en
64 SQLite-database</a> med alle prisene samlet inn der, som oppdateres
65 jevnlig hos Scraperwiki. Tidligere anbefalte jeg å registrere priser
66 hos Dinside, men etter å ha utvekslet noen epost med dem og konkludert
67 med at der kommer det neppe til å skje noen videreutvikling med det
68 første, anbefaler jeg nå å registrere prisene hos NAF Bergens
69 drivstoffpriser.no. Jeg foretrekker å bidra til tjenester som åpent
70 deler data med andre, og det gjør ikke Bitfactory.</p>
71
72 </div>
73 <div class="tags">
74
75
76 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
77
78
79 </div>
80 </div>
81 <div class="padding"></div>
82
83 <div class="entry">
84 <div class="title">
85 <a href="http://people.skolelinux.org/pere/blog/Database_over_bensinpriser_fra_dinside_no.html">Database over bensinpriser fra dinside.no</a>
86 </div>
87 <div class="date">
88 30th May 2012
89 </div>
90 <div class="body">
91 <p>En god og offentlig kilde til bensinpriser i Norge er
92 <a href="http://www.dinside.no/1931/her-faar-du-billigst-bensin-diesel">dinside.no
93 sin prisoversikt</a> samlet inn på dugnad fra frivillige over hele
94 landet. Den har ikke like mange priser rapportert inn som Bitfactorys
95 mobil-app, men informasjonen som samles inn er enkelt offentlig
96 tilgjengelig på web. Dessverre forsvinner prisene fra web etter noen
97 dager, så for å kunne lage analyser og se trender må en lage en
98 database ved å hente ut informasjon fra dinside.no sine nettsider over
99 en lengre periode. Jeg startet for litt over en uke siden en
100 innsamlingstjeneste som gjør nettopp dette. Jeg har de siste ukene
101 lært meg å bruke <a href="http://www.scraperwiki.com/">Scraperwiki</a>,
102 et nytt og nyttig verktøy for å hente ut og strukturere informasjon
103 tilgjengelig fra nettsider, PDF-er og andre kilder og som trenger
104 strukturering. Hvis du vil se hvordan prisene har utviklet seg, ta en
105 titt på
106 <a href="https://scraperwiki.com/scrapers/dinside-bensinpriser/">scraperwiki-siden
107 med databasen</a> over bensinpriser. Den henter ned priser fra
108 dinside.no hver time. Hvis du vil bidra til å bedre oversikt over
109 bensinprisene i Norge
110 <a href="http://www.dinside.no/php/int/vis_endre.php?ny=1">registrer
111 deg</a> hos dinside.no og legg inn prisene fra dine lokale
112 bensinstasjoner.</p>
113
114 <p>Jeg har kun gjort dette med informasjonen fra dinside.no og ikke
115 informasjonen fra Bitfactory pga. bekymring rundt opphavsrettslige
116 problemstillinger. Faktainformasjonen samlet inn av brukerene av
117 dinside.no nettsider er åpenbart publisert offentlig, mens jeg
118 mistenker det er en juridisk gråsone om det samme gjelder
119 informasjonen samlet inn av brukerne av bitfactorys mobilapp. Derfor
120 bidrar jeg med å samle inn priser hos dinside.no, og anbefaler andre å
121 gjøre det samme. Jeg prioriterer å bidra hos de som forstår verdien
122 av å dele informasjon med andre uten bruksbegresninger.</p>
123
124 </div>
125 <div class="tags">
126
127
128 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
129
130
131 </div>
132 </div>
133 <div class="padding"></div>
134
135 <p style="text-align: right;"><a href="scraperwiki.rss"><img src="http://people.skolelinux.org/pere/blog/xml.gif" alt="RSS Feed" width="36" height="14" /></a></p>
136 <div id="sidebar">
137
138
139
140 <h2>Archive</h2>
141 <ul>
142
143 <li>2015
144 <ul>
145
146 <li><a href="http://people.skolelinux.org/pere/blog/archive/2015/01/">January (3)</a></li>
147
148 </ul></li>
149
150 <li>2014
151 <ul>
152
153 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/01/">January (2)</a></li>
154
155 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/02/">February (3)</a></li>
156
157 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/03/">March (8)</a></li>
158
159 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/04/">April (7)</a></li>
160
161 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/05/">May (1)</a></li>
162
163 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/06/">June (2)</a></li>
164
165 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/07/">July (2)</a></li>
166
167 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/08/">August (2)</a></li>
168
169 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/09/">September (5)</a></li>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/10/">October (6)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/11/">November (3)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2014/12/">December (5)</a></li>
176
177 </ul></li>
178
179 <li>2013
180 <ul>
181
182 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/01/">January (11)</a></li>
183
184 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/02/">February (9)</a></li>
185
186 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/03/">March (9)</a></li>
187
188 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/04/">April (6)</a></li>
189
190 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/05/">May (9)</a></li>
191
192 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/06/">June (10)</a></li>
193
194 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/07/">July (7)</a></li>
195
196 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/08/">August (3)</a></li>
197
198 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/09/">September (5)</a></li>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/10/">October (7)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/11/">November (9)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/12/">December (3)</a></li>
205
206 </ul></li>
207
208 <li>2012
209 <ul>
210
211 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
212
213 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
214
215 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
216
217 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
218
219 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
220
221 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
222
223 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (17)</a></li>
224
225 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/08/">August (6)</a></li>
226
227 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/09/">September (9)</a></li>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/10/">October (17)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/11/">November (10)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/12/">December (7)</a></li>
234
235 </ul></li>
236
237 <li>2011
238 <ul>
239
240 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
241
242 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
243
244 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
245
246 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
247
248 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
249
250 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
251
252 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
253
254 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
255
256 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
257
258 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
259
260 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
261
262 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
263
264 </ul></li>
265
266 <li>2010
267 <ul>
268
269 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
270
271 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
274
275 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
276
277 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
278
279 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
280
281 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
282
283 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
284
285 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
286
287 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
288
289 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
290
291 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
292
293 </ul></li>
294
295 <li>2009
296 <ul>
297
298 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
299
300 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
301
302 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
303
304 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
305
306 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
307
308 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
309
310 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
311
312 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
313
314 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
315
316 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
317
318 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
319
320 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
321
322 </ul></li>
323
324 <li>2008
325 <ul>
326
327 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
328
329 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
330
331 </ul></li>
332
333 </ul>
334
335
336
337 <h2>Tags</h2>
338 <ul>
339
340 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
341
342 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
343
344 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
345
346 <li><a href="http://people.skolelinux.org/pere/blog/tags/bankid">bankid (4)</a></li>
347
348 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (8)</a></li>
349
350 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (15)</a></li>
351
352 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
353
354 <li><a href="http://people.skolelinux.org/pere/blog/tags/chrpath">chrpath (2)</a></li>
355
356 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (109)</a></li>
357
358 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (151)</a></li>
359
360 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (10)</a></li>
361
362 <li><a href="http://people.skolelinux.org/pere/blog/tags/dld">dld (15)</a></li>
363
364 <li><a href="http://people.skolelinux.org/pere/blog/tags/docbook">docbook (12)</a></li>
365
366 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
367
368 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (266)</a></li>
369
370 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (22)</a></li>
371
372 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
373
374 <li><a href="http://people.skolelinux.org/pere/blog/tags/freeculture">freeculture (14)</a></li>
375
376 <li><a href="http://people.skolelinux.org/pere/blog/tags/freedombox">freedombox (9)</a></li>
377
378 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (11)</a></li>
379
380 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (41)</a></li>
381
382 <li><a href="http://people.skolelinux.org/pere/blog/tags/isenkram">isenkram (10)</a></li>
383
384 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (19)</a></li>
385
386 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (9)</a></li>
387
388 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (8)</a></li>
389
390 <li><a href="http://people.skolelinux.org/pere/blog/tags/lsdvd">lsdvd (2)</a></li>
391
392 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
393
394 <li><a href="http://people.skolelinux.org/pere/blog/tags/mesh network">mesh network (8)</a></li>
395
396 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (32)</a></li>
397
398 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (254)</a></li>
399
400 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (167)</a></li>
401
402 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (11)</a></li>
403
404 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
405
406 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (50)</a></li>
407
408 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (81)</a></li>
409
410 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
411
412 <li><a href="http://people.skolelinux.org/pere/blog/tags/reactos">reactos (1)</a></li>
413
414 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
415
416 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (3)</a></li>
417
418 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (9)</a></li>
419
420 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
421
422 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
423
424 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
425
426 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (41)</a></li>
427
428 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
429
430 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (4)</a></li>
431
432 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (46)</a></li>
433
434 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (3)</a></li>
435
436 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (9)</a></li>
437
438 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (29)</a></li>
439
440 <li><a href="http://people.skolelinux.org/pere/blog/tags/sysadmin">sysadmin (2)</a></li>
441
442 <li><a href="http://people.skolelinux.org/pere/blog/tags/usenix">usenix (2)</a></li>
443
444 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (8)</a></li>
445
446 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (47)</a></li>
447
448 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (4)</a></li>
449
450 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (34)</a></li>
451
452 </ul>
453
454
455 </div>
456 <p style="text-align: right">
457 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.6</a>
458 </p>
459
460 </body>
461 </html>