]> pere.pagekite.me Git - homepage.git/blob - blog/tags/scraperwiki/index.html
60aea82ffa9ba9003bc09e2a97163dd30c57e37c
[homepage.git] / blog / tags / scraperwiki / index.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: Entries Tagged scraperwiki</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9 <link rel="alternate" title="RSS Feed" href="scraperwiki.rss" type="application/rss+xml" />
10 </head>
11 <body>
12 <div class="title">
13 <h1>
14 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
15
16 </h1>
17
18 </div>
19
20
21 <h3>Entries tagged "scraperwiki".</h3>
22
23 <div class="entry">
24 <div class="title">
25 <a href="http://people.skolelinux.org/pere/blog/Hvem_samler_inn_flest_bensinpriser_.html">Hvem samler inn flest bensinpriser?</a>
26 </div>
27 <div class="date">
28 2nd July 2012
29 </div>
30 <div class="body">
31 <p>For ca. en måned siden så jeg på tjenester som forsøker å gjøre det
32 enklere å ta informerte valg om hvor en skal kjøpe drivstoff, for å
33 bedre konkurransesituasjonen i drivstoffmarkedet. Det er tre aktive
34 tjenester jeg kjenner til. NAF Bergens
35 <a href="http://www.drivstoffpriser.no/">Drivstoffpriser.no</a>,
36 Bitfactorys
37 <a href="http://www.bitfactory.no/bensinpris.html">Bensinpris-app</a>,
38 og Dinsides
39 <a href="http://www.dinside.no/php/oko/bensin/vis_prisliste.php">prisliste</a>.
40 Nå har jeg holdt øye med alle disse i over en måned, og kan fortelle
41 hvor mange priser for 95-oktan bensin de har klart å samle inn i juni
42 2012:</p>
43
44 <p><table border="1">
45 <tr><th>Tjeneste</th><th>Antall målinger i juni 2012</th></tr>
46 <tr><td>Bitfactorys bensinpris-app</td><td>7687</td></tr>
47 <tr><td>Drivstoffpriser.no</td><td>1788</td></tr>
48 <tr><td>Dinsides prisliste</td><td>322</td></tr>
49 <table></p>
50
51 <p>Det er dermed åpenbart at Dinsides tjeneste henger langt etter de
52 andre to, og at Bitfactorys løsning er den som har størst sjanse for å
53 gi bileiere gode råd ved kjøp av drivstoff. Det er ca. 1600
54 bensinstasjoner i Norge, så optimalt sett burde det vært samlet inn 30
55 * 1600 = 48 000 priser for å ha maksimalt en dag gamle priser for alle
56 bensinstasjoner i Norge. Ingen av tjenestene er i nærheten av å ha
57 komplett dekning. Og kun Dinside og NAF Bergens Drivstoffpriser gjør
58 prisinformasjonen tilgjengelig for alle på Internet.</p>
59
60 <p>Den store fordelen med Drivstoffpriser.no er at de også har
61 historiske priser liggende ute på åpne nettsider, slik at det er mulig
62 å se alle prisdata de har samlet inn så langt. Jeg har laget
63 <a href="https://scraperwiki.com/scrapers/naf-drivstoffpriser/">en
64 SQLite-database</a> med alle prisene samlet inn der, som oppdateres
65 jevnlig hos Scraperwiki. Tidligere anbefalte jeg å registrere priser
66 hos Dinside, men etter å ha utvekslet noen epost med dem og konkludert
67 med at der kommer det neppe til å skje noen videreutvikling med det
68 første, anbefaler jeg nå å registrere prisene hos NAF Bergens
69 drivstoffpriser.no. Jeg foretrekker å bidra til tjenester som åpent
70 deler data med andre, og det gjør ikke Bitfactory.</p>
71
72 </div>
73 <div class="tags">
74
75
76 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
77
78
79 </div>
80 </div>
81 <div class="padding"></div>
82
83 <div class="entry">
84 <div class="title">
85 <a href="http://people.skolelinux.org/pere/blog/Database_over_bensinpriser_fra_dinside_no.html">Database over bensinpriser fra dinside.no</a>
86 </div>
87 <div class="date">
88 30th May 2012
89 </div>
90 <div class="body">
91 <p>En god og offentlig kilde til bensinpriser i Norge er
92 <a href="http://www.dinside.no/1931/her-faar-du-billigst-bensin-diesel">dinside.no
93 sin prisoversikt</a> samlet inn på dugnad fra frivillige over hele
94 landet. Den har ikke like mange priser rapportert inn som Bitfactorys
95 mobil-app, men informasjonen som samles inn er enkelt offentlig
96 tilgjengelig på web. Dessverre forsvinner prisene fra web etter noen
97 dager, så for å kunne lage analyser og se trender må en lage en
98 database ved å hente ut informasjon fra dinside.no sine nettsider over
99 en lengre periode. Jeg startet for litt over en uke siden en
100 innsamlingstjeneste som gjør nettopp dette. Jeg har de siste ukene
101 lært meg å bruke <a href="http://www.scraperwiki.com/">Scraperwiki</a>,
102 et nytt og nyttig verktøy for å hente ut og strukturere informasjon
103 tilgjengelig fra nettsider, PDF-er og andre kilder og som trenger
104 strukturering. Hvis du vil se hvordan prisene har utviklet seg, ta en
105 titt på
106 <a href="https://scraperwiki.com/scrapers/dinside-bensinpriser/">scraperwiki-siden
107 med databasen</a> over bensinpriser. Den henter ned priser fra
108 dinside.no hver time. Hvis du vil bidra til å bedre oversikt over
109 bensinprisene i Norge
110 <a href="http://www.dinside.no/php/int/vis_endre.php?ny=1">registrer
111 deg</a> hos dinside.no og legg inn prisene fra dine lokale
112 bensinstasjoner.</p>
113
114 <p>Jeg har kun gjort dette med informasjonen fra dinside.no og ikke
115 informasjonen fra Bitfactory pga. bekymring rundt opphavsrettslige
116 problemstillinger. Faktainformasjonen samlet inn av brukerene av
117 dinside.no nettsider er åpenbart publisert offentlig, mens jeg
118 mistenker det er en juridisk gråsone om det samme gjelder
119 informasjonen samlet inn av brukerne av bitfactorys mobilapp. Derfor
120 bidrar jeg med å samle inn priser hos dinside.no, og anbefaler andre å
121 gjøre det samme. Jeg prioriterer å bidra hos de som forstår verdien
122 av å dele informasjon med andre uten bruksbegresninger.</p>
123
124 </div>
125 <div class="tags">
126
127
128 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
129
130
131 </div>
132 </div>
133 <div class="padding"></div>
134
135 <p style="text-align: right;"><a href="scraperwiki.rss"><img src="http://people.skolelinux.org/pere/blog/xml.gif" alt="RSS Feed" width="36" height="14" /></a></p>
136 <div id="sidebar">
137
138
139
140 <h2>Archive</h2>
141 <ul>
142
143 <li>2012
144 <ul>
145
146 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
147
148 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
149
150 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
151
152 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
153
154 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
155
156 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
157
158 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (17)</a></li>
159
160 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/08/">August (6)</a></li>
161
162 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/09/">September (9)</a></li>
163
164 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/10/">October (3)</a></li>
165
166 </ul></li>
167
168 <li>2011
169 <ul>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
176
177 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
178
179 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
180
181 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
182
183 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
184
185 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
186
187 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
188
189 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
190
191 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
192
193 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
194
195 </ul></li>
196
197 <li>2010
198 <ul>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
205
206 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
207
208 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
209
210 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
211
212 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
213
214 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
215
216 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
217
218 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
219
220 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
221
222 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
223
224 </ul></li>
225
226 <li>2009
227 <ul>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
234
235 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
236
237 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
238
239 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
240
241 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
242
243 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
244
245 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
246
247 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
248
249 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
250
251 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
252
253 </ul></li>
254
255 <li>2008
256 <ul>
257
258 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
259
260 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
261
262 </ul></li>
263
264 </ul>
265
266
267
268 <h2>Tags</h2>
269 <ul>
270
271 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
274
275 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
276
277 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (2)</a></li>
278
279 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (12)</a></li>
280
281 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
282
283 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (57)</a></li>
284
285 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (113)</a></li>
286
287 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (9)</a></li>
288
289 <li><a href="http://people.skolelinux.org/pere/blog/tags/docbook">docbook (7)</a></li>
290
291 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
292
293 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (153)</a></li>
294
295 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (17)</a></li>
296
297 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
298
299 <li><a href="http://people.skolelinux.org/pere/blog/tags/freeculture">freeculture (8)</a></li>
300
301 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (8)</a></li>
302
303 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (31)</a></li>
304
305 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (17)</a></li>
306
307 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (8)</a></li>
308
309 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (4)</a></li>
310
311 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
312
313 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (25)</a></li>
314
315 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (199)</a></li>
316
317 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (144)</a></li>
318
319 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (4)</a></li>
320
321 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
322
323 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (35)</a></li>
324
325 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (49)</a></li>
326
327 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
328
329 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
330
331 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (2)</a></li>
332
333 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (4)</a></li>
334
335 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
336
337 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
338
339 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
340
341 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (23)</a></li>
342
343 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
344
345 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (2)</a></li>
346
347 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (38)</a></li>
348
349 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (2)</a></li>
350
351 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (4)</a></li>
352
353 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (10)</a></li>
354
355 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (7)</a></li>
356
357 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (34)</a></li>
358
359 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (3)</a></li>
360
361 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (25)</a></li>
362
363 </ul>
364
365
366 </div>
367 <p style="text-align: right">
368 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.4</a>
369 </p>
370
371 </body>
372 </html>