]> pere.pagekite.me Git - homepage.git/blob - blog/tags/scraperwiki/index.html
3b216f70bfff7d7e6e5328934dd5b421ce698b5c
[homepage.git] / blog / tags / scraperwiki / index.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: Entries Tagged scraperwiki</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9 <link rel="alternate" title="RSS Feed" href="scraperwiki.rss" type="application/rss+xml" />
10 </head>
11 <body>
12 <div class="title">
13 <h1>
14 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
15
16 </h1>
17
18 </div>
19
20
21 <h3>Entries tagged "scraperwiki".</h3>
22
23 <div class="entry">
24 <div class="title">
25 <a href="http://people.skolelinux.org/pere/blog/Hvem_samler_inn_flest_bensinpriser_.html">Hvem samler inn flest bensinpriser?</a>
26 </div>
27 <div class="date">
28 2nd July 2012
29 </div>
30 <div class="body">
31 <p>For ca. en måned siden så jeg på tjenester som forsøker å gjøre det
32 enklere å ta informerte valg om hvor en skal kjøpe drivstoff, for å
33 bedre konkurransesituasjonen i drivstoffmarkedet. Det er tre aktive
34 tjenester jeg kjenner til. NAF Bergens
35 <a href="http://www.drivstoffpriser.no/">Drivstoffpriser.no</a>,
36 Bitfactorys
37 <a href="http://www.bitfactory.no/bensinpris.html">Bensinpris-app</a>,
38 og Dinsides
39 <a href="http://www.dinside.no/php/oko/bensin/vis_prisliste.php">prisliste</a>.
40 Nå har jeg holdt øye med alle disse i over en måned, og kan fortelle
41 hvor mange priser for 95-oktan bensin de har klart å samle inn i juni
42 2012:</p>
43
44 <table border="1">
45 <tr><th>Tjeneste</th><th>Antall målinger i juni 2012</th></tr>
46 <tr><td>Bitfactorys bensinpris-app</td><td>7687</td></tr>
47 <tr><td>Drivstoffpriser.no</td><td>1788</td></tr>
48 <tr><td>Dinsides prisliste</td><td>322</td></tr>
49 <table>
50
51 <p>Det er dermed åpenbart at Dinsides tjeneste henger langt etter de
52 andre to, og at Bitfactorys løsning er den som har størst sjanse for å
53 gi bileiere gode råd ved kjøp av drivstoff. Det er ca. 1600
54 bensinstasjoner i Norge, så optimalt sett burde det vært samlet inn 30
55 * 1600 = 48 000 priser for å ha maksimalt en dag gamle priser for alle
56 bensinstasjoner i Norge. Ingen av tjenestene er i nærheten av å ha
57 komplett dekning. Og kun Dinside og NAF Bergens Drivstoffpriser gjør
58 prisinformasjonen tilgjengelig for alle på Internet.</p>
59
60 <p>Den store fordelen med Drivstoffpriser.no er at de også har
61 historiske priser liggende ute på åpne nettsider, slik at det er mulig
62 å se alle prisdata de har samlet inn så langt. Jeg har laget
63 <a href="https://scraperwiki.com/scrapers/naf-drivstoffpriser/">en
64 SQLite-database</a> med alle prisene samlet inn der, som oppdateres
65 jevnlig hos Scraperwiki. Tidligere anbefalte jeg å registrere priser
66 hos Dinside, men etter å ha utvekslet noen epost med dem og konkludert
67 med at der kommer det neppe til å skje noen videreutvikling med det
68 første, anbefaler jeg nå å registrere prisene hos NAF Bergens
69 drivstoffpriser.no. Jeg foretrekker å bidra til tjenester som åpent
70 deler data med andre, og det gjør ikke Bitfactory.</p>
71
72 </div>
73 <div class="tags">
74
75
76 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
77
78
79 </div>
80 </div>
81 <div class="padding"></div>
82
83 <div class="entry">
84 <div class="title">
85 <a href="http://people.skolelinux.org/pere/blog/Database_over_bensinpriser_fra_dinside_no.html">Database over bensinpriser fra dinside.no</a>
86 </div>
87 <div class="date">
88 30th May 2012
89 </div>
90 <div class="body">
91 <p>En god og offentlig kilde til bensinpriser i Norge er
92 <a href="http://www.dinside.no/1931/her-faar-du-billigst-bensin-diesel">dinside.no
93 sin prisoversikt</a> samlet inn på dugnad fra frivillige over hele
94 landet. Den har ikke like mange priser rapportert inn som Bitfactorys
95 mobil-app, men informasjonen som samles inn er enkelt offentlig
96 tilgjengelig på web. Dessverre forsvinner prisene fra web etter noen
97 dager, så for å kunne lage analyser og se trender må en lage en
98 database ved å hente ut informasjon fra dinside.no sine nettsider over
99 en lengre periode. Jeg startet for litt over en uke siden en
100 innsamlingstjeneste som gjør nettopp dette. Jeg har de siste ukene
101 lært meg å bruke <a href="http://www.scraperwiki.com/">Scraperwiki</a>,
102 et nytt og nyttig verktøy for å hente ut og strukturere informasjon
103 tilgjengelig fra nettsider, PDF-er og andre kilder og som trenger
104 strukturering. Hvis du vil se hvordan prisene har utviklet seg, ta en
105 titt på
106 <a href="https://scraperwiki.com/scrapers/dinside-bensinpriser/">scraperwiki-siden
107 med databasen</a> over bensinpriser. Den henter ned priser fra
108 dinside.no hver time. Hvis du vil bidra til å bedre oversikt over
109 bensinprisene i Norge
110 <a href="http://www.dinside.no/php/int/vis_endre.php?ny=1">registrer
111 deg</a> hos dinside.no og legg inn prisene fra dine lokale
112 bensinstasjoner.</p>
113
114 <p>Jeg har kun gjort dette med informasjonen fra dinside.no og ikke
115 informasjonen fra Bitfactory pga. bekymring rundt opphavsrettslige
116 problemstillinger. Faktainformasjonen samlet inn av brukerene av
117 dinside.no nettsider er åpenbart publisert offentlig, mens jeg
118 mistenker det er en juridisk gråsone om det samme gjelder
119 informasjonen samlet inn av brukerne av bitfactorys mobilapp. Derfor
120 bidrar jeg med å samle inn priser hos dinside.no, og anbefaler andre å
121 gjøre det samme. Jeg prioriterer å bidra hos de som forstår verdien
122 av å dele informasjon med andre uten bruksbegresninger.</p>
123
124 </div>
125 <div class="tags">
126
127
128 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
129
130
131 </div>
132 </div>
133 <div class="padding"></div>
134
135 <p style="text-align: right;"><a href="scraperwiki.rss"><img src="http://people.skolelinux.org/pere/blog/xml.gif" alt="RSS Feed" width="36" height="14" /></a></p>
136 <div id="sidebar">
137
138
139
140 <h2>Archive</h2>
141 <ul>
142
143 <li>2013
144 <ul>
145
146 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/01/">January (11)</a></li>
147
148 <li><a href="http://people.skolelinux.org/pere/blog/archive/2013/02/">February (7)</a></li>
149
150 </ul></li>
151
152 <li>2012
153 <ul>
154
155 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
156
157 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
158
159 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
160
161 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
162
163 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
164
165 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
166
167 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (17)</a></li>
168
169 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/08/">August (6)</a></li>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/09/">September (9)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/10/">October (17)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/11/">November (10)</a></li>
176
177 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/12/">December (7)</a></li>
178
179 </ul></li>
180
181 <li>2011
182 <ul>
183
184 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
185
186 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
187
188 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
189
190 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
191
192 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
193
194 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
195
196 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
197
198 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
205
206 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
207
208 </ul></li>
209
210 <li>2010
211 <ul>
212
213 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
214
215 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
216
217 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
218
219 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
220
221 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
222
223 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
224
225 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
226
227 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
234
235 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
236
237 </ul></li>
238
239 <li>2009
240 <ul>
241
242 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
243
244 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
245
246 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
247
248 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
249
250 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
251
252 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
253
254 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
255
256 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
257
258 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
259
260 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
261
262 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
263
264 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
265
266 </ul></li>
267
268 <li>2008
269 <ul>
270
271 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
274
275 </ul></li>
276
277 </ul>
278
279
280
281 <h2>Tags</h2>
282 <ul>
283
284 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
285
286 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
287
288 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
289
290 <li><a href="http://people.skolelinux.org/pere/blog/tags/bankid">bankid (4)</a></li>
291
292 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (6)</a></li>
293
294 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (12)</a></li>
295
296 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
297
298 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (70)</a></li>
299
300 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (118)</a></li>
301
302 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (9)</a></li>
303
304 <li><a href="http://people.skolelinux.org/pere/blog/tags/docbook">docbook (7)</a></li>
305
306 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
307
308 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (179)</a></li>
309
310 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (21)</a></li>
311
312 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
313
314 <li><a href="http://people.skolelinux.org/pere/blog/tags/freeculture">freeculture (10)</a></li>
315
316 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (9)</a></li>
317
318 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (32)</a></li>
319
320 <li><a href="http://people.skolelinux.org/pere/blog/tags/isenkram">isenkram (5)</a></li>
321
322 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (18)</a></li>
323
324 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (8)</a></li>
325
326 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (6)</a></li>
327
328 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
329
330 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (25)</a></li>
331
332 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (222)</a></li>
333
334 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (149)</a></li>
335
336 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (7)</a></li>
337
338 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
339
340 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (41)</a></li>
341
342 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (63)</a></li>
343
344 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
345
346 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
347
348 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (2)</a></li>
349
350 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (6)</a></li>
351
352 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
353
354 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
355
356 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
357
358 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (28)</a></li>
359
360 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
361
362 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (4)</a></li>
363
364 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (40)</a></li>
365
366 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (3)</a></li>
367
368 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (6)</a></li>
369
370 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (14)</a></li>
371
372 <li><a href="http://people.skolelinux.org/pere/blog/tags/sysadmin">sysadmin (1)</a></li>
373
374 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (7)</a></li>
375
376 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (35)</a></li>
377
378 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (4)</a></li>
379
380 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (26)</a></li>
381
382 </ul>
383
384
385 </div>
386 <p style="text-align: right">
387 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.6</a>
388 </p>
389
390 </body>
391 </html>