]> pere.pagekite.me Git - homepage.git/blob - blog/tags/scraperwiki/index.html
58499b9e116c28aba3f5587c44b9897cb78876fb
[homepage.git] / blog / tags / scraperwiki / index.html
1 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"
2 "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">
3 <html xmlns="http://www.w3.org/1999/xhtml" dir="ltr">
4 <head>
5 <meta http-equiv="Content-Type" content="text/html;charset=utf-8" />
6 <title>Petter Reinholdtsen: Entries Tagged scraperwiki</title>
7 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/style.css" />
8 <link rel="stylesheet" type="text/css" media="screen" href="http://people.skolelinux.org/pere/blog/vim.css" />
9 <link rel="alternate" title="RSS Feed" href="scraperwiki.rss" type="application/rss+xml" />
10 </head>
11 <body>
12 <div class="title">
13 <h1>
14 <a href="http://people.skolelinux.org/pere/blog/">Petter Reinholdtsen</a>
15
16 </h1>
17
18 </div>
19
20
21 <h3>Entries tagged "scraperwiki".</h3>
22
23 <div class="entry">
24 <div class="title">
25 <a href="http://people.skolelinux.org/pere/blog/Database_over_bensinpriser_fra_dinside_no.html">Database over bensinpriser fra dinside.no</a>
26 </div>
27 <div class="date">
28 30th May 2012
29 </div>
30 <div class="body">
31 <p>En god og offentlig kilde til bensinpriser i Norge er
32 <a href="http://www.dinside.no/1931/her-faar-du-billigst-bensin-diesel">dinside.no
33 sin prisoversikt</a> samlet inn på dugnad fra frivillige over hele
34 landet. Den har ikke like mange priser rapportert inn som Bitfactorys
35 mobil-app, men informasjonen som samles inn er enkelt offentlig
36 tilgjengelig på web. Dessverre forsvinner prisene fra web etter noen
37 dager, så for å kunne lage analyser og se trender må en lage en
38 database ved å hente ut informasjon fra dinside.no sine nettsider over
39 en lengre periode. Jeg startet for litt over en uke siden en
40 innsamlingstjeneste som gjør nettopp dette. Jeg har de siste ukene
41 lært meg å bruke <a href="http://www.scraperwiki.com/">Scraperwiki</a>,
42 et nytt og nyttig verktøy for å hente ut og strukturere informasjon
43 tilgjengelig fra nettsider, PDF-er og andre kilder og som trenger
44 strukturering. Hvis du vil se hvordan prisene har utviklet seg, ta en
45 titt på
46 <a href="https://scraperwiki.com/scrapers/dinside-bensinpriser/">scraperwiki-siden
47 med databasen</a> over bensinpriser. Den henter ned priser fra
48 dinside.no hver time. Hvis du vil bidra til å bedre oversikt over
49 bensinprisene i Norge
50 <a href="http://www.dinside.no/php/int/vis_endre.php?ny=1">registrer
51 deg</a> hos dinside.no og legg inn prisene fra dine lokale
52 bensinstasjoner.</p>
53
54 <p>Jeg har kun gjort dette med informasjonen fra dinside.no og ikke
55 informasjonen fra Bitfactory pga. bekymring rundt opphavsrettslige
56 problemstillinger. Faktainformasjonen samlet inn av brukerene av
57 dinside.no nettsider er åpenbart publisert offentlig, mens jeg
58 mistenker det er en juridisk gråsone om det samme gjelder
59 informasjonen samlet inn av brukerne av bitfactorys mobilapp. Derfor
60 bidrar jeg med å samle inn priser hos dinside.no, og anbefaler andre å
61 gjøre det samme. Jeg prioriterer å bidra hos de som forstår verdien
62 av å dele informasjon med andre uten bruksbegresninger.</p>
63
64 </div>
65 <div class="tags">
66
67
68 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
69
70
71 </div>
72 </div>
73 <div class="padding"></div>
74
75 <div class="entry">
76 <div class="title">
77 <a href="http://people.skolelinux.org/pere/blog/Hvem_samler_inn_flest_bensinpriser_.html">Hvem samler inn flest bensinpriser?</a>
78 </div>
79 <div class="date">
80 2nd July 2012
81 </div>
82 <div class="body">
83 <p>For ca. en måned siden så jeg på tjenester som forsøker å gjøre det
84 enklere å ta informerte valg om hvor en skal kjøpe drivstoff, for å
85 bedre konkurransesituasjonen i drivstoffmarkedet. Det er tre aktive
86 tjenester jeg kjenner til. NAF Bergens
87 <a href="http://www.drivstoffpriser.no/">Drivstoffpriser.no</a>,
88 Bitfactorys
89 <a href="http://www.bitfactory.no/bensinpris.html">Bensinpris-app</a>,
90 og Dinsides
91 <a href="http://www.dinside.no/php/oko/bensin/vis_prisliste.php">prisliste</a>.
92 Nå har jeg holdt øye med alle disse i over en måned, og kan fortelle
93 hvor mange priser for 95-oktan bensin de har klart å samle inn i juni
94 2012:</p>
95
96 <p><table border="1">
97 <tr><th>Tjeneste</th><th>Antall målinger i juni 2012</th></tr>
98 <tr><td>Bitfactorys bensinpris-app</td><td>7687</td></tr>
99 <tr><td>Drivstoffpriser.no</td><td>1788</td></tr>
100 <tr><td>Dinsides prisliste</td><td>322</td></tr>
101 <table></p>
102
103 <p>Det er dermed åpenbart at Dinsides tjeneste henger langt etter de
104 andre to, og at Bitfactorys løsning er den som har størst sjanse for å
105 gi bileiere gode råd ved kjøp av drivstoff. Det er ca. 1600
106 bensinstasjoner i Norge, så optimalt sett burde det vært samlet inn 30
107 * 1600 = 48 000 priser for å ha maksimalt en dag gamle priser for alle
108 bensinstasjoner i Norge. Ingen av tjenestene er i nærheten av å ha
109 komplett dekning. Og kun Dinside og NAF Bergens Drivstoffpriser gjør
110 prisinformasjonen tilgjengelig for alle på Internet.</p>
111
112 <p>Den store fordelen med Drivstoffpriser.no er at de også har
113 historiske priser liggende ute på åpne nettsider, slik at det er mulig
114 å se alle prisdata de har samlet inn så langt. Jeg har laget
115 <a href="https://scraperwiki.com/scrapers/naf-drivstoffpriser/">en
116 SQLite-database</a> med alle prisene samlet inn der, som oppdateres
117 jevnlig hos Scraperwiki. Tidligere anbefalte jeg å registrere priser
118 hos Dinside, men etter å ha utvekslet noen epost med dem og konkludert
119 med at der kommer det neppe til å skje noen videreutvikling med det
120 første, anbefaler jeg nå å registrere prisene hos NAF Bergens
121 drivstoffpriser.no. Jeg foretrekker å bidra til tjenester som åpent
122 deler data med andre, og det gjør ikke Bitfactory.</p>
123
124 </div>
125 <div class="tags">
126
127
128 Tags: <a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser</a>, <a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk</a>, <a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki</a>.
129
130
131 </div>
132 </div>
133 <div class="padding"></div>
134
135 <p style="text-align: right;"><a href="scraperwiki.rss"><img src="http://people.skolelinux.org/pere/blog/xml.gif" alt="RSS Feed" width="36" height="14" /></a></p>
136 <div id="sidebar">
137
138
139
140 <h2>Archive</h2>
141 <ul>
142
143 <li>2012
144 <ul>
145
146 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/01/">January (7)</a></li>
147
148 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/02/">February (10)</a></li>
149
150 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/03/">March (17)</a></li>
151
152 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/04/">April (12)</a></li>
153
154 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/05/">May (12)</a></li>
155
156 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/06/">June (20)</a></li>
157
158 <li><a href="http://people.skolelinux.org/pere/blog/archive/2012/07/">July (4)</a></li>
159
160 </ul></li>
161
162 <li>2011
163 <ul>
164
165 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/01/">January (16)</a></li>
166
167 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/02/">February (6)</a></li>
168
169 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/03/">March (6)</a></li>
170
171 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/04/">April (7)</a></li>
172
173 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/05/">May (3)</a></li>
174
175 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/06/">June (2)</a></li>
176
177 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/07/">July (7)</a></li>
178
179 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/08/">August (6)</a></li>
180
181 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/09/">September (4)</a></li>
182
183 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/10/">October (2)</a></li>
184
185 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/11/">November (3)</a></li>
186
187 <li><a href="http://people.skolelinux.org/pere/blog/archive/2011/12/">December (1)</a></li>
188
189 </ul></li>
190
191 <li>2010
192 <ul>
193
194 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/01/">January (2)</a></li>
195
196 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/02/">February (1)</a></li>
197
198 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/03/">March (3)</a></li>
199
200 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/04/">April (3)</a></li>
201
202 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/05/">May (9)</a></li>
203
204 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/06/">June (14)</a></li>
205
206 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/07/">July (12)</a></li>
207
208 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/08/">August (13)</a></li>
209
210 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/09/">September (7)</a></li>
211
212 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/10/">October (9)</a></li>
213
214 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/11/">November (13)</a></li>
215
216 <li><a href="http://people.skolelinux.org/pere/blog/archive/2010/12/">December (12)</a></li>
217
218 </ul></li>
219
220 <li>2009
221 <ul>
222
223 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/01/">January (8)</a></li>
224
225 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/02/">February (8)</a></li>
226
227 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/03/">March (12)</a></li>
228
229 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/04/">April (10)</a></li>
230
231 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/05/">May (9)</a></li>
232
233 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/06/">June (3)</a></li>
234
235 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/07/">July (4)</a></li>
236
237 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/08/">August (3)</a></li>
238
239 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/09/">September (1)</a></li>
240
241 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/10/">October (2)</a></li>
242
243 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/11/">November (3)</a></li>
244
245 <li><a href="http://people.skolelinux.org/pere/blog/archive/2009/12/">December (3)</a></li>
246
247 </ul></li>
248
249 <li>2008
250 <ul>
251
252 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/11/">November (5)</a></li>
253
254 <li><a href="http://people.skolelinux.org/pere/blog/archive/2008/12/">December (7)</a></li>
255
256 </ul></li>
257
258 </ul>
259
260
261
262 <h2>Tags</h2>
263 <ul>
264
265 <li><a href="http://people.skolelinux.org/pere/blog/tags/3d-printer">3d-printer (13)</a></li>
266
267 <li><a href="http://people.skolelinux.org/pere/blog/tags/amiga">amiga (1)</a></li>
268
269 <li><a href="http://people.skolelinux.org/pere/blog/tags/aros">aros (1)</a></li>
270
271 <li><a href="http://people.skolelinux.org/pere/blog/tags/bitcoin">bitcoin (2)</a></li>
272
273 <li><a href="http://people.skolelinux.org/pere/blog/tags/bootsystem">bootsystem (12)</a></li>
274
275 <li><a href="http://people.skolelinux.org/pere/blog/tags/bsa">bsa (2)</a></li>
276
277 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian">debian (55)</a></li>
278
279 <li><a href="http://people.skolelinux.org/pere/blog/tags/debian edu">debian edu (106)</a></li>
280
281 <li><a href="http://people.skolelinux.org/pere/blog/tags/digistan">digistan (9)</a></li>
282
283 <li><a href="http://people.skolelinux.org/pere/blog/tags/drivstoffpriser">drivstoffpriser (4)</a></li>
284
285 <li><a href="http://people.skolelinux.org/pere/blog/tags/english">english (138)</a></li>
286
287 <li><a href="http://people.skolelinux.org/pere/blog/tags/fiksgatami">fiksgatami (17)</a></li>
288
289 <li><a href="http://people.skolelinux.org/pere/blog/tags/fildeling">fildeling (12)</a></li>
290
291 <li><a href="http://people.skolelinux.org/pere/blog/tags/frikanalen">frikanalen (5)</a></li>
292
293 <li><a href="http://people.skolelinux.org/pere/blog/tags/intervju">intervju (29)</a></li>
294
295 <li><a href="http://people.skolelinux.org/pere/blog/tags/kart">kart (16)</a></li>
296
297 <li><a href="http://people.skolelinux.org/pere/blog/tags/ldap">ldap (8)</a></li>
298
299 <li><a href="http://people.skolelinux.org/pere/blog/tags/lenker">lenker (4)</a></li>
300
301 <li><a href="http://people.skolelinux.org/pere/blog/tags/ltsp">ltsp (1)</a></li>
302
303 <li><a href="http://people.skolelinux.org/pere/blog/tags/multimedia">multimedia (21)</a></li>
304
305 <li><a href="http://people.skolelinux.org/pere/blog/tags/norsk">norsk (183)</a></li>
306
307 <li><a href="http://people.skolelinux.org/pere/blog/tags/nuug">nuug (135)</a></li>
308
309 <li><a href="http://people.skolelinux.org/pere/blog/tags/offentlig innsyn">offentlig innsyn (3)</a></li>
310
311 <li><a href="http://people.skolelinux.org/pere/blog/tags/open311">open311 (2)</a></li>
312
313 <li><a href="http://people.skolelinux.org/pere/blog/tags/opphavsrett">opphavsrett (30)</a></li>
314
315 <li><a href="http://people.skolelinux.org/pere/blog/tags/personvern">personvern (48)</a></li>
316
317 <li><a href="http://people.skolelinux.org/pere/blog/tags/raid">raid (1)</a></li>
318
319 <li><a href="http://people.skolelinux.org/pere/blog/tags/reprap">reprap (11)</a></li>
320
321 <li><a href="http://people.skolelinux.org/pere/blog/tags/rfid">rfid (2)</a></li>
322
323 <li><a href="http://people.skolelinux.org/pere/blog/tags/robot">robot (4)</a></li>
324
325 <li><a href="http://people.skolelinux.org/pere/blog/tags/rss">rss (1)</a></li>
326
327 <li><a href="http://people.skolelinux.org/pere/blog/tags/ruter">ruter (4)</a></li>
328
329 <li><a href="http://people.skolelinux.org/pere/blog/tags/scraperwiki">scraperwiki (2)</a></li>
330
331 <li><a href="http://people.skolelinux.org/pere/blog/tags/sikkerhet">sikkerhet (23)</a></li>
332
333 <li><a href="http://people.skolelinux.org/pere/blog/tags/sitesummary">sitesummary (4)</a></li>
334
335 <li><a href="http://people.skolelinux.org/pere/blog/tags/skepsis">skepsis (1)</a></li>
336
337 <li><a href="http://people.skolelinux.org/pere/blog/tags/standard">standard (34)</a></li>
338
339 <li><a href="http://people.skolelinux.org/pere/blog/tags/stavekontroll">stavekontroll (1)</a></li>
340
341 <li><a href="http://people.skolelinux.org/pere/blog/tags/stortinget">stortinget (4)</a></li>
342
343 <li><a href="http://people.skolelinux.org/pere/blog/tags/surveillance">surveillance (10)</a></li>
344
345 <li><a href="http://people.skolelinux.org/pere/blog/tags/valg">valg (6)</a></li>
346
347 <li><a href="http://people.skolelinux.org/pere/blog/tags/video">video (30)</a></li>
348
349 <li><a href="http://people.skolelinux.org/pere/blog/tags/vitenskap">vitenskap (1)</a></li>
350
351 <li><a href="http://people.skolelinux.org/pere/blog/tags/web">web (24)</a></li>
352
353 </ul>
354
355
356 </div>
357 <p style="text-align: right">
358 Created by <a href="http://steve.org.uk/Software/chronicle">Chronicle v4.4</a>
359 </p>
360
361 </body>
362 </html>