AQ-Burk

Ilmanlaatusensorit keräävät tietoa ilman pienhiukkasista (PM10 ja PM2.5) ja lähettävät tiedot noin kerran minuutissa LoRaWAN-verkon kautta palvelimelle, jossa ne tallennetaan InfluxDB-tietokantaan. Tietokannasta CSV-tiedostoon dumpattu data näyttää tältä:

time,readable_time,gas,humi,pm10avg,pm10max,pm10med,pm10min,pm25avg,pm25max,pm25med,pm25min,pres,rssi,temp,dev-id
1551398379631,2019-02-28T23:59:39.631000Z,721.2,16.5,0.1,0.2,0.2,0.1,0.1,0.2,0.1,0.1,1001.3,-83,22.4,373773207E33011C
1551398381476,2019-02-28T23:59:41.476000Z,1985.1,52.8,2.6,4.1,2.4,1.1,0.8,1,0.8,0.6,997.8,-86,-3,373773207E330109
1551398382884,2019-02-28T23:59:42.884000Z,682.9,48.1,1.2,3.6,0.9,0.4,0.4,0.5,0.4,0.3,1003,-80,-1.4,373773207E330118
1551398386088,2019-02-28T23:59:46.088000Z,3558.2,43.6,1.5,3.9,1.1,0.6,0.4,0.6,0.5,0.4,1002.4,-84,-1,373773207E330106
1551398389164,2019-02-28T23:59:49.164000Z,2290.7,39.2,1.4,2.7,1.3,0.7,0.5,0.7,0.5,0.5,1000.5,-103,-0.7,373773207E330105
1551398391988,2019-02-28T23:59:51.988000Z,172.7,31.7,2.2,4.3,2.3,0.8,0.9,1.1,0.9,0.8,1001.4,-67,3,373773207E330111
1551398393730,2019-02-28T23:59:53.730000Z,1052.6,48.7,1.7,2.9,2,0.5,0.6,0.8,0.6,0.5,988.5,-112,-2.1,373773207E330101
1551398394856,2019-02-28T23:59:54.856000Z,1306.2,33.3,0.9,1.6,1,0.4,0.3,0.4,0.3,0.2,1001.4,-111,7.6,373773207E33010B
1551398395959,2019-02-28T23:59:55.959000Z,195.7,57.6,1.6,2.2,1.7,0.8,0.8,1.1,0.9,0.7,1001,-90,-2.3,373773207E33011B
1551398397483,2019-02-28T23:59:57.483000Z,2800,43.5,1.8,2.4,1.8,1.5,1.4,1.6,1.4,1.4,999.4,-107,0.8,373773207E330113

Joskus sensoridatassa on virheitä, jotka pitää siivota pois ennen datan jatkokäyttöä. Alla olevassa kuvassa näkyy lyhytaikaisia piikkejä, jotka pitäisi poistaa ennen esimerkiksi tuntikeskiarvon laskemista.
Purkin 0103 dataa grafanassa

Dataa voi selata Grafana-käyttöliittymässä.

Tehtävä

Tee ohjelma, joka

  1. siivoaa lyhytkestoiset piikit datasta
  2. laskee tuntikeskiarvon
Ohjelma voi olla tehty esimerkiksi R- tai Python-kielellä ja se liitetään vastaukseen.

Jos havaitset datassa jotain muuta mielenkiintoista, niin voit liittää nämä havainnot ja mahdolliset johtopäätökset mukaan vastaukseen.

Lisätietoja:

Datan voi ladata CSV-muodossa näistä linkeistä:

Kuva datasta pidemmältä ajalta:
Purkin 0103 dataa grafanassa