Majordomo problém

Dne 2016-10-24 23:48 Upraveno 2016-10-25 00:04

Zdravím,
Máte Majordomo nastavené, tak aby Vám soubory ukládalo na SD kartu? Ze začátku po měsíci/dvou mi po nechtělo načíst rychle, ale načetlo to do +- 5 min. Dnes jsem to zkoušel znova a také jsem vyzkoušel jsem soubory přenést na USB flashku a nastavit, aby to soubory ukládalo na flashku a měl jsem ten stejný problém. Po XY pokusů (vč. 2 restartů routeru) se mi to konečně povedlo načíst i z flashky, ale trvá to 5min, někdy déle a někdy vůbec. ( Takže jsem to nemusel přesouvat na SD kartu. :sad:

)
Moje DB má momentálně 105 MB, ale troufnu si říct, že 5 min na to čekat je dlouhá doba :wink:

V htopu je možné vidět vytížení CPU jednoho/dvou jáder pro www/cgi-bin/luci ( https://ctrlv.cz/shots/2016/10/25/GGc7.png a https://ctrlv.cz/shots/2016/10/25/NwZJ.png)

Bylo by dobré, kdyby nám někdo poradil, co s tím :lol:

Od commar

Dne 2016-10-25 07:08 Upraveno 2016-10-25 07:15

Já mám Majordoma taky na SD kartě, ale nic podobného nepamatuji...
Načtení je skoro okamžité, DB mám jen 17MB.
Já ale mám nastavené mazání, protože více jak měsíc staré výsledky jsou mi na nic.
Takže teď tam mám jen 9/2016 a 10/2016.
Nemáte tam nějakou hodně pomalou kartu?

EDIT:

turris ~ # hdparm -tT /dev/mmcblk0

/dev/mmcblk0:
 Timing cached reads:   1228 MB in  2.00 seconds = 613.77 MB/sec
 Timing buffered disk reads:  48 MB in  3.07 seconds =  15.62 MB/sec

Od Pepe

Dne 2016-10-25 10:54

Samsung 16GB Evo

root@Turris:~# hdparm -tT /dev/mmcblk0

/dev/mmcblk0:
Timing cached reads: 1186 MB in 2.00 seconds = 592.55 MB/sec
Timing buffered disk reads: 54 MB in 3.00 seconds = 17.99 MB/sec

Sandisk Cruzer Extreme 32GB

root@Turris:~# hdparm -tT /dev/sda1

/dev/sda1:
Timing cached reads: 1198 MB in 2.00 seconds = 598.93 MB/sec
Timing buffered disk reads: 374 MB in 3.01 seconds = 124.13 MB/sec

Dělá mi to na obou i po přesunu z SD na flashku. Jak píši, takže jsem si vůbec nepomohl.

Od habanr

Dne 2016-10-25 11:49 Upraveno 2016-10-25 11:51

Problém může být skutečně způsoben pomalou flash pamětí. Váš test testoval velké bloky 1GB a 54MB a to ještě levné flashky zvládnou. Problém nastává s malými soubory o velikosti pár byte nebo kilobyte jak je tomu u databáze Majordomo (soubory jsou většinou 400B - 40KB)

Moje flash je SanDisk Ultra Fit USB 3.0 32GB
root@router:/mnt/sda1/majordomo_db$ hdparm -tT /dev/sda1

/dev/sda1:
Timing cached reads: 1362 MB in 2.00 seconds = 681.06 MB/sec
Timing buffered disk reads: 158 MB in 3.02 seconds = 52.25 MB/sec

Od Pepe

Dne 2016-10-26 13:01

Flashka nebyla zrovna úplně levná. Neříkejte mi, že 116 souborů, které mají dohromady 113 MB se načítají +-5 min.

Od MZagora

Dne 2016-10-26 12:54

Co to zkousim, tak mam podobny problem...
Prvotne jsem historii nastavil asi dost optimisticky:
Number of stored hourly files: 744
Number of stored daily files: 365
Number of stored monthly files: 24
cimz jsem se dostal do stavu, ze DB (ulozena na externim disku) ma 400MB a majordomo se nezobrazi.
Kdyz jsem ted umazal soubory obsahujici *2014* + *2015*, cimz jsem ponechal jen letosni historii, tak za nejake minuty cekani se statistika zobrazi.
Rekl bych, ze problem je, ze ta uvodni stranka (Statistiky / Majordomo) nacita celou historii a neni tam tabulka treba za aktualni mesic/dva a treba sipka dalsi...

Od MZagora

Dne 2016-10-26 14:02 Upraveno 2016-10-26 14:04

Jeste co jsem to zprovoznil a po delsi dobe se divam na statistiky, tak tento mesic (prvne - historicky to tam neni) se mi tam strida hodne (desitky radku) zarizeni se stejnym zacatkem MAC a ruznym koncem - co to muze byt zarizeni? Nemuze to byt nejaky utok?
Nahled statistiky: http://pasteboard.co/jBUqhwQNy.png
M.

Od Milosh

Dne 2016-10-27 08:06

Nějaké nové zařízení v síti? Jestli ne, tak ověřit jestli někdo neprolomil (neuhodl) heslo na wifi. Případně si na to zařízení počíhat a ve chvíli kdy se něco takového objeví, tak zjistit IP adresu a proskenovat porty a zkusit se na to připojit.

Od MZagora

Dne 2016-10-27 10:26

Prave me zarazi *tolik* novych zarizeni v siti jen lisici se MAC na konci... Tak nevim, jestli to muze delat nejake regulerni jedno zarizeni (nechapu proc by menilo MAC) nebo jde o utok...

Od Jerry

Dne 2016-10-27 10:29

Vypadá to, že InPro Comm patří pod Mediatek - takže zařízení s čipy od Mediateku .....

Od MZagora

Dne 2016-10-27 10:45

Jj, ted se divam a mam tam 3 *zname* (v DHCP static leases) - android(/mediatek) telefony s MAC 00:08:22:*, ale ty snad MAC nemeni..., neco IOT jak je zmineno nize take nemam..., tak zatim nevim, co to dela...

Od Milosh

Dne 2016-10-27 10:30

No klidně to může být jedno zařízení (třeba nějaké IOT udělátko), které nemá MAC adresu pevnou, ale po keždém restartu si to zvolí náhodnou adresu ze svého rozsahu (docela čuňačina, ale pro výrobce je to jednoduché v tom, že nemusí napevno vypalovat MAC adresy).

Od Milosh

Dne 2016-10-27 10:31

Jo s tím mám stejný problém. Taky jsem se po nějaké době nedočkal statistik, tak jsem to omezil na 2 měsíce.