|
Web Monitor - archiwizacja danych
|
| Piecz |
Dodano 19-04-2013 21:16
|
User
Posty: 56
Dołączył: 24/12/2012 14:01
|
Witajcie, mam HotSpot czy w Tomato można zrobić tak, żeby aktualne dane widoczne w web monitorze, były zapisywane do pliku na Pendrive usb, tak żeby po restarcie był do nich dostęp lub, żeby zapisywane było na bieżąco archiwum. Tak żeby w razie czego mieć takie dane... ? |
| |
|
|
| Marco76 |
Dodano 19-04-2013 21:30
|
Super User
Posty: 433
Dołączył: 08/03/2007 19:47
|
Próbowałem niedawno rozgryźć temat i nie udało się - dane z WebMonitor lądują gdzieś w /proc i po restarcie znikają.
Pozostaje zainteresować się skryptem urlsnarf.
[small] Pozdrawiam, Monter
Asus RT-N18 + FreshTomato 2019.3 K26ARM USB AIO-64K-NOSMP + ILHM v2
HTPC Chieftec FLYER FI-02BC-U3 + GA-H61N-USB3 + i3-3225 + 4GB RAM + LibreELEC + Xbox DVD Remot |
| |
|
|
| drawsko |
Dodano 20-04-2013 17:06
|
Power User
Posty: 249
Dołączył: 06/07/2011 07:31
|
Dane z Web monitor są zapisywane w:
/proc/webmon_recent_domains new_domains
/proc/webmon_recent_searches new_searches
Pliki można skopiować na pendrive za pomocą harmonogramu np. o godz. 24:00, ale nie wiem jak skasować zawartość (pliki są tylko do odczytu). Z poziomu www można skasować zawartość obu plików za pomocą przycisku Clear, która wywołuje funkcję js clearLog. Gdyby można było wywołać ww. funkcję z poziomu ssh byłaby bajka :) tj. kopiujemy, kasujemy i mamy logi z danego dnia.
Kiedyś tak to rozwiązałem http://openlinksys.info/forum/viewthr...d_id=13219 ale z biegiem czasu okazało się bezsensowne -> strasznie obciążało router.
co do urlsnarf nie loguje ruchu https :/ |
| |
|
|
| Piecz |
Dodano 20-04-2013 21:08
|
User
Posty: 56
Dołączył: 24/12/2012 14:01
|
szkoda, bo w przypadku hotspota dobrze byłoby trzymać takie dane, choćby dla tfu tfu Policji ... gdyby coś.....
Apropos , czy mając free hot spot, nie mam takiego obowiązku ??? |
| |
|
|
| belliash |
Dodano 20-04-2013 21:22
|
Moderator
Posty: 730
Dołączył: 17/08/2010 08:53
|
No raczej masz... Ew Ty odpowiesz za wszystko jako wlasciciel lacza.
Linksys WRT1900AC: OpenWrt 19.07.2
Jetway JC390F841AA34B: OpenWrt 19.07.2
|
| |
|
|
| labik |
Dodano 20-04-2013 21:39
|
Power User
Posty: 387
Dołączył: 16/09/2011 08:08
|
@belliash ma rację to jest tzw.dupochron dla Ciebie.Pewnie Twój dostawca i tak archiwizuje połączenia z łącza i o ile mnie pamięć nie myli archiwizuje je na 5 lat ale tu się mogę mylić i siać herezję.Ktoś narozrabia Ty się będziesz tłumaczył.
Asus TUF AX5400
Asus RT-AC68U
|
| |
|
|
| Marco76 |
Dodano 21-04-2013 01:44
|
Super User
Posty: 433
Dołączył: 08/03/2007 19:47
|
No świetnie, tylko na co Ci same domeny bez pełnych ścieżek $_GET ? Myślę, że w odniesieniu do obowiązku archiwizacji poczynań użytkowników w sieci te "logi" są delikatnie mówiąc bezużyteczne i nadal w to miejsce proponowałbym coś w stylu urlsnarf.
[small] Pozdrawiam, Monter
Asus RT-N18 + FreshTomato 2019.3 K26ARM USB AIO-64K-NOSMP + ILHM v2
HTPC Chieftec FLYER FI-02BC-U3 + GA-H61N-USB3 + i3-3225 + 4GB RAM + LibreELEC + Xbox DVD Remot |
| |
|
|
| maciej2 |
Dodano 21-04-2013 12:26
|
Super User
Posty: 418
Dołączył: 19/12/2010 16:35
|
A nie prościej z logów routera wyciągnąć ip i potem je zapisać do pliku.
Tylko tak jak pisze @Marco76 nie będzie pełne url.
ASUS RT-AC66U v B1 - Asuswrt-Merlin
ASUS WL-500gP v2 - FreshTomato
|
| |
|
|
| johnny86 |
Dodano 21-04-2013 19:11
|
User
Posty: 128
Dołączył: 02/11/2009 09:09
|
Skoro jesteśmy przy urlsnarf
Czy do instalacji wymagany jest OptWare?
|
| |
|
|
| Pirek |
Dodano 21-04-2013 21:04
|
Power User
Posty: 293
Dołączył: 12/06/2006 01:35
|
http://openlinksys.info/forum/viewthr...rowstart=0
Asus RT-N16 [B4] Tomato v1.28 K26 USB K26 123 EN-AIO
|
| |
|
|
| sebek75 |
Dodano 25-04-2013 18:21
|
User
Posty: 22
Dołączył: 26/06/2012 09:07
|
Witam, też się głowię na tym tematem.
Mi wystarczy webmon w tej formie z domenami, wymyśliłem sobie że wykonam codzienną kopię plików o północy i wyczyszczę logi. Gdzieś na jakimś forum znalazłem coś takiego:
iptables -t filter -D web_monitor 1 >/dev/null 2>&1
iptables -t filter -A web_monitor -j RETURN >/dev/null 2>&1
iptables -t filter -A web_monitor -m webmon --clear_domain >/dev/null 2>&1
Nie bardzo wiem jak to działa, ale działa - logi się czyszczą.
Tylko powstaje mi kolejny problem, bo pomimo ustawienia zapisywania 2000 wierszy logów, to po skasowaniu logów skryptem, zapisuje mi się domyślnie 300 wierszy, jakby ustawienia się kasowały.
1. Czy można jakoś poprzez skrypt sterować ustawieniami webmon, albo lepszą procedurę czyszczenia logów, co nie kasuje ustawień?
Używam też testowo urlsnarf, działa w porządku, ustawiłem rejestrowanie sieci gościnnej br1.
2. Czy można równocześnie zapisywać sieci br0 i br1 do jednego pliku, czy trzeba uruchomić 2 instancje urlsnarf i zapisywać do 2 różnych plików?
Edytowany przez sebek75 dnia 25-04-2013 18:30
Netgear WNR3500L v2 + Tomato 115 PL AIO
|
| |
|
|
| drawsko |
Dodano 25-04-2013 20:43
|
Power User
Posty: 249
Dołączył: 06/07/2011 07:31
|
Zobacz sobie wynik polecenia
iptables -L | grep domains
Daj linka skąd znalazłeś "coś takiego"
edit...
u mnie nie resetuje się ilość wierszy ?
Edytowany przez drawsko dnia 25-04-2013 20:54
|
| |
|
|
| sebek75 |
Dodano 25-04-2013 22:04
|
User
Posty: 22
Dołączył: 26/06/2012 09:07
|
Otrzymuję:
RETURN tcp -- anywhere anywhere WEBMON --max_domains 5000 --max_searches 500
a faktycznie webmon rejestruje mi 300 ostatnich domen na podglądzie i w pliku.
te polecenia wyrwałem z kontekstu stąd:
https://openwrt.org.cn/browser/backfi...it?rev=250
Czekam na mądrzejszych którzy coś poradzą w tej kwestii :)
Netgear WNR3500L v2 + Tomato 115 PL AIO
|
| |
|
|
| drawsko |
Dodano 25-04-2013 23:47
|
Power User
Posty: 249
Dołączył: 06/07/2011 07:31
|
jakby ktoś chciał powalczyć z tematem: http://repo.or.cz/w/tomato.git?a=sear...eb+monitor |
| |
|
|
| Marco76 |
Dodano 26-04-2013 15:26
|
Super User
Posty: 433
Dołączył: 08/03/2007 19:47
|
Cytat jakby ktoś chciał powalczyć z tematem:
Ktoś mnie wołał?  
Tu nie ma z czym walczyć. Po prostu Web Monitor w Tomato różni się trochę budową i obsługą od tego samego narzędzia wbudowanego w inne firmware, dlatego wymaga innej składni poleceń.
Niemal gotowe rozwiązanie prezentuję tutaj. Pozostaje napisać sobie skrypt robiący żądane rzeczy automatycznie
[small] Pozdrawiam, Monter
Asus RT-N18 + FreshTomato 2019.3 K26ARM USB AIO-64K-NOSMP + ILHM v2
HTPC Chieftec FLYER FI-02BC-U3 + GA-H61N-USB3 + i3-3225 + 4GB RAM + LibreELEC + Xbox DVD Remot |
| |
|
|
| drawsko |
Dodano 26-04-2013 20:50
|
Power User
Posty: 249
Dołączył: 06/07/2011 07:31
|
dzięki
popraw dev/null 2&>1 na dev/null 2>&1
jak wywołać skrypt np o 23:59:50 ?
Edytowany przez drawsko dnia 26-04-2013 20:56
|
| |
|
|
| Marco76 |
Dodano 26-04-2013 20:58
|
Super User
Posty: 433
Dołączył: 08/03/2007 19:47
|
Dzięki, literówka.
Jak to jak - wkleić polecenie w pole Custom narzędzia Scheduler i ustalić odpowiedni czas uruchomienia. Niestety, w Cronie nie ma dostępu do sekund, więc jedna minuta nam odpadnie (chyba, żeby wynik dopisywać do poprzedniego i robić sort | uniq.
[small] Pozdrawiam, Monter
Asus RT-N18 + FreshTomato 2019.3 K26ARM USB AIO-64K-NOSMP + ILHM v2
HTPC Chieftec FLYER FI-02BC-U3 + GA-H61N-USB3 + i3-3225 + 4GB RAM + LibreELEC + Xbox DVD Remot |
| |
|
|
| drawsko |
Dodano 26-04-2013 21:07
|
Power User
Posty: 249
Dołączył: 06/07/2011 07:31
|
Cytat Marco76 napisał(a):
Dzięki, literówka.
Jak to jak - wkleić polecenie w pole Custom narzędzia Scheduler i ustalić odpowiedni czas uruchomienia. Niestety, w Cronie nie ma dostępu do sekund, więc jedna minuta nam odpadnie (chyba, żeby wynik dopisywać do poprzedniego i robić sort | uniq.
ale w harmonogramie jest tylko 23:45 :/ wystarczyło by 23.59
kiedyś tak robiłem tj. sort + unique ale po dłuższym czasie operacje te bardzo mocno i długo obciążały cpu (duże pliki do przerobienia)
Połączony z 26 kwiecień 2013 21:23:41:
już ogarnąłem
cru a webmon.sh "59 23 * * * /tmp/mnt/dane/webmon.sh"
Edytowany przez drawsko dnia 26-04-2013 21:23
|
| |
|
|
| Marco76 |
Dodano 29-04-2013 12:34
|
Super User
Posty: 433
Dołączył: 08/03/2007 19:47
|
Mówisz - masz W nadchodzącej wersji v109 pola Custom w Schedulerze mają na liście godzin uruchamiania także pozycje 0:01 oraz 23:59
[small] Pozdrawiam, Monter
Asus RT-N18 + FreshTomato 2019.3 K26ARM USB AIO-64K-NOSMP + ILHM v2
HTPC Chieftec FLYER FI-02BC-U3 + GA-H61N-USB3 + i3-3225 + 4GB RAM + LibreELEC + Xbox DVD Remot |
| |
|
|
| sebek75 |
Dodano 29-04-2013 13:38
|
User
Posty: 22
Dołączył: 26/06/2012 09:07
|
Dzięki Marco76 dobra robota :)
U mnie samo polecenie czyszczące logi:
"iptables -t filter -A monitor -m webmon --clear_search --clear_domain > /dev/null 2>&1"
działało, ale po tym zapisywało się domyślnie 300 wierszy, mimo zwracania poprawnych wartości przez "iptables -t filter -L | grep domains"
dopiero dodanie wiersza poniższego, załatwiło sprawę i teraz zapisuje mi wierszy ile chcę i ile mam zdefiniowane
"service logging-restart restart"
Netgear WNR3500L v2 + Tomato 115 PL AIO
|
| |
|
' target='_blank'>Link
