kontrola stranok

[Peterx]

Zdravim kazdeho, hladam nejaku utilitu, najlepsie z spustitelnu z command line, ktora dokaze otestovat ci nejaka stranka je funkcna. Nie ping, ale potrebujem zistit ci dana stranka naozaj funguje...

[8472]

co tak napr. http://specto.sourceforge.net/ ?

[MacHala]

curl, wget? ale vzdycky se muze stat, ze ti server posle stranku ala "Hledana stranka se na servru bohuzel nenaleza"... takze je potreba nejaky postprocessing

[Peterx]

Dik za odpoved, myslim ze curl bude pouzitelny.

[Peterx]

Takze specto je nepouzitelne, kedze sa s nim neda poslat ani len mail...
Skusal som curl, no tam mam problem s tym ze to vracia html kod a naviem ako napisat skript asi takyto:

curl www.stranka.nieco
ak na tej stranke najdes text tak ok ak nie tak...

[MacHala]

Kód: [Vybrat]

curl www.stranka.nieco | grep -q "hledany text" && echo "Text nalezen"

[Peterx]

Dik

[Peterx]

Tak a uz som natrafil na dalsi problem, aj ked sa tohoto netika.
Mam zoznam srtanok v textovom subore a napisal som si script:

Kód: [Vybrat]

cat zoznam | while read line; do curl $line; done
Vysledok je takyto:

Kód: [Vybrat]

'url: (6) Couldn't resolve host 'www.stranka.nieco
Vobec netusim kde sa vzalo to '

[MacHala]

az na umisteni toho apostrofu ve vypisu chyby to vypada uplne normalne... (spravne by to melo vypadat:

Kód: [Vybrat]

curl: (6) Couldn't resolve host 'www.stranka.nieco' )
mimochodem, proc mas v seznamu neexistujici domeny? jestli chces napriklad nejake domeny kupovat a chces zjistit, jestli jsou obsazene, tak tohle ti vubec nepomuze...

[Peterx]

To URL som tam napisal nezmyselne len sem, aby to niekoho neplietlo.
Uz som zistil ze chyba je v textovom subore, ale vobec netusim aka.

Chcel som to takto:
vytvorim textovy subor s adresamy

Kód: [Vybrat]

grep www. /adresar/subor1 | sed 's/^[ \t]*//;s/[ \t]*$//' >>/adresar/subor2
Potom:

Kód: [Vybrat]

cat /adresar/subor2 | while read line; do curl $line; done
A toto mi uz nefunguje.
Ked ale subor2 vytvorim manualne, cize napisem tam zoznam stranok, tak to funguje a vobec netusim pre co.

[Peterx]

Este prikladam subor, vie niekto co je na nom vadneho?

Kód: [Vybrat]

www.adminko.sk/ubuntu/l1.tar.gz

[MacHala]

windowsacke (crlf) konce radku, pouzij

Kód: [Vybrat]

cat soubor2 | sed 's/.$//' | while read line; do curl $line; done

[Peterx]

Prave som to zistil aj ja...
Dovod pre co ma to nenapadlo je ten ze mam iny skritp z ktorym takto vytvoreny subor funguje bez problemov.

[Peterx]

Namiesto curl sa nenajde nieco co dokaze overit funkcnost stranok. Problem s tym curl je taky ze ak ho pouzijem tak musim nieco na tej stranke hladat, ale ak mate niekolko 100 stranok co chcete skontrolovat tak to je problem. Co je horsie stranky su pisane od HTML, ASP, .NET az po PHP, takze je to problem..
Hladam nieco ako je T4eWebPing pod windowsami.

[MacHala]

takze ti vlastne zalezi na headru, jo?
zkus

Kód: [Vybrat]

wget --server-response http://www.seznam.cz/ -O /dev/null 2>&1 | head -20

[Peterx]

Tak to to uz je lepsie riesenie, aj ked nie dokonale
Idem skusat..

[Peterx]

Nie je to zle, postaci kym nenajdem lepsie, idealne by bolo nieco co dokaze nacitat stranku a ak sa ju podary nacitat do urcitej doby tak ok, ak nie tak je problem.

[MacHala]

jde to taky pomoci wgetu >> zkus man wget / utfg / projev vlastni iniciativu

[Peterx]

Man wget som skusil, no nie je tam nikde nic o tom ze ma pockat az sa stranka cela natiahne a nenasiel som tam ani u z toho co si pisal / utfg /.
Na linuxe som zaciatocnik a to co je pre niekoho samozrejme pre mna este nie je.
Ale aj tak dik za pomoc

[MacHala]

z man wget:

Kód: [Vybrat]

       -T vteřin
       --timeout=vteřin
           Nastavení časového limitu sítě na zadaný počet vteřin.  Je ekvivalentní společnému nastavení
           --dns-timeout, --connect-timeout a --read-timeout.

           Kdykoliv probíhá síťová operace, Wget může ověřovat prodlevu a operaci přerušit, pokud trvá příliš
           dlouho. Tak lze zabránit zamrznutí nebo nekonečným spojením.  Jediným časovým limitem, který je jako
           výchozí nastaven, je 900 vteřin na čtení.  Nastavením na 0 se vyřadí. Výchozí hodnotu je záhodno měnit
           pouze v případě, že skutečně víte, co děláte.

           Všechny volby týkající se časových limitů akceptují hodnoty v desítkové soustavě, včetně hodnot pod
           vteřinu. Např. 0.1 vteřin je platnou (ačkoliv nevhodnou) hodnotou.  Hodnoty pod vteřinu se hodí při
           testování časů odpovědi serveru nebo latence sítě.
utfg znamena "use the f*** google"

[Peterx]

Ta skratka je dobra, ale velky brat google mi v tom nepomohol a to som skusal dost

[MacHala]

a co ta citace z manualu wgetu? pripadne zkombinuj s http://www.root.cz/clanky/hratky-z-radky-navratove-hodnoty/ a libovolnym bash tutorialem

[Peterx]

jj, uz studujem, dik.

[mka]

Možná by pomohlo, kdyby ses s námi podělil o to - řečeno s majorem - čo také si predstavuješ pod pojmom funkčnost stránok. Třeba by ti pak někdo poradil lépe :-)

[Peterx]

Tak na toto je tazke odpovedat, mne ide o to aby som zistil nefunkcnost aj v pripade ze IIS nevrati chybu, ale stranka nie je funkcna dajme tomu pre to ze nema dostupnu databazu.