Povremeno se forum jako uspori.

Bug #614512 reported by webmasteryoda
10
This bug affects 2 people
Affects Status Importance Assigned to Milestone
Ubuntu-rs Forum
Fix Released
Critical
Slobodan Terzić

Bug Description

Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i normalno s obzirom na srpski hosting, ali nekad jako sporo.

Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s tim...

Revision history for this message
Slobodan Terzić (githzerai) wrote :

Na šta tačno ciljaš u postavkama MySQLa?

Da nije do otvaranja samo pojedinih tema?

Revision history for this message
Petar Vasić (p-vasic) wrote :

Githz,

Izgleda da ima neki problem sa wio.php. Pogledaj resource tracking u Chrome-u. Ta skripta non-stop radi requestove i vuče nešto, moguće da to usporava forum kada ga koristi više korisnika.

Revision history for this message
webmasteryoda (bane-grbic) wrote : Re: [Bug 614512] Re: Povremeno se forum jako uspori.

Pa MySQL ima opciju da optimizuje server prema potrebi korisnika. Tako se i
razlikuju verzije MySQLa. Postoji na primer lite verzija koja odrađuje
posao, ali nije zgodna za masivniji saobraćaj. Ali sumnjam da bi provajder
dozvolio da se modifikuju te opcije. Čak mislim da je to nemoguće.

Trebalo bi nekako ispitati koliko saobraćaja naš sajt može da podnese.
Nekako da se to testira, čisto da znamo svoja ograničenja.

2010/8/6 Petar Vasić <email address hidden>

> Githz,
>
> Izgleda da ima neki problem sa wio.php. Pogledaj resource tracking u
> Chrome-u. Ta skripta non-stop radi requestove i vuče nešto, moguće da to
> usporava forum kada ga koristi više korisnika.
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a direct subscriber
> of the bug.
>
> Status in Serbian LoCo's forum: New
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
> To unsubscribe from this bug, go to:
> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomputers.co.rs/
http://www.mindstorming.ws/
http://www.kulawireless.net/
http://www.kula.rs/

Revision history for this message
Slobodan Terzić (githzerai) wrote :

wio.php je (who-is-online) je skripta koja redovno osvežava „Ko je na vezi“. U toku testiranja nije pokazala ni najmanje naznake da preoptererćuje forum, međutim testiranje je jedno, praksa drugo.
Ako ima nekih konkretnih podataka o tome da baš ona značajno opterećuje forum, može da se isključi/zameni.

Što se tiče podešavanja servera, imamo pun pristup svim potrebnim fajlovima, uključujući my.cnf, php.ini i http.conf.
U toku testiranja smo imali problem sa tim da forum baš značajno uspori, što je bio problem manjka hardverskih resursa, nakon čega smo zatražili i dobili više CPUa i memorije. Po nadogradnji nismo imali slične probleme, ali je i dalje ostalo pitanje da li je to dovoljno.

Neke sitnije probleme rešavamo u letu, recimo danas je bio problem sa „max_connections =“ za MySQL koji je bio premali.

Treba imati u vidu da se na forumu još uvek opsežno radi (administracija) i da to može imati značajan uticaj na brzinu foruma u pojedinim momentima.

Takođe, sada je na forumu gužva i navala zbog redizajna i nove platforme, što bi svi da vide. Realne potrebe se mogu testirati tek naknadno, kada navala prođe.

Ne znam koliko pretraživački botovi (i 404 strane) mogu imati uticaj na to?

Sve sugestije dobrodošle.

Revision history for this message
webmasteryoda (bane-grbic) wrote :

Aj stavi negde phpinfo da vidim ili ga kopiraj ovde...

2010/8/7 Slobodan Terzić <email address hidden>

> wio.php je (who-is-online) je skripta koja redovno osvežava "Ko je na
> vezi". U toku testiranja nije pokazala ni najmanje naznake da preoptererćuje
> forum, međutim testiranje je jedno, praksa drugo.
> Ako ima nekih konkretnih podataka o tome da baš ona značajno opterećuje
> forum, može da se isključi/zameni.
>
> Što se tiče podešavanja servera, imamo pun pristup svim potrebnim
> fajlovima, uključujući my.cnf, php.ini i http.conf.
> U toku testiranja smo imali problem sa tim da forum baš značajno uspori,
> što je bio problem manjka hardverskih resursa, nakon čega smo zatražili i
> dobili više CPUa i memorije. Po nadogradnji nismo imali slične probleme, ali
> je i dalje ostalo pitanje da li je to dovoljno.
>
> Neke sitnije probleme rešavamo u letu, recimo danas je bio problem sa
> "max_connections =" za MySQL koji je bio premali.
>
> Treba imati u vidu da se na forumu još uvek opsežno radi
> (administracija) i da to može imati značajan uticaj na brzinu foruma u
> pojedinim momentima.
>
> Takođe, sada je na forumu gužva i navala zbog redizajna i nove
> platforme, što bi svi da vide. Realne potrebe se mogu testirati tek
> naknadno, kada navala prođe.
>
> Ne znam koliko pretraživački botovi (i 404 strane) mogu imati uticaj na
> to?
>
> Sve sugestije dobrodošle.
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a direct subscriber
> of the bug.
>
> Status in Serbian LoCo's forum: New
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
> To unsubscribe from this bug, go to:
> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomputers.co.rs/
http://www.mindstorming.ws/
http://www.kulawireless.net/
http://www.kula.rs/

Revision history for this message
Slobodan Terzić (githzerai) wrote :

Nakon dodatnih ispitivanja problema utvrđeno je da forum ima probleme svakog dana u periodu od 12.30 do 13.30 časova, što može samo značiti da postoji neka skripta (cronjob) koja na dnevnom nivou obavlja radnje koje dovode do usporenja celokupnog servera.

Dalje rešavanje problema nastavljamo u saradnji sa našim hosting provajderom.

Changed in ubuntu-rs-forum:
status: New → Confirmed
importance: Undecided → High
assignee: nobody → Milan Prvulović (prvul)
assignee: Milan Prvulović (prvul) → Slobodan Terzić (githzerai)
Revision history for this message
webmasteryoda (bane-grbic) wrote :

Heh

Pa to je onda do provajdera. Nema šta. Neka pomere tu skriptu negde iza
ponoći. Recimo od 4 do 5h. To bi bilo najbolje.

2010/8/9 Slobodan Terzić <email address hidden>

> Nakon dodatnih ispitivanja problema utvrđeno je da forum ima probleme
> svakog dana u periodu od 12.30 do 13.30 časova, što može samo značiti da
> postoji neka skripta (cronjob) koja na dnevnom nivou obavlja radnje koje
> dovode do usporenja celokupnog servera.
>
> Dalje rešavanje problema nastavljamo u saradnji sa našim hosting
> provajderom.
>
> ** Changed in: ubuntu-rs-forum
> Status: New => Confirmed
>
> ** Changed in: ubuntu-rs-forum
> Importance: Undecided => High
>
> ** Changed in: ubuntu-rs-forum
> Assignee: (unassigned) => Milan Prvulović (prvul)
>
> ** Changed in: ubuntu-rs-forum
> Assignee: Milan Prvulović (prvul) => Slobodan Terzić (githzerai)
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a direct subscriber
> of the bug.
>
> Status in Serbian LoCo's forum: Confirmed
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
> To unsubscribe from this bug, go to:
> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomputers.co.rs/
http://www.mindstorming.ws/
http://www.kulawireless.net/
http://www.kula.rs/

Revision history for this message
webmasteryoda (bane-grbic) wrote :

evo ga opet.... sad je trenutak da zovemo provajdera

2010/8/9 Bane Grbic <email address hidden>

> Heh
>
> Pa to je onda do provajdera. Nema šta. Neka pomere tu skriptu negde iza
> ponoći. Recimo od 4 do 5h. To bi bilo najbolje.
>
> 2010/8/9 Slobodan Terzić <email address hidden>
>
> Nakon dodatnih ispitivanja problema utvrđeno je da forum ima probleme
>> svakog dana u periodu od 12.30 do 13.30 časova, što može samo značiti da
>> postoji neka skripta (cronjob) koja na dnevnom nivou obavlja radnje koje
>> dovode do usporenja celokupnog servera.
>>
>> Dalje rešavanje problema nastavljamo u saradnji sa našim hosting
>> provajderom.
>>
>> ** Changed in: ubuntu-rs-forum
>> Status: New => Confirmed
>>
>> ** Changed in: ubuntu-rs-forum
>> Importance: Undecided => High
>>
>> ** Changed in: ubuntu-rs-forum
>> Assignee: (unassigned) => Milan Prvulović (prvul)
>>
>> ** Changed in: ubuntu-rs-forum
>> Assignee: Milan Prvulović (prvul) => Slobodan Terzić (githzerai)
>>
>> --
>> Povremeno se forum jako uspori.
>> https://bugs.launchpad.net/bugs/614512
>> You received this bug notification because you are a direct subscriber
>> of the bug.
>>
>> Status in Serbian LoCo's forum: Confirmed
>>
>> Bug description:
>> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
>> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>>
>> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
>> tim...
>>
>> To unsubscribe from this bug, go to:
>> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>>
>
>
>
> --
> <email address hidden>
>
> http://banegrbic.blogspot.com/
> http://www.facebook.com/bane.grbic/
>
> http://www.linkcomputers.co.rs/
> http://www.mindstorming.ws/
> http://www.kulawireless.net/
> http://www.kula.rs/
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomputers.co.rs/
http://www.mindstorming.ws/
http://www.kulawireless.net/
http://www.kula.rs/

Revision history for this message
Punky (pyntux) wrote :

Samo polako, radi se na resavanju problema, molim za strpljenje.... :)

Revision history for this message
webmasteryoda (bane-grbic) wrote :

c c c

Kakvo bre strpljenje..... vidiš da kriziramo. Nema foruma.... šta da radim
sada u sred ponoći... :)

On Mon, Aug 9, 2010 at 11:43 PM, Punky <email address hidden> wrote:

> Samo polako, radi se na resavanju problema, molim za strpljenje.... :)
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a direct subscriber
> of the bug.
>
> Status in Serbian LoCo's forum: Confirmed
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
> To unsubscribe from this bug, go to:
> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomputers.co.rs/
http://www.mindstorming.ws/
http://www.kulawireless.net/
http://www.kula.rs/

Revision history for this message
Milan Prvulović (prvul-deactivatedaccount) wrote :

Zamolio bih vas da ove stranice ne koristite za beskorisne komentare, ako
vam je dosadno imate irc!

2010/8/9 webmasteryoda <email address hidden>

> c c c
>
> Kakvo bre strpljenje..... vidiš da kriziramo. Nema foruma.... šta da radim
> sada u sred ponoći... :)
>
> On Mon, Aug 9, 2010 at 11:43 PM, Punky <email address hidden> wrote:
>
> > Samo polako, radi se na resavanju problema, molim za strpljenje.... :)
> >
> > --
> > Povremeno se forum jako uspori.
> > https://bugs.launchpad.net/bugs/614512
> > You received this bug notification because you are a direct subscriber
> > of the bug.
> >
> > Status in Serbian LoCo's forum: Confirmed
> >
> > Bug description:
> > Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> > normalno s obzirom na srpski hosting, ali nekad jako sporo.
> >
> > Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> > tim...
> >
> > To unsubscribe from this bug, go to:
> > https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
> >
>
>
> --
> <email address hidden>
>
> http://banegrbic.blogspot.com/
> http://www.facebook.com/bane.grbic/
>
> http://www.linkcomputers.co.rs/
> http://www.mindstorming.ws/
> http://www.kulawireless.net/
> http://www.kula.rs/
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a member of Ubuntu-rs
> administrators, which is subscribed to Ubuntu-rs forum.
>
> Status in Serbian LoCo's forum: Confirmed
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
>
>

Revision history for this message
Punky (pyntux) wrote :

Yoda, molim te, za svaki problem po jedan topic na LP! :D

2010/8/9 webmasteryoda <email address hidden>

> c c c
>
> Kakvo bre strpljenje..... vidiš da kriziramo. Nema foruma.... šta da radim
> sada u sred ponoći... :)
>
> On Mon, Aug 9, 2010 at 11:43 PM, Punky <email address hidden> wrote:
>
> > Samo polako, radi se na resavanju problema, molim za strpljenje.... :)
> >
> > --
> > Povremeno se forum jako uspori.
> > https://bugs.launchpad.net/bugs/614512
> > You received this bug notification because you are a direct subscriber
> > of the bug.
> >
> > Status in Serbian LoCo's forum: Confirmed
> >
> > Bug description:
> > Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> > normalno s obzirom na srpski hosting, ali nekad jako sporo.
> >
> > Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> > tim...
> >
> > To unsubscribe from this bug, go to:
> > https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
> >
>
>
> --
> <email address hidden>
>
> http://banegrbic.blogspot.com/
> http://www.facebook.com/bane.grbic/
>
> http://www.linkcomputers.co.rs/
> http://www.mindstorming.ws/
> http://www.kulawireless.net/
> http://www.kula.rs/
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a member of Ubuntu-rs
> administrators, which is subscribed to Ubuntu-rs forum.
>
> Status in Serbian LoCo's forum: Confirmed
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
>
>

Revision history for this message
Slobodan Terzić (githzerai) wrote :

I ja bih zamolio za strpljenje. Problem svakako postoji, i manifestuje se tako što u nepravilnim vremeskim intervalima server naglo počinje da puni memoriju, zatim pređe na swap dok na kraju potpuno ne zaguši sav saobraćaj na serveru do te mere da ni na koji način nije moguće pristupiti.
Pokušali smo na svaki nama poznat način da ograničimo dolazni saobraćaj, tačnije broj dolaznih konekcija, ali evidentno nije do toga jer se server "zaglupeo" u trenutku dok je na forumu bilo ukupno 10 članova, 5 gostiju i 5 pretraživačkih botova, što je prema svim standardima izuzetno nisko ( neki prosek u toku dan je oko 50ak posedilaca, što ljudkih što pretraživačkih, i za to vreme se se server ponaša sasvin normalno, vrlo je brz i odzvian uz 30ak%opterećenja procesora 70% rama i 10% swapa - hardverski resursi su knap).

Kontaktirali smo provajdera i saradnji sa njima pokušavamo da otkrijemo uzrok problema. zasad se sumlja na:
1. Serversku bubu
2. (D)DoS napad
3. Loše postavke servera

Na ovo poslednje ponajpre sumnjamo, mada su i ovako postavke krajnje konzervativne (srezali smo sve na četvrtinu preporučenog iz priručnika za Apač).

Još jednom, molim za strpljenje. Za ovaj uvodni period po prelasku na novi server smo i mogli očekivati probleme.
Možda ne ovoliko drastične i hronične, ali teži se i radi se na tome da se problemi isprave.

Changed in ubuntu-rs-forum:
importance: High → Critical
Revision history for this message
webmasteryoda (bane-grbic) wrote :
Download full text (3.2 KiB)

Githzerai...

Da li je taj server dedicated samo za nas ili ga delimo sa još nekim? Gde se
nalazi taj server? Da li imamo punu administraciju servera ili nešto što je
ograničio inet provajder? Da li postoji neki local queue kod provajdera na
drugom ruteru? Da li ste pokušali da izmerite granični protok u smislu
bandwitha i max. broja paketa ka serveru sa nekog brzog servisa? Da li
postoje neki log fajlovi koji bi mogli da se pogledaju (naravno mislim na
Apache)? Neki error.log, itd? Jeste li probali traceroute da vidite kuda sve
idu paketi do našeg sajta?

Sve se to može proveriti, neke stvari čak i bez internet provajdera. Gore
navedena pitanja su postavljena haotično jer neznam na koji način je sajt
hostovan. Pa ipak, smatram da neka od ovih pitanja mogu biti od pomoći jer
su to stvari koje u praksi utiču na hosting.

Dakle, kao što sam ranije već i rekao tu sam da pomognem ako zatreba. Ovo mi
je ipak najuža profesija i nešto s čim se bavim godinama unazad.

Pozdrav

Yoda

2010/8/10 Slobodan Terzić <email address hidden>

> I ja bih zamolio za strpljenje. Problem svakako postoji, i manifestuje se
> tako što u nepravilnim vremeskim intervalima server naglo počinje da puni
> memoriju, zatim pređe na swap dok na kraju potpuno ne zaguši sav saobraćaj
> na serveru do te mere da ni na koji način nije moguće pristupiti.
> Pokušali smo na svaki nama poznat način da ograničimo dolazni saobraćaj,
> tačnije broj dolaznih konekcija, ali evidentno nije do toga jer se server
> "zaglupeo" u trenutku dok je na forumu bilo ukupno 10 članova, 5 gostiju i
> 5 pretraživačkih botova, što je prema svim standardima izuzetno nisko ( neki
> prosek u toku dan je oko 50ak posedilaca, što ljudkih što pretraživačkih, i
> za to vreme se se server ponaša sasvin normalno, vrlo je brz i odzvian uz
> 30ak%opterećenja procesora 70% rama i 10% swapa - hardverski resursi su
> knap).
>
> Kontaktirali smo provajdera i saradnji sa njima pokušavamo da otkrijemo
> uzrok problema. zasad se sumlja na:
> 1. Serversku bubu
> 2. (D)DoS napad
> 3. Loše postavke servera
>
> Na ovo poslednje ponajpre sumnjamo, mada su i ovako postavke krajnje
> konzervativne (srezali smo sve na četvrtinu preporučenog iz priručnika
> za Apač).
>
> Još jednom, molim za strpljenje. Za ovaj uvodni period po prelasku na novi
> server smo i mogli očekivati probleme.
> Možda ne ovoliko drastične i hronične, ali teži se i radi se na tome da se
> problemi isprave.
>
> ** Changed in: ubuntu-rs-forum
> Importance: High => Critical
>
> --
> Povremeno se forum jako uspori.
> https://bugs.launchpad.net/bugs/614512
> You received this bug notification because you are a direct subscriber
> of the bug.
>
> Status in Serbian LoCo's forum: Confirmed
>
> Bug description:
> Dakle, nekada forum radi extra brzo, čak mnogo brže nego ranije što je i
> normalno s obzirom na srpski hosting, ali nekad jako sporo.
>
> Imamo li mogućnosti da podesimo MySQL server ? Vrlo moguće da ima veze s
> tim...
>
> To unsubscribe from this bug, go to:
> https://bugs.launchpad.net/ubuntu-rs-forum/+bug/614512/+subscribe
>

--
<email address hidden>

http://banegrbic.blogspot.com/
http://www.facebook.com/bane.grbic/

http://www.linkcomput...

Read more...

Revision history for this message
Slobodan Terzić (githzerai) wrote :

Huh, posle dugog „vijećanja“ sa provajderom i ispravki podešavanja servera uspeli smo da „oslobodimo“ gotovo 200 MB memorije.
forum možad više ne „leti“, ali je opterećenje stabilno.
Takođe, postavljen je sistem za prevenciju napada.

Trenutno forum radi, videćemo kako će se ponašati nadalje.

Changed in ubuntu-rs-forum:
status: Confirmed → Fix Committed
Revision history for this message
Milan Prvulović (prvul-deactivatedaccount) wrote :

Dodatno tweakovana neka podešavanja i ubačen xcache. Memorija je stabilna, php upiti manje trose memoriju. Ima i dalje mesta za unapređenje.

Changed in ubuntu-rs-forum:
status: Fix Committed → Fix Released
To post a comment you must log in.
This report contains Public information  
Everyone can see this information.

Other bug subscribers

Remote bug watches

Bug watches keep track of this bug in other bug trackers.