gutozaur

29 minut temu, adamuss napisał:

Wygląd: W3TotalCache (źle/nie skonfigurowana lub nie wyczyściłeś pamięci podręcznej lub skopałeś coś z MIME type lub inny powód).

Wg mnie główny problem polega na tym że poruszasz się po omacku i testujesz różne, przypadkowe rozwiązania bez analizy potencjalnych i rzeczywistych skutków.

A.

Miałeś racje. Wyłączyłem W3TotalCache i wszystko wróciło do normy. Masz również rację, że działam po omacku robiąc wiele rzeczy naraz. Po prostu tak mnie irytuje ta sprawa, że chciałbym to rozwiązać i zapomnieć. Ten problem wraca do mnie co 2-3 miesiące, wyłączają klientowi stronę i potem muszę ich prosić żeby włączyli ponownie. Zazawyczaj aktualizacja wordpressa działała ale teraz nic to nie dało. Naj gorsze jest to że ścigam się z czasem. Jutro prawdopoodonie wyłaczą stronę a chciałbym tego uniknąć dlatego robię tyle rzeczy naraz. Sytuacja wygląda teraz tak że do 7 rano był spokój, a od 7 po 200%-300%. O 10:00 spadło do 96% i myślałem że wszystko wróci do normy, ale niestety stan na 11:00 to 228%, więc po prostu nie wiem jak to ugryźć. Mam wrażenie, że zaczęło się poprawiać po dodaniu regułek w htaccess ale może to być tylko wrażenie. Z drugiej strony czemu teraz rośnie to nie wiem. Chyba usunę wtyczki których nie używami zobaczę. Nie wiem tylko które wtyczki bezpieczeństwa zostawić. Teraz wygląda to tak.

 

Na chwilę obecną prawie wszystko jest ok. Od godziny 00:00 obciążenie procesora nie przekracza 20%. Nie wiem co ostatecznie pomogło, ale dziękuję wszystkim za pomoc. Jednak żeby nie było tak kolorowo jedna rzecz mi się posypała. Mianowicie chodzi o formatowanie strony. Wygląd strony się zmienił - posypał tak jakby brakowało jakiegoś CSSa. Na 99% jest to spowodowane tym, że chcąć sprawdzić czy jakaś wtyczka powoduje problem zmieniałem im nazwę folderów dodając # na końcu i sprawdzając czy obciązenie spada. Potem oczywiście nazwy wróciły do normy, ale wygląd strony nie wrócił już do poprzegniego wyglądu. Teraz pytanie do was. Która wtyczka może być temu winna i jak to naprawić? Próbowałem już włączać i wyłączać te wtyczki, ale nic się nie zmieniło. Może reinstalacja pomoże? Wtyczki którym zmieniłem nazwy folderów to:
- akismet
- all-in-one-wp-migration
- all-in-one-wp-security-and-firewall
- bbpress
- buddypress

Czy ktoś ma pomysł która to może być wtyczka i jak to naprawić? Strona o której mówię to groningen.org.pl
Wszystko powinno wyglądać jak na stronie głównej, a na każdej innej podstronie sypie się formatowanie.

AKTUALIZACJA

Dodam jeszcze, że teraz wyłączając i włączając wtyczki w celu sprawdzenia czy formatowanie się naprawi wyłączyłem na chwilę All In One WP Security & Firewall i teraz mam takie info w pulpicie admina "to re-insert the security rules in your .htaccess file which were cleared when you deactivated the plugin?: Daje tak ale wyskakuje błąd że nie może tego zrobić. Spradziłem logi i znów urosło obciążenie do 320% więc chyba się coś popsuło. Poczekam jeszcze ze 2 godziny i zobaczymy czy będzie ok

na godzinę 15 jest 55% więc może coś zaczęło działać? Będę informował, zobaczymy co będzie za kilka godzin

Dodam że chyba pokazywałem nie te logi bo to były logi odwiedzin a tak wyglądają teraz logi errorów

 

Jest mega spadek, pytanie tylko czy nie chwilowy
z 1160% spadło na 59 od godziny 14, na 15 jeszcze nie mam danych.
Wydaje mi się że pomogło to co podesłał Adamuss ale pewności nie mam bo robię wiele rzeczy jednocześnie. Poczekam jeszcze kilka godzin. Zobacze czy następna będzie równie dobra.

 

RewriteEngine On  
RewriteBase /  
SetEnvIfNoCase Referer "^$" bad_user
SetEnvIfNoCase User-Agent "^MauiBot" bad_user
SetEnvIfNoCase User-Agent "^BUbiNG" bad_user
Deny from env=bad_user

1 godzinę temu, adamuss napisał:

Jest ok i poprzednio też było dobrze - nie zwróciłem uwagi na status, jest 403 (dostęp zabroniony) i o to chodziło.

Takie wizyty nie powinny stanowić problemu (generować obciążenia), jeśli masz taką możliwość to spróbuj przeładować usługi/serwer, widocznie wiszą jakieś procesy.

A.

 

 

 

Niestety nie wpłynęło to na spadek obciążenia procesora. Jest 218% po aktualizacji.
Nie wiem jak przeładować usługi czy serwer. Gdzieś wyczytałem że to reaguje niby natychmiast więc nie wiem czy to ma wpływ na brak efektu.
Wygląda to tak

 

AddHandler application/x-httpd-php71 .php


RewriteEngine On  
RewriteBase /  
SetEnvIfNoCase Referer "^$" bad_user
SetEnvIfNoCase User-Agent "^MauiBot" bad_user
SetEnvIfNoCase User-Agent "^BUbiNG" bad_user
Deny from env=bad_user

CO się zmieniło? Właściwie nic. Ataki dalej kilka razy na sekundę, obciążenie procesora wzrosło tyle że teraz wróciły ataki z normalnym IP na początku a nie jakimś dziwnym nagłówkiem. Teraz to wygląda tak

11 minut temu, adamuss napisał:

hej,

obciążenie raczej generuje MauiBot - też zauważyłem ostatnio sporą aktywność, podobnie z BUbiNG

żaden z nich raczej nie respektuje Crawl-Delay - przynajmniej "u mnie"

najłatwiej będzie zablokować w .htaccess regułą:

RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ^.*(MauiBot|BUbiNG).*$ [NC]
RewriteRule .* - [F,L]

raczej nie blokowałbym IP botów Google

A.

Hej dziękuję za odpowiedź. Dodałem ten kod i mam wrażenie że jest jeszcze gorzej.

mój plik htacces wygląda tak

 

AddHandler application/x-httpd-php71 .php


RewriteEngine On
RewriteCond %{HTTP_USER_AGENT} ^.*(MauiBot|BUbiNG).*$ [NC]
RewriteRule .* - [F,L]

order allow,deny
deny from 34.*.*.*
deny from 40.77.*.*
deny from 66.249.*.*
allow from all

# Wordfence WAF
<IfModule mod_php7.c>
	php_value auto_prepend_file '/users/0006/groninge/www/test.groningen.org.pl/wordfence-waf.php'
</IfModule>
<Files ".user.ini">
<IfModule mod_authz_core.c>
	Require all denied
</IfModule>
<IfModule !mod_authz_core.c>
	Order deny,allow
	Deny from all
</IfModule>
</Files>

# END Wordfence WAF

są tam jeszcze pozostałości z wtyczki której już nie mam bo od kilku dni testuje wszystko i nic nie pomaga.
Pokaże jeszcze mój plik robots.txt - tak mi zasugerowała pomoc superhost żebym zablokował google boota a o maui bocie nic nie powiedzieli więc analogicznie dopisałem to samo co oni mi kazali tylko zmieniłem nazwę bota. Oba pliki htaccess i robots.txt są w głównym katalogu gdzie są wszystkie pliki wordpressa.

robots.txt

User-Agent: Googlebot-Image

Crawl-Delay: 300

User-Agent: MauiBot

Crawl-Delay: 300

Teraz tak wyglądają logi z panelu superhosta ataki teraz zamiast co 30 sekund są co sekundę albo i kilka razy na sekundę.

 

Witam. 

Dostałem maila od hostingu superhost że obciążenie procesora jest powyżej 100%. Zalogowałem się do panelu i czasem jest nawet 1200%. Ogólnie od 12 dni mam dużo powyżej 200% i za 2 dni wyłączą mi stronę ze względu na obciążenie procesora. Czy ktoś może pomóc? Poniżej wklejam przykładowe logi. Więcej w załączniku. Jak zablokować to g... Dodam że poinstalowałem wtyczki zabezpieczające. Wpisałem IP które mnie atakowało, ale po chwili ataki są już nie z IP a z zestawu znaku + IP tak jak widać w pierwszej linijce obu ataków. Nie wiem jak to zablokować. Przykładowe logi
ec2-34-229-55-110.compute-1.amazonaws.com - - [12/Apr/2018:09:51:58 +0200] "GET
/index.php/galeria/?type_18=gallery&album_gallery_id_18=8&bwg_previous_album_id_18=7%2C7&bwg_previous_album_page_number_
18=0%2C0&type_8=gallery&album_gallery_id_8=18&bwg_previous_album_id_8=18%2C18&bwg_previous_album_page_number_8=0%2C0&typ
e_11=gallery&album_gallery_id_11=15&bwg_previous_album_id_11=14,14&bwg_previous_album_page_number_11=0,0 HTTP/1.1" 200 -
"-" "MauiBot (crawler.feedback+wc@gmail.com)"

crawl-66-249-64-83.googlebot.com - - [12/Apr/2018:09:51:22 +0200] "GET
/index.php/galeria/?type_13=gallery&album_gallery_id_13=13&bwg_previous_album_id_13=12%2C12&bwg_previous_album_page_numb
er_13=0%2C0&type_15=gallery&album_gallery_id_15=11&bwg_previous_album_id_15=10%2C10&bwg_previous_album_page_number_15=0%
2C0&type_2=gallery&album_gallery_id_2=24&bwg_previous_album_id_2=24,24&bwg_previous_album_page_number_2=0,0 HTTP/1.1"
200 708766 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

Dzwoniłem do superhosta, kazali przysłać zgłoszenie mailowe i dostałem taką wiadomość:
"z tego co mogę zauważyć na serwerze występuje problem z nadmierną ilością analiz strony poprzez boty.
Możemy poradzić zlimitowanie botów, poprzez dodanie do pliku robots.txt następującej wartości:
User-Agent: Googlebot-Image
Crawl-Delay: 300
Ograniczy to odwiedzanie strony przez boty google'a."
 

Czy tak powinna zareagować taka firma?