[linux] ijverige webcrawlers of toch niet

Nico Bouthoorn nico op cuora.nl
Wo Mrt 12 11:46:02 CET 2025


Vergeet ik nog te vermelden, is het aantal webserver processen 
nginx/apache? aangepast voor het beschikbare memory?

hier is  meer dan genoeg info te vinden.

On 3/12/25 10:17 AM, Nico Bouthoorn via Linux wrote:
> 1 van mijn vragen is waar kwamen deze requests vandaan?,  het lijkt er 
> op dat ze naar zwakke plekken aan het zoeken zijn.
>
> De chinezen zijn erg aktief op dit gebied...
>
> nllgg.nl  is een nederlandse website,  dus de kans dat het ergens 
> buiten europa requests vandaag komen lijkt me klein?
>
> Wat ik tegenwoordig doe is via ripe de subnets van europe gebruiken en 
> die alleen toegang geven tot een server.
>
> Gebruiken jullie modsecurity?
>
>
> Nico
>
> On 3/11/25 10:31 PM, Geert Stappers via Linux wrote:
>> Hoi,
>>
>> Dat vorige week de NLLGG website nogal wat onderbrekingen kende
>> was best vervelend.
>>
>> De Out of Memory killer stopte de database server om geheugen
>> vrij te krijgen voor andere processen. Door setting 
>> 'OOMScoreAdjust=-600'
>> blijft nu de OOM-killer van de database server af.
>>
>> Welke webrequests de server zo ver kregen dat er ingegrepen werd,
>> daar hebben wij, NLLGG server beheer commissie, graag hulp bij.
>>
>> De Apache log files en tijdstippen van OOM ingreep staan
>> op https://gitlab.com/nllgg/apache_log_mariadb_oom_killed
>>
>> Met behulp van
>>    git clone https://gitlab.com/nllgg/apache_log_mariadb_oom_killed.git
>> heb je een kopie. Bijvoorbeeld om jouw analyze tools er op los te laten.
>>
>> Het vermoeden is dat overijverige webcrawlers de oorzaak zijn,
>> maar of dat ook echt zo is???
>>
>>
>> Groeten
>> Geert Stappers
>> In zijn rol als lid van de NLLGG server beheer commissie
>
-- 
0623391101



Meer informatie over de Linux maillijst