Zu viel Ram weg? -AV undso

ferrarajunior · 4. Februar 2010

Hab den V(olk)server 1000 mit 1Gig ram und einer 3000mhz cpu

nun zu meiner Frage - ist es normal, dass ich ca 700Mb ram "verschleuder" indem ich gerademal mein Mysql, E-mail server und webserver betreibe?

Nachdem ich mir mal den "top" wert angeguckt habe kam ich zu dem Ergebnis, dass wohl clamAV etc. daran schuld sein müsste

Diese prozesse laufen gleich MEHRMALS mit sehr hohem ramverbrauch (bis zu 130mb)

Hier mal ein Auszug kurz nach einem Restart

Zitat

top - 17:16:49 up 1 min, 1 user, load average: 0.00, 0.00, 0.00
Tasks: 52 total, 1 running, 51 sleeping, 0 stopped, 0 zombie
Cpu(s): 9.2%us, 9.3%sy, 0.0%ni, 78.8%id, 2.2%wa, 0.1%hi, 0.4%si, 0.0%st
Mem: 1048576k total, 620472k used, 428104k free, 0k buffers
Swap: 1048576k total, 0k used, 1048576k free, 0k cached

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
32244 root 20 0 18824 1208 936 R 0 0.1 0:00.05 top
1 root 20 0 10312 656 620 S 0 0.1 1:08.30 init
30332 root 20 0 108m 1296 952 S 0 0.1 0:00.00 rsyslogd
30341 root 20 0 48864 1200 696 S 0 0.1 0:00.00 sshd
30403 amavis 20 0 187m 77m 2740 S 0 7.6 0:00.67 amavisd-new
30430 root 20 0 17312 1444 1156 S 0 0.1 0:00.00 mysqld_safe
30469 mysql 20 0 158m 22m 5240 S 0 2.2 0:00.05 mysqld
30475 root 20 0 3780 592 496 S 0 0.1 0:00.00 logger
30503 amavis 20 0 189m 76m 1792 S 0 7.5 0:00.00 amavisd-new
30504 amavis 20 0 189m 76m 1776 S 0 7.5 0:00.00 amavisd-new
30622 root 20 0 105m 43m 2664 S 0 4.3 0:00.79 spamd
30929 clamav 20 0 140m 124m 404 S 0 12.2 0:00.00 clamd
31035 root 20 0 105m 41m 584 S 0 4.1 0:00.00 spamd
31038 root 20 0 105m 41m 584 S 0 4.1 0:00.00 spamd
31043 clamav 20 0 17548 828 596 S 0 0.1 0:00.00 freshclam
31047 root 20 0 6060 464 356 S 0 0.0 0:00.00 courierlogger
31048 root 20 0 29596 1256 972 S 0 0.1 0:00.00 authdaemond
31050 root 20 0 29596 404 120 S 0 0.0 0:00.00 authdaemond
31051 root 20 0 29596 404 120 S 0 0.0 0:00.00 authdaemond
31053 root 20 0 29596 404 120 S 0 0.0 0:00.00 authdaemond
31054 root 20 0 29596 404 120 S 0 0.0 0:00.00 authdaemond
31059 root 20 0 6060 388 288 S 0 0.0 0:00.00 courierlogger
31060 root 20 0 9232 668 556 S 0 0.1 0:00.00 couriertcpd
31072 root 20 0 6060 384 288 S 0 0.0 0:00.00 courierlogger
31073 root 20 0 9232 668 556 S 0 0.1 0:00.00 couriertcpd
31078 root 20 0 6060 380 288 S 0 0.0 0:00.00 courierlogger
31079 root 20 0 9232 664 556 S 0 0.1 0:00.00 couriertcpd
31090 root 20 0 6060 384 288 S 0 0.0 0:00.00 courierlogger
31091 root 20 0 9232 668 556 S 0 0.1 0:00.00 couriertcpd
31222 root 20 0 36840 2304 1804 S 0 0.2 0:00.00 master
31227 postfix 20 0 38896 2208 1744 S 0 0.2 0:00.00 pickup
31228 postfix 20 0 52052 2784 2160 S 0 0.3 0:00.00 qmgr
31243 root 20 0 53044 904 428 S 0 0.1 0:00.00 saslauthd
31252 root 20 0 53044 520 44 S 0 0.0 0:00.00 saslauthd
31255 root 20 0 53044 520 44 S 0 0.0 0:00.00 saslauthd
31256 root 20 0 53044 640 164 S 0 0.1 0:00.00 saslauthd

Alles anzeigen

Vcp zeigt einen Load an von 0 0 0
Die ramauslastung liegt bei

Zitat

v220100247292514:~# free -m
total used free shared buffers cached
Mem: 1024 604 419 0 0 0
-/+ buffers/cache: 604 419
Swap: 1024 0 1024

Ist das normal?`weil ich brauch den mailserver nicht unbedingt -könnt auch auf ihn verzichten

Die cfg's sind eigentl noch ziemlich standart, weil ich erstmal gucken will ob es so läuft

MfG

KB19 · 4. Februar 2010

Ich verstehe dein Problem nicht ganz: Du hast genügend Ram zur Verfügung und dieser wird zu 60% ausgenutzt. Solange er nicht zum Swappen anfängt passt doch alles... :cool:

MfG Christian

ferrarajunior · 4. Februar 2010

Mein prob is, dasses bissi krass is

Wenn ich jz mein Ts inkl Perlmod etc starte bin ich bei knapp 850Mb

Und ich hab weder eine Besuchte Page noch ein ausgelasteten webmailer

Wollt nur wissen ob diese "last" normal is .... weil ich diese irgendwie erst seit kurzer Zeit vernommen habe

Vorher lief er bei Ca. 40% das wundert mich nur

Eben mach ich ein "top" um zu gucken was grad alles so geht und seh oups Ram fast ausgeschöpft obwohl fast alles im idle läuft

Ich hab kein Problem, wenn das normal is wollt nurmal wissen ob das bei den v-serv. normal is, dass da mal ein AV knapp die hälfte vom ram frisst

stachi · 4. Februar 2010

1. ClamAV ist nicht gerade bekannt dafür, sehr resourcensparend zu sein. Man sollte sich gut überlegen ob man es wirklich brauch.

2. Falls du noch Debian Etch verwendest würde ich dir ein upgrade auf Lenny empfehlen da die Version in Etch so wie so Performanceprobleme hat.

ferrarajunior · 4. Februar 2010

Also Lenny hab ich schon upgegraded

Also ClamAV ist auf jedenfall Sinnvoll, nur ist es normal, dass es gleich mehrmals läuft ?

Oder hab ich da ingwo ein fehler in einem Script, sodass es mehrmals gestartet wird und paralell läuft...

btw imho siehts so aus

Zitat

total used free shared buffers cached
Mem: 1024 718 305 0 0 0
-/+ buffers/cache: 718 305
Swap: 1024 0 1024

Zitat

top - 18:15:30 up 59 min, 3 users, load average: 0.24, 0.10, 0.02
Tasks: 66 total, 1 running, 65 sleeping, 0 stopped, 0 zombie
Cpu(s): 1.2%us, 1.8%sy, 0.0%ni, 96.1%id, 0.8%wa, 0.0%hi, 0.1%si, 0.0%st
Mem: 1048576k total, 743336k used, 305240k free, 0k buffers
Swap: 1048576k total, 0k used, 1048576k free, 0k cached

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
9425 hlds 20 0 154m 65m 12m S 2 6.4 0:44.39 srcds_i686
1 root 20 0 10312 656 620 S 0 0.1 1:09.64 init
4046 teamspea 39 19 102m 2188 1364 S 0 0.2 0:02.73 server_linux
7091 teamspea 20 0 40604 8640 824 S 0 0.8 0:00.00 perl
7100 teamspea 20 0 40608 8660 824 S 0 0.8 0:00.00 perl
7593 postfix 20 0 41404 3148 2228 S 0 0.3 0:00.02 tlsmgr
9404 hlds 20 0 23556 1196 740 S 0 0.1 0:00.00 screen
9409 hlds 20 0 9072 1432 1004 S 0 0.1 0:00.00 srcds_run
12544 www-data 20 0 282m 7904 808 S 0 0.8 0:00.00 apache2
13593 postfix 20 0 101m 5176 3908 S 0 0.5 0:00.02 smtpd
13634 postfix 20 0 38896 2208 1748 S 0 0.2 0:00.00 showq
14489 root 20 0 18820 1120 852 R 0 0.1 0:00.01 top
17499 root 20 0 66136 3252 2476 S 0 0.3 0:00.01 sshd
17798 root 20 0 17512 1764 1252 S 0 0.2 0:00.01 bash
18640 ntp 20 0 22380 1360 964 S 0 0.1 0:00.04 ntpd
29406 root 20 0 66064 3160 2476 S 0 0.3 0:00.04 sshd
29540 root 20 0 17512 1772 1256 S 0 0.2 0:00.04 bash
29647 root 20 0 65928 3012 2396 S 0 0.3 0:00.01 sshd
29718 teamspea 20 0 65928 1748 1128 S 0 0.2 0:00.02 sshd
29722 teamspea 20 0 18004 2044 1292 S 0 0.2 0:00.05 bash
30332 root 20 0 110m 1380 1016 S 0 0.1 0:00.00 rsyslogd
30341 root 20 0 48864 1208 704 S 0 0.1 0:00.00 sshd
30403 amavis 20 0 187m 77m 2740 S 0 7.6 0:00.67 amavisd-new
30430 root 20 0 17312 1444 1156 S 0 0.1 0:00.00 mysqld_safe
30469 mysql 20 0 158m 22m 5340 S 0 2.2 0:00.48 mysqld
30475 root 20 0 3780 592 496 S 0 0.1 0:00.00 logger
30503 amavis 20 0 189m 76m 1792 S 0 7.5 0:00.00 amavisd-new
30504 amavis 20 0 189m 76m 1776 S 0 7.5 0:00.00 amavisd-new
30622 root 20 0 105m 43m 2664 S 0 4.3 0:00.87 spamd
30929 clamav 20 0 140m 124m 404 S 0 12.2 0:00.00 clamd
31035 root 20 0 105m 41m 584 S 0 4.1 0:00.00 spamd
31038 root 20 0 105m 41m 584 S 0 4.1 0:00.00 spamd
31043 clamav 20 0 17548 828 596 S 0 0.1 0:00.00 freshclam
31047 root 20 0 6060 464 356 S 0 0.0 0:00.00 courierlogger
31048 root 20 0 29596 1260 976 S 0 0.1 0:00.00 authdaemond
31049 root 20 0 29596 408 124 S 0 0.0 0:00.00 authdaemond

Alles anzeigen

geht eigentl ... eben lief er ja ohne die anderen Programme bei dieser Ramlast

Zitat

30503 amavis 20 0 189m 76m 1792 S 0 7.5 0:00.00 amavisd-new
30504 amavis 20 0 189m 76m 1776 S 0 7.5 0:00.00 amavisd-new

Die 189m bedeuten doch eine Ramlast von 189mb oder?
Kann es einfach sein, dass "top" mir den einfach doppelt anzeigt? aber warum dann verschiedene PIds?

Alex · 4. Februar 2010

Dein Mailserver wird warscheinlich mehrere Prozesse vorhalten um viele e-Mails gleichzeitig zu verarbeiten. Das kann man in den entsprechenden Konfigurationsdateien einstellen.

(Macht Apache übrigens auch...)

ferrarajunior · 5. Februar 2010

Zitat von Alex;13374

Dein Mailserver wird warscheinlich mehrere Prozesse vorhalten um viele e-Mails gleichzeitig zu verarbeiten. Das kann man in den entsprechenden Konfigurationsdateien einstellen.

(Macht Apache übrigens auch...)

Ahh achso das macht sinn

Naja ich denkma 3-4 E-mails am tag werden das wohl kaum erfordern

Danke dir ich check halt nochma die konfigs

MfG

ferrarajunior · 5. Februar 2010

So wollt nochmal auf mein "porblem" zurückkommen

hab folgendes festgestellt

ich hatte Amavis (eine art antivirenscanner) installiert
nun hatte ich versehentlich auch clamav installiert

ich weiß ned ob es normal war aber nachdem ich nun BEIDE deinstalliert habe habe ich knapp 250mb mehr ram

Amavis hatte wohl das problem dasses so viele forks oder wie dess heißt gestartet hatte und damit sehr intensiv arbeitete

wers braucht - auf jeden Sinnvoll, nicht für den Server mehr für die User

aber für meine 2-3 E-mails am tag reicht mirn Spamfilter

MfG

btw kennt ihr einen Empfehlenswerten rootkit scanner?

dani4u · 5. Februar 2010

jap, die mehreren prozesse sind kindprozesse die die dienste öffnen, um mehr besucher/emails/whatever zu verarbeiten als es ein prozess schafft (der möglicherweise irgendwann überladen ist und umkippt)

wie ein esel mit nem karren auf dem 2tonnen reis transportiert werden... irgendwann hängt er in den seilen

ich hab nen mickrigen vserver und belege insgesamt zw. 85 und 165mb ram.. 200 hab ich und 400 swap
apache und mysql auf denen mehrere webseiten zugreifen/laufen
dovecot, courier, postfix, sendmail
mehrere teamspeak3server
webmin

(mit mailservern hab ich mich noch nie beschäftigt, läuft noch in standardkonfiguration und wird auch noch nicht genutzt.. von daher.. kein plan ob die wirklich sein müssen ^^)

hab da alles mögliche runter geschraubt, weil es einfach unnötig ist. die standard konfigurationen bieten SEHR viel raum für große webseiten, die in der minute sicher mehrere hundert oder tausend besucher haben... da macht eine hohe childserveranzahl sinn.. bei mir reichen 3-5 statt 5-10

ferrarajunior · 5. Februar 2010

Ja hab jz auchmal den apache eingestellt echt nice, wasses alles gibt

Der "reserviert" sich ja seine ressourcen ...
kleiner schisser

also hab jz

Zitat

<IfModule mpm_worker_module>
ThreadLimit 40
ServerLimit 5
StartServers 1
MaxClients 200
MinSpareThreads 1
MaxSpareThreads 10
ThreadsPerChild 40

</IfModule>

Alles anzeigen

Und die ramlast ist um ca 40-50mb gesunken ! N1 einfach

nachlesen kann mans unter #phpperformance.de/prozesskonfiguration/
Was wo, wieviel etc.

MfG

KB19 · 5. Februar 2010

Also diese Einstellung würde ich mir nochmals überlegen, wenn du nicht 3GB Ram hast

Code

MaxClients 200

MfG Christian

ferrarajunior · 5. Februar 2010

hehe ok

Aber musste ehe ein anderes nehm hab das andere Modul bei mir
Hab ich gemerkt als dann trotzdem 5 Apache server starteten

jz ist meine Ramlast bei

Zitat

free -m
total used free shared buffers cached
Mem: 1024 201 822 0 0 0
-/+ buffers/cache: 201 822
Swap: 1024 0 1024

Hab ClamAV spamassassin etc ersma runtergeschmissen
Hatte es ja teilweise doppelt ... druch amavisd-new

naja jz nochma alles drauf

MfG

dani4u · 5. Februar 2010

ich bin sozusagen linux-amateur, aber habe mich bis jetzt selber immer zurechtgefunden, ansonsten gibts ja noch foren..

das mit den guten einstellungen ist einige fummelarbeit..
immer wieder andere settings auszuprobieren und nach einem neustart des indianers zu beobachten.. dauert ne weile..

wie gesagt, ich hab meinen bis jetzt relativ gut eingestellt, wodrunter die performance beim seitenaufbau auch nicht sichtbar leidet..

geb dir noch ein paar hinweise wie ich das eingestellt habe:

1. PHP & SysCP mit Kundenverzeichnissen
SysCP konfiguriert PHP für Kundenverzeichnisse in zwei extra php.ini Dateien.
Zu finden sind diese unter /usr/share/php5/
Dort sind z.B. auch Angaben für den Maximalen Ramverbrauch eines Kunden (bei der einen datei ist standard 32MB und bei der anderen 128MB)
welche nun wirklich genutzt wird, kann ich dir leider nicht sagen
Hier mal meine php.ini - danach die beiden unter /var/share/php5/
/etc/php5/apache2/php.ini
/usr/share/php5/php.ini-dist
/usr/share/php5/php.ini-dist.cli

2. Ein Paar Apache Einstellungen
In der Dokumentation finden sich jegliche Modulbeschreibungen des apachen, die man durchgehen sollte. Welche Module braucht man, nutzt man, oder können deaktiviert werden? .... Das spart einiges.. weil jedes modul für eine aufgabe bestimmt ist, und die wird bei jedem Seitenaufbau überprüft ob diese funktion ausgeführt werden soll.. das kann schon schlauchen.

Hinweis: Ich weiß nicht, welche der "prefork" Prozess Module genutzt wird, habe also beide runter geschraubt bzw. optimiert.

http://codepaste.net/c9rn57

3. MySQL
http://codepaste.net/k7nqz2
nicht sehr viel geändert.. hauptsächlich max memory und max post size

hoffe dass diese ja doch schon geringen aber meiner ansicht nach guten settings dir oder irgendwem anders weiterhelfen
wie gesagt, ist ne langwierige arbeit das perfekt einzustellen, es kommt immer drauf an wieviel webcontent du hast / wie groß deine seiten sind respektive wieviele besucher gleichzeitig zugreifen, oder wie umfangreich die zugriffe von diensten wie zb. nem teamspeakserver sind.

gruß, dani4u

P.S. folgendes in den geposteten inhalten sind alles sicherheitsrestriktionen, also nicht wundern warum du das u.U. nicht hast.

Code

disable_functions = escapeshellcmd, exec, highlight_file, ini_restore, link, passthru, pfsockopen, phpinfo, popen, proc_nice, proc_open, shell_exec, show_source, symlink, system

EDIT: achja nochwas.. habe ja erwähnt dass unter meinen einstellungen für meinen bisherigen umfang (der server existiert erst seit 34tagen) der seitenaufbau nicht sichtbar beeinträchtigt wird. passieren tut das, wenn zu wenig server laufen, oder aber auch die anderen settings zu niedrig sind.

ferrarajunior · 8. Februar 2010

Danke dir und für andere

Spammassassin kann man auchnoch anpassen, sowie amavisd und clamav auch

bei allen kann man jeweils die Childs auf ein minimum minimieren

btw hab derzeit ein Problem

obwohl ClamAV jz nur mit einem Child läuft frisst er 280mb Ram !!

Zitat

27634 clamav 20 0 274m 246m 764 S 0 24.1 0:02.05 clamd

Normal ist das nicht oder??
Also ich bin jz eigentl ganz zufrieden man kann locker 200mb Ram einsparen, wenn man die Childs auf jeweils 1-2 "runterfährt"
nur mit den 280mb von clamav bin ich überfordert

Gibts da eventuell konfigfehler?

Bei meinem Apache hab ich 1 child eingestellt und immer, wenn jemand conecctet starten dann meist noch 3-4 andere

obs sinn macht ?
Bei mir schon, weil ich ehe kaum besucher habe

MfG