MongoDB Stresstest - und neue Probleme

Dieser Post wurde aus meiner alten WordPress-Installation importiert. Sollte es Darstellungsprobleme, falsche Links oder fehlende Bilder geben, bitte einfach hier einen Kommentar hinterlassen. Danke.

perl -Mt::lib::Car -e '$|=1; for (1..1000) { print "$_\r"; for (1..1000) { my $o = t::lib::Car->new; $o->model($_); $o->flush; } }'

Der Test lief auf meiner Workstation (Celeron 3,2 GHz) mit gleichzeitig laufendem X und einigen Programmen.

Auch der letzte 1.000er Block wurde ohne sichtbare Zeitverzögerung geschrieben, der MongoDB-Daemon verbrauchte dabei weniger als 20% CPU-Last und erstaunlich wenig RAM.

Als nächstes habe ich den Test um eine quantitative Messung erweitert, um den gefühlten Wert (keine Zeitverzögerung auch nach 1 Mio. Einträgen) auch objektiv zu beweisen:

perl -Ilib -Mt::lib::Car -MTime::HiRes -e '$|=1; for (1..10) { print "$_\r"; my $s = Time::HiRes::time; for (1..100000) { my $o = t::lib::Car->new; $o->model($_); $o->flush; } print "\t".(Time::HiRes::time - $s)."\n"; }'

1       44.20529198646552       45.5772418975833       44.70065283775334       44.03454184532175       45.24184608459476       44.07931804656987       42.3029620647438       44.88365316390999       47.331378936767610     44.6474239826202

Die Schwankungen zwischendurch dürften den sonstigen Belastungen meiner Workstation geschuldet sein, denn Webbrowser & Co. fordern auch ihren Anteil der CPU. MongoDB benötigt inklusive Abstraktion, Schnittstelle & Co. insgesamt etwa 420ns bis 470ns (0,00042 bzw. 0,00047 Sekunden) pro neuem Dokument, das entspricht etwa 127.000 bis 142.000 Dokumenten pro Minute.

Viel wichtiger war die Frage, ob MongoDB mit dieser Datenmenge auch umgehen kann. Nach verschiedenen (z.T. abgebrochenen) Testläufen liegen zur Zeit 2.943.930 Dokumente in der Test-Collection. Die count() - Abfrage lieferte diese Zahl sofort, ohne sichtbare Verzögerung, ebenso reagierte ein find({ model: 735 }) und das, obwohl "model" noch nicht einmal über einen Index verfügt!

Meine Testreihe habe ich an dieser Stelle beendet, denn die Ergebnisse waren (auf meiner altersschwachen Workstation!) bereits überwältigend - und mit 3 Mio. Einträgen liegt die Test-Collection bereits weit über den im neuen Projekt erwarteten Zahlen. Im "täglichen Leben" dürfte diese Zahl auch bei kaum einem Projekt erreicht werden, egal ob es sich um ein gut besuchtes Forum oder ein (semiprofessionelles) Browserspiel handelt.