Python regexp sebesség

2010.01.17. 19:15

Ki kell nyernem kb. 1 TB-nyi logból mindenféle adatot, erre pedig számomra a legkényelmesebb a python. A feladat nagy része regexppel az engem érdeklő sorok, a bennük lévő információ megtalálása, majd ezek kigyűjtése egy dictbe (állapottábla-szerűen), végül pedig az eredmény…

Igen, a válasz egyértelmű igen: Brutálisnak tűnik, és az is: FreeBSD performance improvement between 7.x and 8.x Test Peak performance 7.x->8.x MySQL OLTP RO 1.6970x MySQL…

MySQL történelem

2009.10.03. 19:40

You can read this article in english!Ez a cikk a PostgreSQL történelem folytatása, az előzményeket, és a mérés hátterét ott ismerheted meg. Láttuk mit tud a PostgreSQL, nézzük mire képes a nagy ellenség! Először is tekintsük át, hogy a tesztelt verziók (4.1.25, 5.0.85, 5.1.38,…

MySQL history

2009.10.03. 19:40

This article is a sequel to the PostgreSQL history, you can check the backgrounds there.We've seen what PostgreSQL do, let's see what the big enemy can do!But first of all, let's take a look at the release dates of the tested versions (4.1.25, 5.0.85, 5.1.38, 5.4.1 és 6.0.11): MySQL versions…

PostgreSQL történelem

2009.09.29. 09:00

You can read this article in english!Nem, nem az a történelem, amely arról szól, hogy miként lett Ingresből PostgreSQL, hanem az, amely elmondja mennyivel lett gyorsabb a lassabb nyílt forrású adatbáziskezelőként ismert RDBMS. A PostgreSQL-t nem kell bemutatni, hiszen az a két tábor,…

PostgreSQL history

2009.09.29. 09:00

No, not that history which tells about how Ingres became PostgreSQL, but the one, which tells us how much faster got the RDBMS, which is widely known as the slower one.PostgreSQL doesn't need any introduction because the two camps, which have already met with it has a solid point of view about its…

Btrfs az exterminátor?

2009.07.29. 14:33

Folytatva a töménytelen mennyiségű sysbench kimenet feldolgozását, eljutottam a linuxos részhez. Itt négy fájlrendszer (ext2, ext3, ext4 és btrfs) szerepel, a futási feltételek megegyeznek az eddig leírtakkal. A btrfs a következő generációs fájlrendszer, ezt még talán az ext4…

A fogfúró a villám ellen

2009.07.21. 10:25

A modern HDD-k annyira pörögnek, hogy a fogdokim a tengelyükkel a lyukas örlőmet is könnyűszerrel porrá zúzhatná. De vajon ér-e valamit ez a nagy pörgés az atomvillanással szemben? Szerintem nem, persze inkorrekt összehasonlítani a már említett low-end SSD-t egy 15 ezret forgó SAS…

Jó pár évig lehet blogbejegyzéseket írni azokból a számokból, amik pár nap alatt keletkeztek, de talán valaki egyszer hasznosnak találhatja őket... Mai epizódunk arról szól, hogy a ZFS, vagy az UFS szereti-e jobban a korábban már bemutatkozott SSD-t, mindezt pedig FreeBSD (8)…

Egy ismerős kapott kölcsönbe egy -amúgy elég low-end- SSD-t (itt: flash-alapú SATA-s HDD-nek látszó tárgy), így tudok néhány teszteredményt közölni róla. A tesztgép az előző cikkben említett HP DL380, így az a nem túl szokványos helyzet állt elő, hogy az SSD nem egy natív…

A FreeBSD-s tábort sokáig cikizték azzal, hogy naplózó fájlrendszer híján egy-egy crash után (szerencsére ebből azért nem volt sok) percekig kell fsck-zni, míg helyreáll a rendszer. Aztán mikor megjelentek a több tíz GB-os diszkek, hosszú percekig. Aztán mikor ezeket a diszkeket…

Most, hogy a FreeBSD-ben lassan használható lesz játékra a ZFS, sokakban felmerülhet a kérdés, hogy mennyire sikerült a portolás teljesítmény szempontjából. Bár a ZFS nem épp a sebességéről híres :), azért a legtöbb feladatra annyira nem is rossz. Mennyire sikerült tehát…

Recently, there were some amount of buzz about Google's (?) project, named unladen swallow, which targets a considerable amount of speedup of (C)python interpreter. I use a DNS server -written in python-, because it's flexible and easy to program, so I thought I should give unladen a peek. python…

Ha a HWSW melléklete lennénk, azt mondanám, hogy sok buzz volt nemrég a ZFS körül, de ennek ellenére még mindig nem tudunk róla mindent. A végén még egy feleséggyilkosság is kiderül. :) Itt van tehát egy gyors UFS (soft updates) vs. ZFS összehasonlítás sysbench-csel, FreeBSD 8…

ZFS és tömörítés

2009.07.11. 21:34

Ha valamiért úgy gondolnánk, hogy a ZFS nem elég lassú, könnyen segíthetünk a dolgon: kapcsoljuk be a tömörítést! A fájlrendszer-tömörítésnek mindig is voltak támogatói és ellenzői is. Egy biztos: sosem volt annyi lóerő a gépeinkben, mint ma, és nevetséges az a…

Nemrég a HUP-on szó volt az unladen swallowról, amely egy Google projekt a python amúgy igen szerénynek mondható teljesítményének fokozására.Használok egy pythonban írt DNS szervert -a rugalmassága és egyszerű programozhatósága miatt-, így gondoltam kipróbálom vele.python…

ZFS, the last word in file systems. Hát nem is tudom.Létrehoztam egy RAIDZ2 poolt 14 darab 15k-s 72 GiB-os diszken, meg egy slogot, egy külön diszkpárra (két 15k-s diszk tükrözve). Megfelelően gyorsnak tűnt.Majd rátoltam egy taligányi apróma^H^Hfájlt, mondjuk úgy pármilliót (mail…