Lug-dd May 2011

lug-dd@mailman.schlittermann.de

46 participants
28 discussions

Re: PostgreSQL
by Holger Dietze 10 May '11

10 May '11

Hallo Marcus, Von: "Marcus Obst" <marcus.obst(a)etit.tu-chemnitz.de> > >> Ach ja: wenn Du kannst, verwende COPY anstelle INSERT, wenn es >> Bulk-Inserts sind. Ist um Größenordnungen schneller. > >Geht leider nicht. > >Ich hab jetzt nochmal ein bisschen weiter nachgeforscht. Das Problem >scheint der BLOB zu seien. Wir speichern u.a. unkomprimierte Bilder ab, >diese haben dann pro Eintrag eine Größe von ca. 300k. Sobald ich diese >Einfügen will bricht die import Performance von 40MB/s auf 5MB/s ein. > >Lasse ich die Bilder weg, geht alles wunderbar. > Dann lege die TOAST-Tabelle auf eine getrennte Festplatte. Moeglicherweise schluckt auch das Komprimieren der Bilddaten Rechenleistung. Holger ___________________________________________________________ Schon gehört? WEB.DE hat einen genialen Phishing-Filter in die Toolbar eingebaut! http://produkte.web.de/go/toolbar

4 6

Re: PostgreSQL
by Holger Dietze 10 May '11

10 May '11

Hallo Marcus, -----Ursprüngliche Nachricht----- Von: "Marcus Obst" <marcus.obst(a)etit.tu-chemnitz.de> Gesendet: 10.05.2011 14:49:28 An: "Linux-User-Group Dresden" <lug-dd(a)mailman.schlittermann.de> Betreff: Re: PostgreSQL >On 10.05.2011 13:55, Marcus Obst wrote: > >> Ich glaube das Problem grenzt sich wirklich auf die Binärdaten ein. Ich >> verwende im Moment dafür den Datentyp *bytea*. Nach allem was ich >> gelesen und glaube verstanden zu haben, ist das am Ende nix weiter als >> ,,escaptes'' ASCII, sprich sowohl Client also auch Server müssen >> irgendetwas konvertieren. > >So, ich hab jetzt nochmal eine Postgres-Datenbank unter Linux aufgesetzt. > >Hier ändert sich ebenfalls nix, außer dass ich das Tun des Servers etwas >besser beobachten kann. > >Sobald ich Daten Größer 30kb in die Tabelle mit dem Type bytea schreibe >wird alles langsam. Serverseitig belegt der postgres-Daemon dann eine >komplette CPU. spricht fuer die Komprimierung beim Abspeichern. > >Demzufolge scheint also die Behandlung von bytea nur mit der >CPU-Leistung zu skalieren. > >Schade eigentlich. > > apt-get remove postgresql nicht so vorschnell. ALTER TABLE tabelle ALTER COLUMN spalte SET STORAGE EXTERNAL; http://www.postgresql.org/docs/9.0/interactive/storage-toast.html Die Bilder liegen doch schon in einem Format vor, was intern komprimiert ist? Holger ___________________________________________________________ Schon gehört? WEB.DE hat einen genialen Phishing-Filter in die Toolbar eingebaut! http://produkte.web.de/go/toolbar

2 1

LUG-TReffen Mittwoch
by GAG 18 10 May '11

10 May '11

Hallo Pinguin-Freunde, wir haben ein kleines Problem: Morgen ist Nachtwanderung und mit Band abbauen und Klub aufräumen werden wir es wohl nicht bis Mittwoch abend geschafft haben. Jetzt meine Frage: wäre es für euch möglich das Treffen kurzfristig zu verschieben. vieleicht um eine Woche? Sorry das ich mich erst so spät melde aber ich gebe zu ich hatte es vergessen... Falls das nicht funktioniert dann sagt bitte schnellst möglich bescheid, dann bekommen wir das schon irgendwie hin, wird nur stressig. Gebt mir bitte auf jeden Fall eine Antwort. Teuflische Grüße! Tobi Kellerklub GAG 18 e.V. Telefon 471 90 85 Telefax 472 43 63 http://www.gag18.de

2 1

segfault bei malloc()
by Fabian Hänsel 09 May '11

09 May '11

Hallo, ich habe ein Programm, das in folgender Zeile einen Segfault produziert: unsigned char *srcsrc; srcsrc = (unsigned char*) malloc (i * sizeof(unsigned char)); Das ganze ist unabh. von i; i kann dabei 1,2,3,...,$großeZahl sein. Im gdb sieht das dann so aus: (gdb) run Starting program: /path/prog Program received signal SIGSEGV, Segmentation fault. 0x0000000000400ee8 in prog ( parameter1=0x7ffff783a010 parameter2=... at prog.c:107 107 srcsrc = (unsigned char*) malloc (i * sizeof(unsigned char)); (gdb) print i $1 = 1 *Irgendwie* scheint es eine Abhängigkeit zu den Daten zu geben, mit denen ich das Programm füttere (das habe ich hier minimiert, indem ich immer gleich viel Speicher allokiere und außer der gezeigten Allokation nichst in dieser Funktion mache). Ich kann mir gar keinen Reim darauf machen, wie ein malloc überhaupt fehlschlagen kann (und entsprechend nicht, wo ich nach dem Problem suchen muss). Hat jemand eine Idee, woran das liegen könnte? (freier RAM ist reichlich vorhanden, System ist Ubuntu 11.04 AMD64) Viele Grüße Fabian

3 7

Ext4 über Ext3 recover möglich?
by Alexander Wendland 09 May '11

09 May '11

Hallo, ich habe hier gerade das Notebook einer Freundin da, auf dem ein neues Ubuntu draufgespielt werden sollte. Bei der Installation wurde für die Homepartition ext4 ausgwählt obwohl es eine ext3 war. Statt zu konvertieren hat der Installer ohne Vorwarnung formatiert. Natürlich gibt es nur ein Teilweises Backup. Dort fehlen ein paar wichtige Dateien. Nun habe ich schon verschiedene Werkzeuge (testdisk, photorec) probiert und habe damit kein vernüftiges Ergebnis erreichen können. Ihm Rahmen der Installation wurde die ext3-Partition auch noch vergrößert. Da waren die Daten noch da. Gibt es noch irgendeine Möglichkeit, die ursprüngliche Verzeichnisstruktur samt Daten wiederherzustellen? Entweder auf der jetzt größeren Ex-ext3 ext4-Partition oder der kleineren vorigen ext3-Partion. Die einzigen Daten die geschrieben wurden sind die ext4-Formatierung und das lost+found dir. Die original-Blöcke sind schon da. Ich habe bereits ein Image mit dd angelegt und mit Kopien davon Rettungsversuche unternommen. Gibt es eine Firma die ggf. ein Recover durchführen kann? Viele Grüße, Alex

3 2

[semi-OT] Qt contributers summit
by Konrad Rosenbaum 06 May '11

06 May '11

Hi, fährt irgendwer von den KDE/Qt - Entwicklern in Dresden zum Summit nach Berlin? Konrad

1 0

[Druckserver] Dez. mit Notebook und Box
by Carsten Vogel 05 May '11

05 May '11

Leeve Lü! Soviel Hardware und endlich ein Auftrag! Ich möchte meinem Gewissen etwas Gutes Tun und meinen Laserdrucker (Samsung ML-2010) aus dem Wohnbereich verbannen. Eine Abstellkammer soll den aufnehmen, damit ich mir keine großen Gedanken um Feinstäube und Ozon in Wohnzimmer und Schlafzimmer machen muss. Meine Idee: Altes Notebook mit Debian stable (gibt's schon), läuft an einem damit-gehe-ich-aber-nicht-ins-Netz-Router (Fritz Box/Alice Box). Wie würde ich sinnvollerweise das Netzwerk und den Druckserver konfigurieren (vielleicht erstmal die generelle Strategie), damit ich mit Desktoprechner (Win7) und Notebook (Debian) zusätzlich zum laufenden WLAN ein "Druck-Netzwerk" nutzen kann, ohne ständig umschalten zu müssen. Oder bräuchten dann alle Rechner ne 2. Netzwerkkarte? Muß ich die Druck-Box in der IP-Range des Netz-WLANS-wählen? Gerne lese ich mir auch längere Texte dazu vorher an. Nur stehe ich mal wieder vor dem Internet und sehe nur Bäume. Liebe Grüße und danke für Eure Gedanken/Erfahrungstipps, Carsten aus dem Norden.

4 4

Dresden Perl Mongers Treffen Mai 2011
by Steffen Schwigon 04 May '11

04 May '11

Hi! Am Donnerstag treffen sich wieder die Dresden Perl Mongers. Achtung: Wir sind zurück im Straßencafe! Donnerstag, den 05. Mai 2011 20.30 Uhr Straßencafé (Straße E) Werner-Hartmann-Straße 4 01099 Dresden Wir reden und hacken üblicherweise an unserem eigenen Kram rum und bieten ernsthaften Support rund um Perl-Einstiegsthemen wie * Code-Reviews * erstes CPAN-Modul bauen * Updates zu Perl[56], Parrot, Rakudo, Perlworkshop, YAPC und für Fortgeschrittene * Trost * Folklore * misc & etc Anfahrt, Termine, Themen immer hier: * http://dresden-pm.org/PM/TermineTreffen Jeder ist eingeladen. Grüße, Steffen -- Steffen Schwigon <ss5@@renormalist.net> Dresden Perl Mongers <http://dresden-pm.org/>

1 0

2024

2023

2022

2021

2020

2019

2018

2017

2016

2015

2014

2013

2012

2011

2010

2009

2008

2007

2006

2005

2004

2003

2002

2001

2000

1999

Lug-dd May 2011