Thema: Komponente mit mehreren Millionen DB-Rows?

Hallo zusammen,

Ich bin daran eine Joomla Komponente zu basteln die Biodiversitätsinformationen
für verschiedene Tierarten enthält. Damit die Daten komplett sind, müsste die Komponente aber ca. 10 DB Tables besitzen von denen der grösste ca 2Mio DB Rows enthalten würde. Die meisten anderen so ca. 30'000

Hat jemand Erfahrungen mit so grossen DB's?
Sind in Joomla Probleme zu erwarten?

Wie lange dauert ein Query wenn alle Datensätze durchsucht werden müssen um dann ein paar Datensätze daraus einzulesen?

Grüsse
Aspi

Zitat von deejey

warum soll Joomla damit nicht klarkommen? Letzendlich hängt der Durchsatz im Wesentlichen ab von:
- DB-Server
- gutes DB-Modell
- passende Indices

Gut so was hab ich mir erhofft. Hätte ja sein können, dass Joomla aus irgend welchen Gründen Probleme macht wenn zu grosse DB's da sind.. so gut kenne ich das Verhalten von Joomla nicht.
Für das DB Modell etc.. habe ich einen Profi zu Seite der tagtäglich nichts anderes macht als DB's bauen. Wir werden also gut darauf achten, das ganze Sauber zu strukturieren und effiziente Querys zu konstruieren..

Wird spannend.. Aber zuerst muss ich eh mal die ganze Flut an Daten Filtern und sortieren.

Und ich hoffe dass wir deutlich unter 5-8 Sekunden kommen bei den Querys.. ;-)

Grüsse
Aspi

Hallo Es gibt viele solche Datenbanken:

itis.org, gbif.org fishbase.org und hunderte von Organisationen die Datenbanken zur Verfügung stellen.

Die Daten bekomme ich auch von diesen Organisationen. Es geht aber darumein paar Zusatzinformationen zu sammeln und diese Daten nur als Basis bzw.Zusatzinformation schon drinn zu haben..

Bei uns wird es um Fische gehen.. User können dann noch Photos, Zucht und Haltungsberichte hochladen und zu den Wissenschaftichen namen noch Deutsche Namen und andere Trivialnamen zuordnen etc..

Die Grosse DB ist dann nur eine Stütze.. dafür dass die Fische biologisch korrekt einsortiert sind, der wissenschaftliche Name korrekt geschrieben ist.. Die Herkunft grad auf ner Karte gezeig werden kann etc.

Grüsse
Aspi