php-resource



Zurück   PHP-Scripte PHP-Tutorials PHP-Jobs und vieles mehr > Entwicklung > PHP Developer Forum
 

Login

 
eingeloggt bleiben
star Jetzt registrieren   star Passwort vergessen
 

 

 


PHP Developer Forum Hier habt ihr die Möglichkeit, eure Skriptprobleme mit anderen Anwendern zu diskutieren. Seid so fair und beantwortet auch Fragen von anderen Anwendern. Dieses Forum ist sowohl für ANFÄNGER als auch für PHP-Profis! Fragen zu Laravel, YII oder anderen PHP-Frameworks.

Antwort
 
LinkBack Themen-Optionen Thema bewerten
  #1 (permalink)  
Alt 10-03-2010, 12:56
jwe
 Registrierter Benutzer
Links : Onlinestatus : jwe ist offline
Registriert seit: Mar 2010
Beiträge: 7
jwe befindet sich auf einem aufstrebenden Ast
Standard Wie groß darf ein mehrdimensionales Array werden?

Aus mehreren Datenquellen möchte ich Daten in einem mehrdimensionalen Array sammeln.
Also z.B. eine Artikelliste mit Stammdaten, aktuelle Lagerbestände in verschiedenen Filialen, Umsätze in der Filialen in verscheiden Monaten.
Bsp:
$arr[$ArtikelNr]['STAMM']['Name'] = 'PHP-Buch';
$arr[$ArtikelNr]['SaisonAbschlag'][$JahrMonat] = 60%;
$arr[$ArtikelNr]['BESTAND'][$FilialNr]['Stück'] = 43;
$arr[$ArtikelNr]['UMSATZ'][$JahrMonat][$FilialNr]['Stück'] = 7;
usw.

Mit diesen Daten möchte ich dann Berechnungen durchführen und abhängig vom Ergbnis dann eine Ausgabe generieren.

Problem: Die gesammelten Daten können sehr umfangreich werden (50.000 Artikel x 100 Filialen x 24 Monate => 120Mio Datensätze)

Da das Formelwerk sehr umfangreich ist und zu viele unterschiedlichste Datenquellen mit einbezogen werden müssen, ist es quasi unmöglich diese Aufgabe auf die SQL-Server auszulagern.

Eigentlich funktioniert das Ding auch, leider werden aber irgendwann die Daten nicht mehr in den richtigen indizierten Feldern gespeichert und Sortierungen kommen ducheinander.

Nun die Frage: Gibt's eine Obergrenze an Einträgen pro Ebene, oder eine Speicherobergrenze für eine Variable/Array allgemein? Hat einer Erfahrungswerte ähnlicher Art?

Das Memory_Limit vom Script ist auf jeden Fall nicht die Grenze.

Schon mal vielen Dank für eine Antwort.
Mit Zitat antworten
  #2 (permalink)  
Alt 10-03-2010, 13:01
AmicaNoctis
  Moderatorin
Links : Onlinestatus : AmicaNoctis ist offline
Registriert seit: Jul 2009
Beiträge: 5.709
Blog-Einträge: 9
AmicaNoctis sorgt für eine eindrucksvolle AtmosphäreAmicaNoctis sorgt für eine eindrucksvolle Atmosphäre
Standard

Hallo,

das einzige Limit ist prinzipiell das Speicherlimit. Wenn du indizierte Arrays (also nicht-assoziative) hast, kommt noch PHP_INT_MAX als Maximallänge des Arrays hinzu.

Trotzdem kann ich nicht glauben, dass man solche Auswertungen nicht optimieren und im SQL durchführen kann.

Gruß,

Amica
__________________
Hast du die Grundlagen zur Fehlersuche gelesen? Hast du Code-Tags benutzt?
Hast du als URL oder Domain-Beispiele example.com, example.net oder example.org benutzt?
Super, danke!
Mit Zitat antworten
  #3 (permalink)  
Alt 10-03-2010, 14:52
jwe
 Registrierter Benutzer
Links : Onlinestatus : jwe ist offline
Registriert seit: Mar 2010
Beiträge: 7
jwe befindet sich auf einem aufstrebenden Ast
Standard

PHP_MAX_INT ist's leider nicht, da meine Probleme schon bei ca. 800.000 Datenfelder anfangen.


Bei der SQL-Optimierung gäbe es verschiedene Probleme:
1. "unterschiedliche Datenquellen" soll heißen, dass ich eine MySQL-Datenbank habe, und noch 2 weitere, auf die ich per ODBC zugreifen muss.
Die benötigten Daten aus dem ODBC-Bereich erst nach mySQL zu kopieren ist sehr aufwendig, da dies ja auch noch Session-abhängig passieren müsste. (Alles kopieren ist nicht möglich!)

Und selbst wenn würden selbst StoredProcs in MySQL nicht die gewünschten Ergebnisse liefern (außer die schreiben wieder mehrer Temp-Tabellen, die ich wieder auslesen muss ...)
Alles in allem eine Laufzeitfrage.
In meiner Varainte muss ich nur ca. 10 "leichte" SQL-Statements ausführen (die ja sogar teilweise auf unterscheidlichen Maschinen gleichzeitig bearbeitet werden) und könnte die dann relativ schnell im Speicher mit PHP auswerten und ausgeben.
Mit Zitat antworten
  #4 (permalink)  
Alt 10-03-2010, 15:02
combie
 PHP Expert
Links : Onlinestatus : combie ist offline
Registriert seit: May 2006
Beiträge: 3.296
combie wird schon bald berühmt werden
Standard

Zitat:
Eigentlich funktioniert das Ding auch, leider werden aber irgendwann die Daten nicht mehr in den richtigen indizierten Feldern gespeichert und Sortierungen kommen ducheinander.
Entweder hat dein Script einen Wackelschatten,
oder in den Datenfeldern steht nicht das was du erwartest,
oder, am unwahrscheinlichsten, dein PHP ist kaputt.

Alles in allem, mit deiner Vermutung "obergrenze", liegst du neben der Spur.
__________________
Wir werden alle sterben
Mit Zitat antworten
  #5 (permalink)  
Alt 10-03-2010, 15:06
jwe
 Registrierter Benutzer
Links : Onlinestatus : jwe ist offline
Registriert seit: Mar 2010
Beiträge: 7
jwe befindet sich auf einem aufstrebenden Ast
Standard

Aaarg! Fehler gefunden! Wie es so bei riesigen Datenmengen aus unterschiedlichen Systemen ist:
Ein teil der Daten hat ganz selten hinten noch ein Leerzeichen dran. Womit natürlich "Test " und "Test" nicht zusammen finden können.

Trotzdem Danke für die schnelle Hilfe und Anteilnahme

Kann also geclosed werden ...

Geändert von jwe (10-03-2010 um 15:09 Uhr)
Mit Zitat antworten
Antwort

Lesezeichen


Aktive Benutzer in diesem Thema: 1 (Registrierte Benutzer: 0, Gäste: 1)
 

Ähnliche Themen
Thema Autor Forum Antworten Letzter Beitrag
Ladezeiten zu groß... wie besser werden? comfreak BRAINSTORMING PHP/SQL/HTML/JS/CSS 57 12-09-2007 13:10
mehrdimensionales Array Tarlar PHP Developer Forum 21 27-02-2007 14:26
Mehrdimensionales Array Real_AzRAel SQL / Datenbanken 7 29-10-2002 07:17
*.js darf nicht gesaugt werden, muss aber angewandt werden... KTJ HTML, JavaScript, AJAX, jQuery, CSS, Bootstrap, LESS 10 27-09-2002 16:17
Wie groß darf die session sein? Pascal P. PHP Developer Forum 1 27-09-2002 11:39

Themen-Optionen
Thema bewerten
Thema bewerten:

Forumregeln
Es ist Ihnen nicht erlaubt, neue Themen zu verfassen.
Es ist Ihnen nicht erlaubt, auf Beiträge zu antworten.
Es ist Ihnen nicht erlaubt, Anhänge hochzuladen.
Es ist Ihnen nicht erlaubt, Ihre Beiträge zu bearbeiten.

BB-Code ist an.
Smileys sind an.
[IMG] Code ist an.
HTML-Code ist aus.
Trackbacks are an
Pingbacks are an
Refbacks are an


PHP News

ebiz-trader 7.5.0 mit PHP7 Unterstützung veröffentlicht
ebiz-trader 7.5.0 mit PHP7 Unterstützung veröffentlichtDie bekannte Marktplatzsoftware ebiz-trader ist in der Version 7.5.0 veröffentlicht worden.

28.05.2018 | Berni

Wissensbestand in Unternehmen
Wissensbestand in UnternehmenLebenslanges Lernen und Weiterbilden sichert Wissensbestand in Unternehmen

25.05.2018 | Berni


 

Aktuelle PHP Scripte

PHP Server Monitor

PHP Server Monitor ist ein Skript, das prüft, ob Ihre Websites und Server betriebsbereit sind.

11.09.2018 Berni | Kategorie: PHP/ Security
PHP WEB STATISTIK ansehen PHP WEB STATISTIK

Die PHP Web Statistik bietet Ihnen ein einfach zu konfigurierendes Script zur Aufzeichnung und grafischen und textuellen Auswertung der Besuchern Ihrer Webseite. Folgende zeitlichen Module sind verfügbar: Jahr, Monat, Tag, Wochentag, Stunde Folgende son

28.08.2018 phpwebstat | Kategorie: PHP/ Counter
Affilinator - Affilinet XML Produktlisten Skript

Die Affilinator Affilinet XML Edition ist ein vollautomatisches Skript zum einlesen und darstellen der Affili.net (Partnerprogramm Netzwerk) Produktlisten und Produktdaten. Im Grunde gibt der Webmaster seine Affilinet PartnerID ein und hat dann unmittelb

27.08.2018 freefrank@ | Kategorie: PHP/ Partnerprogramme
 Alle PHP Scripte anzeigen

Alle Zeitangaben in WEZ +2. Es ist jetzt 16:35 Uhr.