Ich komme aus der Physik, und dort sind grosse Datenmengen auch an der Tagesordnung. Was wir aber nie während des Studiums untergekommen ist, ist es all diese einzelnen Messpunkte für immer und ewig zu halten. Vielmehr wurde eine einzelne Messung ausgewertet. Und die Auswertungsparameter wurden aufbewahrt. Nicht jedoch jeder einzelne Messpunkt.
Deshalb frage ich nochmals, was das für Daten sind, dass nach 1 Jahr diese 300 Milliarden Datensätze anfallen. Diese Datenmenge wird kein Computer dieser Welt in akzeptablen Zeiten auswerten können.
Es ist meines Achtens einfach mal ne ordentliche Überlegung wert, was alles gespeichert werden muss, wie man seine Daten strukturiert, und vor allem wie man die Anzahl der Datensätze drastisch senken kann. Wenn mir vorstellen muss, diese Datenmenge soll ein popeliger
MySQL Server verwalten, wird mir schlecht. Da geb ich Dir ne 100%-ige Garantie dass das in die Hose geht.