AGB  ·  Datenschutz  ·  Impressum  







Anmelden
Nützliche Links
Registrieren
Thema durchsuchen
Ansicht
Themen-Optionen

Große Dateien in den Speicher laden

Ein Thema von derDoc · begonnen am 24. Aug 2005 · letzter Beitrag vom 25. Aug 2005
Antwort Antwort
derDoc

Registriert seit: 8. Jul 2005
6 Beiträge
 
Delphi 7 Professional
 
#1

Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 11:55
Ich stehe vor einem kleinen Problem:

Ich möchte eine Datei (1-2 GB) in teilweise in den Speicherladen, sodass ich jeweils immer mit einem Block arbeiten kann.
Leider gelingt mir das nicht so.

Die Blöcke sollen die Größe 9.728.000 Bytes haben. Leider will mein Delphi keine Arrays von dieser Größe erstellen (EStackOverflow). Gibt es eine andere Möglichkeit, diesen Block in den Speicher zu bekommen?

Welche Arten von Buffern können diese Mengen an Daten aufnehmen?
  Mit Zitat antworten Zitat
dfried

Registriert seit: 16. Aug 2005
486 Beiträge
 
#2

Re: Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 12:02
Ein TMemoryStream muesste das auf jeden Fall können, aber was willst du denn mit den daten machen bzw. wie sehen die Daten denn aus?

Gruß
Daniel
  Mit Zitat antworten Zitat
derDoc

Registriert seit: 8. Jul 2005
6 Beiträge
 
Delphi 7 Professional
 
#3

Re: Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 12:10
Also die Daten sind ganz normale Dateien (binär). Ich möchte daraus dann einzelne Blöcke auslesen und hashen.

Kannst du das mit dem MemoryStream mal etwas genauer benennen?
  Mit Zitat antworten Zitat
Benutzerbild von SirThornberry
SirThornberry
(Moderator)

Registriert seit: 23. Sep 2003
Ort: Bockwen
12.235 Beiträge
 
Delphi 2006 Professional
 
#4

Re: Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 12:36
warum willst du die gesammte Datei in den Memory laden? Für diesen Zweck gibt es MemoryMapped files oder so ähnlich.
Jens
Mit Source ist es wie mit Kunst - Hauptsache der Künstler versteht's
  Mit Zitat antworten Zitat
dfried

Registriert seit: 16. Aug 2005
486 Beiträge
 
#5

Re: Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 12:39
Nur so mal als kleines Beispiel:

Delphi-Quellcode:
var fs : TFileStream;
    ms : TMemoryStream;
    anz : Integer;
begin
  fs := TFileStream.Create(ExtractFilePath(Application.ExeName)+'XXX.zip',fmOpenRead);
  ms := TMemoryStream.Create;
  try
    while fs.Size > fs.Position do begin
      if (fs.Size - fs.Position) > 9728000 then
        anz := 9728000
      else
        anz := (fs.Size - fs.Position);
      ms.Clear;
      ms.CopyFrom(fs,anz);
      // Hier kannst du jetzt mit den Daten im Speicher etwas machen
      ....
    end;
  finally
    ms.Free;
    fs.Free;
  end;

Gruß
Daniel
  Mit Zitat antworten Zitat
Olli
(Gast)

n/a Beiträge
 
#6

Re: Große Dateien in den Speicher laden

  Alt 24. Aug 2005, 14:19
Definitiv MMFs benutzen und jeweils den View verschieben!

Zitat von derDoc:
Die Blöcke sollen die Größe 9.728.000 Bytes haben. Leider will mein Delphi keine Arrays von dieser Größe erstellen (EStackOverflow). Gibt es eine andere Möglichkeit, diesen Block in den Speicher zu bekommen?
Autsch ... du legst doch nicht etwa statische Arrays dieser Größe an? Da ist keineswegs Delphi schuld. Solche riesigen Dinger packt man niemals auf den Stack sondern immer auf den Heap. Also nicht auf Delphi fluchen, bitte!
  Mit Zitat antworten Zitat
derDoc

Registriert seit: 8. Jul 2005
6 Beiträge
 
Delphi 7 Professional
 
#7

Re: Große Dateien in den Speicher laden

  Alt 25. Aug 2005, 07:37
Gut, ich werde mir mal die Memory Mapped Files ansehen. Außerdem werde ich mal schauen, inwieweit ich die Blöckgröße weiter aufspalten kann.

Danke.
  Mit Zitat antworten Zitat
Antwort Antwort


Forumregeln

Es ist dir nicht erlaubt, neue Themen zu verfassen.
Es ist dir nicht erlaubt, auf Beiträge zu antworten.
Es ist dir nicht erlaubt, Anhänge hochzuladen.
Es ist dir nicht erlaubt, deine Beiträge zu bearbeiten.

BB-Code ist an.
Smileys sind an.
[IMG] Code ist an.
HTML-Code ist aus.
Trackbacks are an
Pingbacks are an
Refbacks are aus

Gehe zu:

Impressum · AGB · Datenschutz · Nach oben
Alle Zeitangaben in WEZ +1. Es ist jetzt 08:14 Uhr.
Powered by vBulletin® Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
LinkBacks Enabled by vBSEO © 2011, Crawlability, Inc.
Delphi-PRAXiS (c) 2002 - 2023 by Daniel R. Wolf, 2024 by Thomas Breitkreuz