AGB  ·  Datenschutz  ·  Impressum  







Anmelden
Nützliche Links
Registrieren
Zurück Delphi-PRAXiS Programmierung allgemein Win32/Win64 API (native code) Dateisystemcache invalidieren erzwingen

Dateisystemcache invalidieren erzwingen

Ein Thema von Assarbad · begonnen am 12. Jan 2017 · letzter Beitrag vom 15. Jan 2017
Antwort Antwort
Seite 1 von 2  1 2   
Benutzerbild von Assarbad
Assarbad

Registriert seit: 8. Okt 2010
Ort: Frankfurt am Main
1.234 Beiträge
 
#1

Dateisystemcache invalidieren erzwingen

  Alt 12. Jan 2017, 23:42
Moin, kennt hier jemand einen besseren Weg den Dateisystemcache für einen Datenträger zu invalidieren (also ungültig zu markieren) als das erzwungene Trennen der Verbindung eines externen Datenträgers? Gibt es also bspw. eine praktische Methode (außer Neustart) um den Cache von fest verbundenen Datenträgern als ungültig zu markieren?

Danke.
Oliver
"... aber vertrauen Sie uns, die Physik stimmt." (Prof. Harald Lesch)
  Mit Zitat antworten Zitat
Benutzerbild von Uwe Raabe
Uwe Raabe

Registriert seit: 20. Jan 2006
Ort: Lübbecke
10.934 Beiträge
 
Delphi 12 Athens
 
#2

AW: Dateisystemcache invalidieren erzwingen

  Alt 12. Jan 2017, 23:52
Keine Ahnung, ob es tut was du brauchst: Flush Windows File Cache
Uwe Raabe
Certified Delphi Master Developer
Embarcadero MVP
Blog: The Art of Delphi Programming
  Mit Zitat antworten Zitat
Benutzerbild von jfheins
jfheins

Registriert seit: 10. Jun 2004
Ort: Garching (TUM)
4.579 Beiträge
 
#3

AW: Dateisystemcache invalidieren erzwingen

  Alt 12. Jan 2017, 23:54
Ich hab mal gesucht und das hier gefunden: http://superuser.com/a/417112/254399
Das leert wohl den Dateicache im RAM für alle Dateien wo das ohne Datenverlust geht. Für alle Datenträger. Geht das in die Richtung, die du suchst?
  Mit Zitat antworten Zitat
Benutzerbild von himitsu
himitsu

Registriert seit: 11. Okt 2003
Ort: Elbflorenz
43.017 Beiträge
 
Delphi 12 Athens
 
#4

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 02:10
Man wird doch bestimmt auch per Console/WinAPI diese Einstellungen mal kurz ändern können?
Das Betrifft dann aber natürlich nur den Schreibcache und nicht den Lesecache.
hddcache.png

Von Ratiopharm Sysinternals gibt es bestimmt auch was, aber ich glaube das ging auch nur auf Alles und nicht nur auf ein bestimmtes Laufwerk.

Oder du machst das, was diese supercoolen RamCleaner machen ... den Arbeitsspeicher überfüllen und den Cache rauswerfen. (inkl. alles in die PageFile verschieben )
Ich hatte mir och mal 'nen Konsolenprogrämmchen geschrieben, welches sich viel Speicher im physischen RAM reservierte, um den Cache zu leeren. (man muß danach halt noch ein paar minuten warten, bis die wichtigsten Programme wieder zurück sind, bevor man mit Datenträgertests loslegt)
Garbage Collector ... Delphianer erzeugen keinen Müll, also brauchen sie auch keinen Müllsucher.
my Delphi wish list : BugReports/FeatureRequests

Geändert von himitsu (13. Jan 2017 um 02:13 Uhr)
  Mit Zitat antworten Zitat
Benutzerbild von Assarbad
Assarbad

Registriert seit: 8. Okt 2010
Ort: Frankfurt am Main
1.234 Beiträge
 
#5

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 09:48
Oh, pardon. Mir geht es ausschließlich um den Lesecache. Da ich die Geschwindigkeit verschiedener Methoden des Einlesens des Datenträgers gegeneinander vergleichen möchte.
Oliver
"... aber vertrauen Sie uns, die Physik stimmt." (Prof. Harald Lesch)
  Mit Zitat antworten Zitat
Benutzerbild von himitsu
himitsu

Registriert seit: 11. Okt 2003
Ort: Elbflorenz
43.017 Beiträge
 
Delphi 12 Athens
 
#6

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 10:37
Dann lies doch einfach NonCached ein.
Das ignoriert komplett den Cache, selbst wenn schon was da drin ist.

Wollte mal NonCached NonBuffered einlesen, damit nichts Neues in den Cache kommt, aber was schon drin ist, hätte ich gern verwendet ... geht "leider" nicht , also perfekt für dich.

FILE_FLAG_NO_BUFFERING : beim Schreiben und Lesen nicht über den WindowsFileCache
FILE_FLAG_WRITE_THROUGH : beim Schreiben geht es am WindowsFileCache und DiscCache vorbei, bzw. leert sie sofort wieder
FILE_FLAG_RANDOM_ACCESS oder FILE_FLAG_SEQUENTIAL_SCAN : Windows schonmal sagen, ob du irre in der Datei rumwedelst oder einfach nur die Datei "einmal" hintereinander einlesen willst. (aber einen Effekt hatte ich nicht wirklich bemerkt)
Und du mußt in Vielfachen der Sektorgröße schreiben/lesen, wenn du ohne Buffer arbeiten willst. (beim Schreiben am Ende einfach das Zufiele wieder abschneiden > SetEndOfFile)

https://msdn.microsoft.com/en-us/lib...ching_behavior
https://msdn.microsoft.com/en-us/lib...(v=vs.85).aspx


Bzw. was willst'e denn rausbekommen?
Damals, mit meinem Hier im Forum suchenFileSplitter, hatte ich ja ein bissl zu viel rumgetestet.
Garbage Collector ... Delphianer erzeugen keinen Müll, also brauchen sie auch keinen Müllsucher.
my Delphi wish list : BugReports/FeatureRequests

Geändert von himitsu (13. Jan 2017 um 10:45 Uhr)
  Mit Zitat antworten Zitat
Benutzerbild von p80286
p80286

Registriert seit: 28. Apr 2008
Ort: Stolberg (Rhl)
6.659 Beiträge
 
FreePascal / Lazarus
 
#7

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 11:36
Oh, pardon. Mir geht es ausschließlich um den Lesecache. Da ich die Geschwindigkeit verschiedener Methoden des Einlesens des Datenträgers gegeneinander vergleichen möchte.
Da im "Normalfall" eine Datei gelesen wird, die überall liegen kann, Festplatte/SSD/USB/Netzlaufwerk, warum sollte man für jedes Speichermedium eine eigene optimale Verfahrensweise suchen?

Gruß
K-H
Programme gehorchen nicht Deinen Absichten sondern Deinen Anweisungen
R.E.D retired error detector
  Mit Zitat antworten Zitat
Benutzerbild von Assarbad
Assarbad

Registriert seit: 8. Okt 2010
Ort: Frankfurt am Main
1.234 Beiträge
 
#8

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 11:52
Ich lese ja gerade nicht Dateiinhalte (kein Öffnen der Dateien) ein, sondern welche Dateien und Verzeichnisse es gibt. Das ist der Cache den ich augenscheinlich nicht beeinflussen kann mit irgendwelchen Flags beim Einlesen.

Laufwerk trennen ist zwar auf Dauer etwas unpraktisch, aber wenn hier keiner eine bessere Methode kennt, bleib ich dabei.

Damals, mit meinem Hier im Forum suchenFileSplitter, hatte ich ja ein bissl zu viel rumgetestet.
Gucke ich mir an. Vielleicht finde ich da ja Hinweise.

Da im "Normalfall" eine Datei gelesen wird, die überall liegen kann, Festplatte/SSD/USB/Netzlaufwerk, warum sollte man für jedes Speichermedium eine eigene optimale Verfahrensweise suchen?
Du mißverstehst. Es gibt tatsächlich noch andere Methoden als FindFirstFile/FindFirstFileEx und ich möchte die vergleichen. Und ja, Netzwerklaufwerke werden auch irgendwann in den Vergleich einfließen. Aber der Vergleich ist zwischen verschiedenen Methoden auf den jeweils gleichen Datenträgern. Ich muß nur den Zwischenspeicher irgendwie aus meinem Vergleich herausbekommen.
Oliver
"... aber vertrauen Sie uns, die Physik stimmt." (Prof. Harald Lesch)

Geändert von Assarbad (13. Jan 2017 um 11:54 Uhr)
  Mit Zitat antworten Zitat
Benutzerbild von himitsu
himitsu

Registriert seit: 11. Okt 2003
Ort: Elbflorenz
43.017 Beiträge
 
Delphi 12 Athens
 
#9

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 12:14
In FAT/FAT32 sind Verzeichnisse auch "nur" sowas wie Dateien mit paar Records drin.
Bei großen Verzeichnissen mit massig Dateien wäre das schneller, wenn man die FAT selber parst, aber bei all dem kommst du ohne gewisse Rechte (Admin) nicht an doe Rohdaten.
(außer bei Wechsellaufwerken, ala USB-Sticks, wo man nicht so viele Rechte braucht)

Bezüglich NTFS könntest du die MFT auslesen (da gibt es irgendwo in der DP paar Codes dafür), das geht vorallem bei großen/tiefen Verzeichnisstrukturen wesentlich schneller, als sich überall mit FindFirstFile/FindNextFile einzeln durch alle Ebenen zu kämpfen.
Garbage Collector ... Delphianer erzeugen keinen Müll, also brauchen sie auch keinen Müllsucher.
my Delphi wish list : BugReports/FeatureRequests
  Mit Zitat antworten Zitat
Benutzerbild von p80286
p80286

Registriert seit: 28. Apr 2008
Ort: Stolberg (Rhl)
6.659 Beiträge
 
FreePascal / Lazarus
 
#10

AW: Dateisystemcache invalidieren erzwingen

  Alt 13. Jan 2017, 13:36
In FAT/FAT32 sind Verzeichnisse auch "nur" sowas wie Dateien mit paar Records drin.
Bei großen Verzeichnissen mit massig Dateien wäre das schneller, wenn man die FAT selber parst, aber bei all dem kommst du ohne gewisse Rechte (Admin) nicht an doe Rohdaten.
(außer bei Wechsellaufwerken, ala USB-Sticks, wo man nicht so viele Rechte braucht)
War da nicht mal was mit zwei Versionen der FAT damit man diese auf Fehler prüfen kann?
Ich kann mich erinnern, daß es da (funktionsfähige) Datenträger gab bei denen die zweite FAT nur Schrott war. Da mußt Du vorsichtig sein.

Gruß
K-H
Programme gehorchen nicht Deinen Absichten sondern Deinen Anweisungen
R.E.D retired error detector
  Mit Zitat antworten Zitat
Antwort Antwort
Seite 1 von 2  1 2   

Themen-Optionen Thema durchsuchen
Thema durchsuchen:

Erweiterte Suche
Ansicht

Forumregeln

Es ist dir nicht erlaubt, neue Themen zu verfassen.
Es ist dir nicht erlaubt, auf Beiträge zu antworten.
Es ist dir nicht erlaubt, Anhänge hochzuladen.
Es ist dir nicht erlaubt, deine Beiträge zu bearbeiten.

BB-Code ist an.
Smileys sind an.
[IMG] Code ist an.
HTML-Code ist aus.
Trackbacks are an
Pingbacks are an
Refbacks are aus

Gehe zu:

Impressum · AGB · Datenschutz · Nach oben
Alle Zeitangaben in WEZ +1. Es ist jetzt 06:42 Uhr.
Powered by vBulletin® Copyright ©2000 - 2024, Jelsoft Enterprises Ltd.
LinkBacks Enabled by vBSEO © 2011, Crawlability, Inc.
Delphi-PRAXiS (c) 2002 - 2023 by Daniel R. Wolf, 2024 by Thomas Breitkreuz