Brainstorming: Datei mit definierter Entropie erzeugen

[API]

http://www.shannonentropy.netmark.pl/calculate liefert einen leicht anderen Wert.

H(X) = 3.59448

Code:

CDU
CSU
FDP
SPD
Grüne

[Uwe Raabe]

Wie ermittelst du denn die Entropie?

[PeterPanino]

Wenn ich aber diese Textdatei verwende:

Zitat:

enürG
DPS
PDF
USC
UDC

komme ich wieder auf den ersten Wert: 3,49366068968819

[PeterPanino]

Zitat:

Zitat von Uwe Raabe (Beitrag 1412056)

Wie ermittelst du denn die Entropie?

Es geht um "Shannon's Formula", die MiTeC auf meine Anregung hin in TPEReader integriert hat.

Zur Ermittlung zweckentfremde :oops: ich die Klasse TPEReader von MiTeC:

Delphi-Quellcode:

uses
  MiTeC_PE;

var
  PE: TPEReader;

procedure TForm3.FormCreate(Sender: TObject);
begin
  PE := TPEReader.Create;
  try
    PE.FileName := 'R:\test.txt';
    CodeSite.Send('TForm3.FormCreate: ', PE.Entropy.ToString);
  finally
    PE.Free;
  end;
end;

[Uwe Raabe]

Zitat:

Zitat von PeterPanino (Beitrag 1412060)

Es geht um "Shannon's Formula",

OK, das ist dann allerdings eine andere Definition von Entropie.

[Rollo62]

Die Entropie hängt doch sicher auch vom Zeichensatz ab, ob english, kyrilliusch, chinesisch, ANSI, UTF16, ...

[KodeZwerg]

In Bezug zu PE Dateien vermute ich stellt die Entropy dar, ob Datei gepackt wurde. 8 sollte maximum Darstellen, also stark gepackt und 1 wäre zu 100% ungepackt. Kann ich gerade nicht nachvollziehen da mir diese Unit/Klasse fehlt, zum nachschauen kaufe ich das nicht.

[PeterPanino]

Zitat:

Zitat von KodeZwerg (Beitrag 1412075)

In Bezug zu PE Dateien vermute ich stellt die Entropy dar, ob Datei gepackt wurde. 8 sollte maximum Darstellen, also stark gepackt und 1 wäre zu 100% ungepackt. Kann ich gerade nicht nachvollziehen da mir diese Unit/Klasse fehlt, zum nachschauen kaufe ich das nicht.

Nein, es ist wirklich die Entropie-Berechnung laut Shannon's Formula.

[PeterPanino]

Zitat:

Zitat von Rollo62 (Beitrag 1412073)

Die Entropie hängt doch sicher auch vom Zeichensatz ab, ob english, kyrilliusch, chinesisch, ANSI, UTF16, ...

In diesem Fall wird das byteweise (also nicht als Text) aus der Datei ausgelesen.

[KodeZwerg]

Erstell mal bitte Dateien mit folgenden Inhalt und sage Entropy dazu.

Code:

1234567890

Code:

1111222333

hier ist hinten noch ein leerzeichen!

Code:

1 2 3 4 5

hier ist vorne noch ein leerzeichen!

Code:

 1 2 3 4 5

Danke.