Соревнователь архиваторов

Планы, идеология, архитектура и т.п.

Модератор: Модераторы

Соревнователь архиваторов

Сообщение Alexander » 17.05.2024 10:36:16

Навеяно темой про PeaZip.

На входе сжимаемый файл, на выходе - архив победитель в соревновании и его имя на стандартный вывод.
Соревнуются архиваторы по максимальной степени сжатия.

Makefile :
Код: Выделить всё
compressorscontest:
        fpc -Cg -O3 -CX -XX compressorscontest.pas
        -sstrip compressorscontest
clean:
        rm -f *.ppu *.o compressorscontest


compressorscontest.pas :
Код: Выделить всё
program compressorscontest;

{$MODE OBJFPC}
{$LONGSTRINGS ON}
{$SMARTLINK ON}

{
    Compressors contest.
    For GNU/Linux 64 bit version.
    Version: 1.
    Written on FreePascal (https://freepascal.org/).
    Copyright (C) 2024  Artyomov Alexander
    http://self-made-free.ru/
    aralni@mail.ru

    This program is free software: you can redistribute it and/or modify
    it under the terms of the GNU Affero General Public License as
    published by the Free Software Foundation, either version 3 of the
    License, or (at your option) any later version.

    This program is distributed in the hope that it will be useful,
    but WITHOUT ANY WARRANTY; without even the implied warranty of
    MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
    GNU Affero General Public License for more details.

    You should have received a copy of the GNU Affero General Public License
    along with this program.  If not, see <https://www.gnu.org/licenses/>.
}

uses
unix, sysutils, DateUtils;

const
MAX_ARCS=13;
var
a : array[0..MAX_ARCS] of string = ('xz -k -e','bzip2 -k -9','gzip -k -9','lzip -k -9','quad -x','zstd -k --ultra','kgb -9','zip','arj a','lzop -k -9','7z a -mx9','pack --press=hard -i','paq9a a','lbzip2 -k -9');
e : array[0..MAX_ARCS] of string = ('xz','bz2','gz','lz','quad','zst','kgb','zip','arj','lzo','7z','pack','paq9a','bz2');
f : Int64;
filename : utf8string;
fp : file of byte;
fs : Int64;
min : Int64 = 0;
nodel : Int64 = 0;

MilliSecondsDiff: Int64;
FromTime, ToTime: TDateTime;

function chext(s, e : utf8string) : utf8string;
var f, l : Int64;
begin
l := Length(s);
for f := l downto 1 do begin
if s[f] = '.' then begin
Exit(Copy(s, 1, l - (l-f))+e);
end;
end; {next f}
Exit(s+'.'+e);
end;

begin
WriteLn(stderr,'Use: compressorscontest file.tar');
if ParamCount > 0 then begin
WriteLn(stderr,ParamStr(1));
a[6] := a[6] + ' ' + ParamStr(1) + '.kgb';
a[7] := a[7] + ' ' + ParamStr(1) + '.zip';
a[8] := a[8] + ' ' + ParamStr(1) + '.arj';
a[10] := a[10] + ' ' + ParamStr(1) + '.7z';
a[12] := a[12] + ' ' + ParamStr(1) + '.paq9a -9';

for f := 0 to MAX_ARCS do begin
FromTime := Now();
fpSystem(a[f] + ' ' + ParamStr(1) + ' > /dev/null 2>/dev/null');
ToTime := Now();
MilliSecondsDiff := MilliSecondsBetween(ToTime,FromTime);
if f = 11 then filename := chext(ParamStr(1), e[11])
else filename := ParamStr(1) + '.' + e[f];
Write(stderr,'* ',filename, '  Time:', MilliSecondsDiff, ' Size:');
Assign(fp, filename);
FileMode:=0;
ReSet(fp);
fs := FileSize(fp);
Close(fp);
WriteLn(stderr, fs);

if min <> 0 then begin
if fs < min then begin
  min := fs;
  nodel := f;
end;
end else min := fs;

end; {next f}

for f := 0 to MAX_ARCS do begin
if f = 11 then filename := chext(ParamStr(1), e[11])
else filename := ParamStr(1) + '.' + e[f];
if f <> nodel then DeleteFile(filename)
else WriteLn(filename);
end; {next f}

end;
end.


Может добавить ещё архиваторов для соревнования ? Тогда каких ?
Последний раз редактировалось Alexander 23.05.2024 12:16:09, всего редактировалось 7 раз(а).
Аватара пользователя
Alexander
энтузиаст
 
Сообщения: 771
Зарегистрирован: 18.12.2005 19:10:00
Откуда: оттуда

Re: Соревнователь архиваторов

Сообщение WAYFARER » 17.05.2024 11:00:31

Alexander писал(а):Может добавить ещё архиваторов для соревнования ? Тогда каких ?

lzop, 7zip)
Аватара пользователя
WAYFARER
энтузиаст
 
Сообщения: 537
Зарегистрирован: 09.10.2009 00:00:04
Откуда: г. Курган

Re: Соревнователь архиваторов

Сообщение Alexander » 17.05.2024 11:25:52

Добавил.
Аватара пользователя
Alexander
энтузиаст
 
Сообщения: 771
Зарегистрирован: 18.12.2005 19:10:00
Откуда: оттуда

Re: Соревнователь архиваторов

Сообщение WAYFARER » 17.05.2024 18:54:27

Надо еще замер скорости добавить)
Мне интересно было посмотреть кто лучше сжимает текстовые данные с большим количеством повторяющегося содержимого, а так же мелкие файлы не увеличивая их размер.
Победитель в первом случае kgb, во втором никто.
Аватара пользователя
WAYFARER
энтузиаст
 
Сообщения: 537
Зарегистрирован: 09.10.2009 00:00:04
Откуда: г. Курган

Re: Соревнователь архиваторов

Сообщение Alexander » 17.05.2024 21:25:46

Добавил и его.
Аватара пользователя
Alexander
энтузиаст
 
Сообщения: 771
Зарегистрирован: 18.12.2005 19:10:00
Откуда: оттуда

Re: Соревнователь архиваторов

Сообщение Alek_Aaz » 21.05.2024 15:55:05

Проект Pack предпринял попытку создания формата для архивирования файлов, построенного на базе библиотеки SQLite и алгоритма сжатия ZSTD (Zstandard). Подготовленный прототип, написанный на языке Pascal и распространяемый под лицензией Apache 2.0, обогнал по скорости создания архивов наиболее распространённые архиваторы, при том, что его работа сводилась к чтению данных, сжатию библиотекой libzstd и выполнению SQL-операций по добавлению сжатых данных в файл с БД SQLite.

https://pack.ac/note/pack
Прикольно эту идею в GUI завернуть...
Alek_Aaz
новенький
 
Сообщения: 40
Зарегистрирован: 26.11.2007 04:13:06

Re: Соревнователь архиваторов

Сообщение Alexander » 22.05.2024 06:35:51

Добавил pack. И изменил перенаправление ввода-вывода.

Что касается GUI, то может и в сам peazip такие функции добавить (1 . Провести соревнование, 2. Сжать максимальным методом на основе соревнования). А может и отдельно GUI такой сделать.
Аватара пользователя
Alexander
энтузиаст
 
Сообщения: 771
Зарегистрирован: 18.12.2005 19:10:00
Откуда: оттуда

Re: Соревнователь архиваторов

Сообщение RRYTY » 23.05.2024 06:44:36

Многопоточность? lbzip2.
RRYTY
постоялец
 
Сообщения: 208
Зарегистрирован: 25.12.2021 10:00:32

Re: Соревнователь архиваторов

Сообщение Alexander » 23.05.2024 09:24:06

Добавил lbzip2. И встретившийся походу paq9a.
Аватара пользователя
Alexander
энтузиаст
 
Сообщения: 771
Зарегистрирован: 18.12.2005 19:10:00
Откуда: оттуда


Вернуться в Разработки на нашем сайте

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 18

Рейтинг@Mail.ru