CheckSum, FAR CRC32/MD5 Plugin Опции

[-=CHE@TER=-]

К вопросу об обработке больших файлов - не работает!

Ага - это только у MD5. CRC32 - правильно считает.
Поправим.

[Капитан Фокин]

Ага - это только у MD5. CRC32 - правильно считает.
Поправим.

Неделя прошла - ждем!

[-=CHE@TER=-]

Неделя прошла - ждем!

Ну, типа, если бы мы ничего не делали кроме этого плагина - замечание было бы справедливо.

Версия 0.24 на сайте - MD5 поправили (остальные изменения - в history.??.txt).
Т.к. поторопили - то выложили неоптимизированную версию MD5 - она работает правильно, но очень медленно по сравнению со старой. Сейчас просто некогда ошибку искать.

[Капитан Фокин]

Т.к. поторопили - то выложили неоптимизированную версию MD5 - она работает правильно, но очень медленно по сравнению со старой. Сейчас просто некогда ошибку искать.

Да, неоптимизированная версия в 3 раза медленнее. Печально...

Кстати, не отрабатываются комментарии в MD5 файлах, созданных другими утилитами. То есть строка вида:
; Generated by MD5plug © Wesha, 2003
воспринимается как ошибка.

[-=CHE@TER=-]

Кстати, не отрабатываются комментарии в MD5 файлах, созданных другими утилитами. То есть строка вида:
; Generated by MD5plug © Wesha, 2003
воспринимается как ошибка.

.MD5 файлы не поддерживают комментарии. Так что это - отсебятина. Насчёт других утилит - ни одна мне известная комментарии в .MD5 файлы не пихает.

Если эту строчку генерирует программа на Си - найдите её и поставьте вместо первого символа ноль (символ с ASCII кодом ноль) - тогда она в выходной файл записываться не будет. Если не поможет - забейти её пробелами. Пустые строчки и строчки не содержащие ничего кроме пробелов - игнорируются.

[Капитан Фокин]

.MD5 файлы не поддерживают комментарии. Так что это - отсебятина. Насчёт других утилит - ни одна мне известная комментарии в .MD5 файлы не пихает.

Эту строчку "пихает" известный, видимо, только мне плагин для Far (ссылка см. пост #20). Но если это "отсебятина", тогда, конечно, придется руками править "самостийные" файлы чек-сумм.

[-=CHE@TER=-]

Эту строчку "пихает" известный, видимо, только мне плагин для Far (ссылка см. пост #20). Но если это "отсебятина", тогда, конечно, придется руками править "самостийные" файлы чек-сумм.

Если есть возможность - в файле MD5plug.dll по смещению 0x94BC замените ';' на 0 - тогда строчка не должна появляться (не проверял, но по идее должно работать).

[Капитан Фокин]

Если есть возможность - в файле MD5plug.dll по смещению 0x94BC замените ';' на 0 - тогда строчка не должна появляться (не проверял, но по идее должно работать).

Ээ... парни, я не это имел ввиду :-) Неужели сложно вставить проверку на комментарии ? Впрочем, все это суета - жду нормальную версию с обработкой >4Gb !!!

[Капитан Фокин]

Проект заброшен ?

[-=CHE@TER=-]

Скорее времени нет - работа и прочие мирские дела. Вместе с летом пора отпусков закончилась и резко навалилось работы, так что руки до чего-то ещё не доходят.
А, что, собственно не так-то?
Насчёт скорости MD5 - это Grom PE обещал посмотреть - как разберётся, где ошибка, так выложим убыстренную версию. Сейчас, видимо, ему не до этого.
Или что ещё требуется-то?

Как бы сразу объясню позицию: проект этот делался для внутреннего использования (как и многое из того, что лежит в CTPAX-X Soft). Мы просто решили поделиться им с общественностью - авось тоже кому-нибудь пригодится.

[Капитан Фокин]

Как бы сразу объясню позицию: проект этот делался для внутреннего использования (как и многое из того, что лежит в CTPAX-X Soft). Мы просто решили поделиться им с общественностью - авось тоже кому-нибудь пригодится.

Разумеется, не могу предъявлять никаких претензий Просто... Получалась очень неплохая вещь, осталось нанести буквально последний штрих - и амба!

Собственно: добить скоростную обработку больших файлов и я все же настоял бы на обработке комментариев в чек-суммах MD5 (последнее - чистое ИМХО, но, например, проект http://www.slavasoft.com/fsum/ "балуется" комментированием)

[-=CHE@TER=-]

Из экстренных вещей, которые надо сделать в новом релизе:
1. Разобраться с MD5-ASM, чтобы он работал без ошибок и заменить им тот, что используется сейчас (правильный, но тормозной).
2. Добавить обработку ";"-комментариев в файлах с контрольными суммами от MD5, для тупых программ, которые их туда пихают в обход стандарта.
3. Добавить флаг FILE_SHARE_READ при открытии файлов. В данный момент наблюдается следующий баг: если файл открыт какой-то программой в режиме чтение+запись, то его содержимое можно просмотреть по F3 в FAR, но CheckSum, при попытке его проверить, говорит что нет доступа.
4. Попробовать ещё немного разогнать CRC32 через FileMapping?..

[Xplorer]

-=CHE@TER=-
Выложи последние исходники на FTP. Я догадываюсь в чём проблема при подсчете MD5 для больших файлов.

[-=CHE@TER=-]

-=CHE@TER=-
Выложи последние исходники на FTP. Я догадываюсь в чём проблема при подсчете MD5 для больших файлов.

Спасибо! И правда всё забываю исходные коды выложить...
Выложил - 0.24. Последняя версия MD5-ASM от Grom PE там в корне будет "_MD5.PAS".
В /test/md5_check/ - тестовый стенд с дампами хэшей при подсчёте 4 Гб куска обычного и ASM MD5 алгоритмов.
До 4 Гб оба алгоритма показывают одинаковую итоговую сумму.

[Xplorer]

Залил на FTP исправленный файл. Изменил MD5Update и MD5Final.
Если будешь использовать File Mapping, то возьми за основу тот вариант, где используется Int64.

P.S. Зачем изобретать колесо (т.е. I64S)? В Windows.pas есть типы LARGE_INTEGER и ULARGE_INTEGER.

[-=CHE@TER=-]

Залил на FTP исправленный файл. Изменил MD5Update и MD5Final.

Спасибо большое!!! В самое ближайшее время прикручу к плугену и пофикшу остальные пункты из todo!

Если будешь использовать File Mapping, то возьми за основу тот вариант, где используется Int64.

Понял. Это, видимо, из /test/md5large/md5.pas

P.S. Зачем изобретать колесо (т.е. I64S)? В Windows.pas есть типы LARGE_INTEGER и ULARGE_INTEGER.

Спасибо большое - не знал.

P.S. А вообще - это колесо изобретал не я, т.к. у меня изначально маппинга и надобности в этом типе не было. (*улыбается*)


Добавлено:
Версия 0.25 на FTP - всё из экстренного ToDo сделано.
Если ни у кого больше замечаний нет - то выложу релиз на сайт в выходные - вместе с оставшимися программами от jTommy и новым ToWav.

[Капитан Фокин]

Добавлено:
Версия 0.25 на FTP - всё из экстренного ToDo сделано.

А где, собственно ?

[-=CHE@TER=-]

А где, собственно ?

Это только для команды.
Версия 0.25 на сайте.
История изменений - где и обычно.
Тестируйте, ждём отчёта.

[Капитан Фокин]

Версия 0.25 на сайте.
Тестируйте, ждём отчёта.

Обработка больших файлов проходит быстро и корректно, комменты в чек-суммах отрабатываются - спасибо! (как обычно, проверяю только MD5 алгоритм). Надеюсь, старые баги проверять не надо ? (а новые сами о себе заявят, если что).

Теперь если только "бегущие проценты" добавить, да прерывание по Esc... Кстати, а насколько сложно "перенести" отображение процесса из левого угла в информационное окно в центре ? Поясню - когда обрабатывается туча мелких файлов и процесс идет быстро, то не успеваешь "забыть", что происходит. А когда калькулируются большие файлы, то подчас "не отвечающее" окно FAR-а шокирует (потом только "вспоминаешь", что чек-суммы считаем и смотришь в левый угол ). А так - окно в центре, процесс идет, "не надо делать резких движений, господа"

[-=CHE@TER=-]

Теперь если только "бегущие проценты" добавить, да прерывание по Esc... Кстати, а насколько сложно "перенести" отображение процесса из левого угла в информационное окно в центре ?

Это надо для диалогов AdvControl() запинывать. Она криво объявлена в Pascal-модулях, даже размер структуры с сишным заголовочным файлом не совпадает. Короче, чтобы что-то сделать нужно сначала исправить косяк самого FAR Plugin SDK для Pascal.
А ESC и % сделать не особенно сложно (надо CallBack-процедуру прикрутить).
Но, конечно, для того чтобы что-то сделать нужно свободное время.
Так что "when it's done" ©.