Скрипт зеркала nod32 mirror script

[Protei]

Конфиг там один - nod32ms.conf

[Хостинг HostFood.ru]

Тарифы на хостинг в России, от 12 рублей: https://www.host-food.ru/tariffs/hosting/
Тарифы на виртуальные сервера (VPS/VDS/KVM) в РФ, от 189 руб.: https://www.host-food.ru/tariffs/virtualny-server-vps/
Выделенные сервера, Россия, Москва, от 2000 рублей (HP Proliant G5, Intel Xeon E5430 (2.66GHz, Quad-Core, 12Mb), 8Gb RAM, 2x300Gb SAS HDD, P400i, 512Mb, BBU):
https://www.host-food.ru/tariffs/vydelennyi-server-ds/
Недорогие домены в популярных зонах: https://www.host-food.ru/domains/

[gazizeldar]

убрал в nod32ms.conf в директории назначения слеш,
но один фиг выкидывает ошибку

Код: Выделить всё

13:34:21: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/update.ver  OK
All OK

13:34:21: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/]--2014-08-13 13:34:21--  http://update.eset.com/eset_upd/v4/update.ver
Распознаётся update.eset.com (update.eset.com)... 91.228.167.26, 91.228.167.132, 91.228.167.133, ...
Подключение к update.eset.com (update.eset.com)|91.228.167.26|:80... соединение установлено.
HTTP-запрос отправлен. Ожидание ответа... 200 OK
Длина: 6795 (6,6K) [application/octet-stream]
Сохранение в каталог: <<<</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>>>>.

100%[===========================================================================================================================================================>] 6 795       --.-K/s   за 0,01s

2014-08-13 13:34:21 (498 KB/s) - <</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>> saved [6795/6795]


13:34:21: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v4/update.ver  OK
All OK

13:34:21: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v4/]--2014-08-13 13:34:21--  http://update.eset.com/eset_upd/v5/update.ver
Распознаётся update.eset.com (update.eset.com)... 91.228.167.132, 91.228.167.133, 38.90.226.36, ...
Подключение к update.eset.com (update.eset.com)|91.228.167.132|:80... соединение установлено.
HTTP-запрос отправлен. Ожидание ответа... 200 OK
Длина: 9143 (8,9K) [application/octet-stream]
Сохранение в каталог: <<<</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>>>>.

100%[===========================================================================================================================================================>] 9 143       --.-K/s   за 0,02s

2014-08-13 13:34:21 (494 KB/s) - <</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>> saved [9143/9143]


13:34:21: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v5/update.ver  OK
All OK

13:34:21: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v5/]--2014-08-13 13:34:21--  http://update.eset.com/eset_upd/v6/update.ver
Распознаётся update.eset.com (update.eset.com)... 91.228.167.133, 38.90.226.36, 38.90.226.37, ...
Подключение к update.eset.com (update.eset.com)|91.228.167.133|:80... соединение установлено.
HTTP-запрос отправлен. Ожидание ответа... 200 OK
Длина: 7075 (6,9K) [application/octet-stream]
Сохранение в каталог: <<<</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>>>>.

100%[===========================================================================================================================================================>] 7 075       --.-K/s   за 0,01s

2014-08-13 13:34:21 (482 KB/s) - <</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>> saved [7075/7075]


13:34:21: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v6/update.ver  OK
All OK

13:34:22: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v6/]--2014-08-13 13:34:22--  http://update.eset.com/eset_upd/v7/update.ver
Распознаётся update.eset.com (update.eset.com)... 38.90.226.36, 38.90.226.37, 38.90.226.38, ...
Подключение к update.eset.com (update.eset.com)|38.90.226.36|:80... соединение установлено.
HTTP-запрос отправлен. Ожидание ответа... 200 OK
Длина: 6904 (6,7K) [application/octet-stream]
Сохранение в каталог: <<<</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>>>>.

100%[===========================================================================================================================================================>] 6 904       --.-K/s   за 0,01s

2014-08-13 13:34:22 (489 KB/s) - <</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver>> saved [6904/6904]


13:34:22: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v7/update.ver  OK
All OK

13:34:22: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v7/]
13:34:22: REMOVE INVALID KEY [EAV-0089826020:m94494697c]
13:34:23: REMOVE INVALID KEY [TRIAL-0091166561:2ukj2f49xa]
13:34:23: REMOVE INVALID KEY [TRIAL-0088454799:xsfk2kbppf]
13:34:26: SELECTED TO UPDATE '1798' FILES TOTAL SIZE OF '792 Mb'
13:34:26: VERSION SIGNATURE ''cp: /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/update.ver: No such file or directory

13:34:26: ERROR [nod32ms::DownloadSignature] FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/update.ver] NOT COPY TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/Array
(
    [0] => [nod32ms::DownloadSignature] FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/update.ver] NOT COPY TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/
)

и что скажут светлые головы?

[gazizeldar]

тыщу извинений, невнимательность
в конфиге временную директорию и рабочую директорию одинаково пометил
сделал так
temp_dir = /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp
и влогах светануло так

Код: Выделить всё

Сохранение в каталог: <<<</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/update.ver>>>>.

100%[===========================================================================================================================================================>] 6 904       --.-K/s   за 0,01s

2014-08-13 13:44:02 (490 KB/s) - <</usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/update.ver>> saved [6904/6904]


13:44:02: DOWNLOAD NEW [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/update.ver] FILE
UNRAR 4.20 beta 1 freeware      Copyright (c) 1993-2012 Alexander Roshal


Extracting from /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/update.ver

Extracting  /usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/eset_upd/v7/update.ver  OK
All OK

13:44:02: UNRAR FILE [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/temp/eset_upd/v7/]
13:44:02: REMOVE INVALID KEY [EAV-0089826020:m94494697c]
13:44:02: REMOVE INVALID KEY [TRIAL-0091166561:2ukj2f49xa]
13:44:03: REMOVE INVALID KEY [TRIAL-0088454799:xsfk2kbppf]
13:44:06: SELECTED TO UPDATE '1798' FILES TOTAL SIZE OF '792 Mb'
13:44:06: VERSION SIGNATURE ''
13:44:06: COPY TEMP [update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/update.ver]
13:44:06: COPY TEMP [update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v4/update.ver]
13:44:06: COPY TEMP [update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v5/update.ver]
13:44:06: COPY TEMP [update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v6/update.ver]
13:44:06: COPY TEMP [update.ver] TO [/usr/home/office/domains/nod.office.rauan-burabay.kz/public_html/eset_upd/v7/update.ver]

по идее все норма же?

[victorsh]

Всем привет, никак не получается победить проблему.
unrar не распаковывает update.ver

FreeBSD 9.1

Код: Выделить всё

unrar t update.ver

UNRAR 5.01 freeware      Copyright (c) 1993-2013 Alexander Roshal

Cannot open update.ver
No such file or directory
No files to extract

При этом 7zip распаковывает на ура

Код: Выделить всё

7z t update.ver

7-Zip [64] 9.20  Copyright (c) 1999-2010 Igor Pavlov  2010-11-18
p7zip Version 9.20 (locale=C,Utf16=off,HugeFiles=on,4 CPUs)

Processing archive: update.ver

Testing     update.ver

Everything is Ok

Size:       154541
Compressed: 10522

Отсюда два вопроса:
1. Что может быть? Делать downgrade unrar'a?
2. Как правильно вписать, чтобы скрипт использовала для распаковки 7zip?

Я вписал строчку

Код: Выделить всё

case "FreeBSD": system("7z x -y ".$source." -o".$dest); break;

Правильно?

[victorsh]

И ещё одно,
вроде всё работает с 7zip, но после скачивания каждого файла идет ошибка chmod

Код: Выделить всё

--2014-08-14 11:50:49--  http://TRIAL-0118291589:*password*@um21.eset.com/v7-rel-sta/mod_031_speclean_1002/em031_32_n2.nup
Resolving um21.eset.com (um21.eset.com)... 91.228.167.26
Connecting to um21.eset.com (um21.eset.com)|91.228.167.26|:80... connected.
HTTP request sent, awaiting response... 401 Unauthorized
Reusing existing connection to um21.eset.com:80.
HTTP request sent, awaiting response... 200 OK
Length: 3563 (3.5K) [application/octet-stream]
Saving to: '/usr/local/www/nod32_upd/v7-rel-sta/mod_031_speclean/em031_32_n2.nup'

100%[==========================================================================================>] 3,563       --.-K/s   in 0.001s

2014-08-14 11:50:49 (4.10 MB/s) - '/usr/local/www/nod32_upd/v7-rel-sta/mod_031_speclean/em031_32_n2.nup' saved [3563/3563]

chmod: -R: No such file or directory

Это можно как-то исправить?

[gazizeldar]

ну вроде Унраром нечего распаковывать, так матюкается
а не могет сохранить вроде поменяй права что бы 777 было....
у меня так получилось

[victorsh]

ну вроде Унраром нечего распаковывать, так матюкается
а не могет сохранить вроде поменяй права что бы 777 было....
у меня так получилось

Один и тот же файл, права выставил максимальные, 7zip распаковывает, а unrar нет.
В общем с 7zip скрипт заработал.

[victorsh]

Спасибо за патч.
Скрипт заработал, хоть и пришлось пользоваться для распаковки 7zip а не unrar.
Обнаружил, что в логах не пишет версию сигнатур

Код: Выделить всё

[14/08/2014 16:00:03]SELECTED TO UPDATE '1793' FILES TOTAL SIZE OF '786 Mb'
[14/08/2014 16:00:03]VERSION SIGNATURE ''

ну и на chmod почему-то ругается, хотя всё работает.

[Mad Max]

не подкините пример nod32ms.conf, а то в архиве его нет, а по гвайду тож не фонтан инфы

[svetogor82]

у меня не работает выдает

Код: Выделить всё

16:14:09: RUN FINDER KEYS
16:14:09: ERROR [nod32ms::FindKeys] VALID KEYS NOT FOUND, TRY CHANGE keys_autofind_page ++ PARAMArray
(
    [0] => [nod32ms::FindKeys] VALID KEYS NOT FOUND, TRY CHANGE keys_autofind_page ++ PARAM
)

16:14:09: [STOP NOD32MS]

[alexco]

во freebsd переустановите унрар на стандартный от алекса рошалч, ибо там ставится другой при обновлении

[Blacking]

все заработало! Спасибо!

[ptnpnh]

Камрады, у меня папка с базами разрослась до 18 гиг. Сегодня взвесил и прозрел. Так и должно быть? Виндовый NOD32 Update Viewer на порядок скромнее. Подозреваю, что старые базы не удаляются, а новые добавляются. Как это можно проверить (исправить)?
Вот так весят подпапки:

Код: Выделить всё

/usr/local/www/nod32ms_bases
superserver# du -hd 1
 46K    ./eset_upd
3,6G    ./v3-rel-sta
3,3G    ./v4-rel-sta
3,5G    ./v5-rel-sta
3,5G    ./v6-rel-sta
746M    ./v5-rel-stop
492M    ./v4-rel-stop
652M    ./v6-rel-stop
681M    ./v3-rel-stop
225M    ./v3-rel-bat
 93M    ./v4-rel-bat
201M    ./v5-rel-bat
169M    ./v6-rel-bat
 17G    .

[AlexVPetrov]

Код: Выделить всё

229M    ./v3-rel-sta
225M    ./v3-rel-stop
580K    ./eset_upd
226M    ./v3-rel-bat
 96M    ./v4-rel-sta
208M    ./v5-rel-sta
216M    ./v6-rel-sta
 94M    ./v4-rel-bat
230M    ./v5-rel-bat
206M    ./v6-rel-bat
201M    ./v5-rel-stop
171M    ./v6-rel-stop
 93M    ./v4-rel-stop
101M    ./v7-rel-sta
102M    ./v7-rel-bat
2,3G    .

[ptnpnh]

Из-за чего же он у меня так разросся?..
Убить содержимое папки и перекачать заново, но уйдет-ли причина?

[AlexVPetrov]

Сравниваем тогда дальше, скажем на v4-rel-sta

Код: Выделить всё

root@alex:/var/www/localhost/htdocs/v4-rel-sta # du -hd1
128K    ./mod_000_loader
1,9M    ./mod_001_perseus
 42M    ./mod_002_engine
1,8M    ./mod_003_archives
4,6M    ./mod_004_advheur
432K    ./mod_005_cleaner
1,2M    ./mod_006_antistealth
4,4M    ./mod_008_epfw
9,3M    ./mod_009_systemstatus
684K    ./mod_010_smon
4,4M    ./mod_011_ra
516K    ./mod_013_selfdefense
168K    ./mod_014_mailserver
132K    ./mod_015_amon
 12M    ./mod_017_translator
1,9M    ./mod_018_hips
664K    ./mod_019_protoscan
128K    ./mod_020_parental
3,9M    ./mod_021_horus
600K    ./mod_022_db
5,9M    ./mod_023_pegasus
236K    ./mod_024_iris
 28K    ./mod_028_ehm
 20K    ./mod_029_aton
 96M    .

[Blacking]

Код: Выделить всё

208M    ./v5-rel-bat
 94M    ./v4-rel-stop
232M    ./v3-rel-sta
104M    ./v7-rel-sta
180M    ./v6-rel-sta
202M    ./v5-rel-stop
109M    ./v4-rel-bat
 97M    ./v4-rel-sta
669k    ./eset_upd
177M    ./v6-rel-bat
173M    ./v6-rel-stop
227M    ./v5-rel-sta
1,8G    .

Код: Выделить всё

/v4-rel-sta]$ du -hd 1
1,7M    ./mod_001_perseus
109k    ./mod_020_parental
487k    ./mod_013_selfdefense
4,6M    ./mod_011_ra
1,2M    ./mod_006_antistealth
6,0M    ./mod_023_pegasus
5,0M    ./mod_004_advheur
215k    ./mod_024_iris
 17k    ./mod_029_aton
 25k    ./mod_028_ehm
151k    ./mod_014_mailserver
  4M    ./mod_021_horus
5,7M    ./mod_008_epfw
119k    ./mod_015_amon
720k    ./mod_010_smon
2,1M    ./mod_018_hips
124k    ./mod_000_loader
9,9M    ./mod_009_systemstatus
958k    ./mod_019_protoscan
 39M    ./mod_002_engine
414k    ./mod_005_cleaner
 12M    ./mod_017_translator
  2M    ./mod_003_archives
632k    ./mod_022_db
 97M    .

[propeller25]

Ребята. У меня та же проблема на всех серверах с данным скриптом. Каждый день вес папок с обновлениями растет и приходится удалять все время от времени. Поделитесь решением, если кто уже решил, пожалуйста.

Случилось это после того, как скрипт перестал искать ключики сам и я подставил ему рабочий ключ в конфиг.

[AlexVPetrov]

Может в системе дело?
У меня FreeBSD 10-stable...
А с правами на файлы всё в порядке?

[OttoFix]

Все дело в том, что после последних обновлений на серверах нода, к папкам обновлений добавляется еще номер билда. В результате получается вот такой срач в папках каждой версии

Код: Выделить всё

./mod_001_perseus_номер билда
./mod_001_perseus__номер билда
./mod_001_perseus_номер билда
./mod_001_perseus_номер билда
./mod_020_parental_номер билда
./mod_020_parental_номер билда
./mod_020_parental_номер билда
./mod_020_parental_номер билда
./mod_020_parental_номер билда
./mod_013_selfdefense_номер билда
./mod_013_selfdefense_номер билда
./mod_013_selfdefense_номер билда
./mod_013_selfdefense_номер билда
и так далее.

Из-за этого у Вас при каждом обновлении качается все базы, а не только новые.
Решений тут несколько, либо парсить update.ver удаляя из пути номер билда при сохранении или после скачивания свежего update.ver переименовывать папки и уже потом начинать процедуру скачивания.

[OttoFix]

Автор скрипта еще им занимается? или забросил?

[ptnpnh]

Ребята. У меня та же проблема на всех серверах с данным скриптом. Каждый день вес папок с обновлениями растет и приходится удалять все время от времени. Поделитесь решением, если кто уже решил, пожалуйста.

Случилось это после того, как скрипт перестал искать ключики сам и я подставил ему рабочий ключ в конфиг.

То же самое! Подкинул валидный ключик, когда скрипт перестал искать сам. Процесс пошел, ну и я успокоился. А потом взвесил папочку и охренел. :-)
Сейчас снова взвешу:

Код: Выделить всё

/usr/local/www/nod32ms_bases
superserver# du -hs
 19G    .
superserver# du -hd 1
 46K    ./eset_upd
4,0G    ./v3-rel-sta
3,8G    ./v4-rel-sta
3,9G    ./v5-rel-sta
3,9G    ./v6-rel-sta
746M    ./v5-rel-stop
492M    ./v4-rel-stop
704M    ./v6-rel-stop
681M    ./v3-rel-stop
225M    ./v3-rel-bat
 93M    ./v4-rel-bat
201M    ./v5-rel-bat
169M    ./v6-rel-bat
 19G    .
superserver#

19 гиг!!!
Так никому и не удалось костыль прикрутить?

[xXxSPYxXx]

Можно раз в сутки через крон очищать папку, но это не комильфо, каждый раз все базы закачивать.

[AlexVPetrov]

То же самое! Подкинул валидный ключик, когда скрипт перестал искать сам. Процесс пошел, ну и я успокоился. А потом взвесил папочку и охренел. :-)

Ключей не ставил, ставил патч (zvirus » 2014-08-09 17:25:40) - ничего не растёт.

[AlexVPetrov]

Для тех,кто просто поставил рабочий ключ:

Итак, на зеркалах ESET изменились адреса файлов. Для адекватной работы скрипта нужно:
1) брать адрес файла для проверки ключа из свежего update.ver
2) при сохранении файлов в зеркало удалять из имён папок и update.ver цифровые постфиксы вида _123456

в принципе это нетрудно. жаль, что ООПшный вариант PHP я глубоко презираю но если никто не сделает патчик - придётся пробовать самому.

т.е. у вас будет расти размер папок!
Все проблемы, включая поиск ключа, решает патч zvirus от 2014-08-09 17:25:40.