Перейти к содержанию
Kopeicev

Тест самозащиты антивирусов III (результаты)

Recommended Posts

Kopeicev

Доброго времени суток, коллеги!

Мы опубликовали результаты долгожданного теста самозащиты антивирусов!

Методология тестирования: ссылка

Схема награждения: ссылка

Ну и сами результаты: ссылка

По сравнению с предыдущим аналогичным тестом результаты довольно сильно улучшились:

Platinum Self-Protection Award

self-protection_platinum_sm.gif

Kaspersky Internet Security 2011 (100%)

DrWeb Security Space 6.0 (99%)

Gold Self-Protection Award

self-protection_gold_sm.gif

Online Solutions Security Suite 1.5 (97%)

Outpost Security Suite Pro 2010 (97%)

Norton Internet Security 2010 (91%)

Avast! Internet Security 5.0 (91%)

Comodo Internet Security 4.1 (89%)

Avira Premium Security Suite 10.0 (88%)

BitDefender Internet Security 2011 (86%)

ZoneAlarm Internet Security Suite 2010 (86%)

Silver Self-Protection Award

self-protection_silver_sm.gif

Eset Smart Security 4.2 (76%)

Panda Internet Security 2011 (70%)

G DATA Internet Security 2011 (70%)

McAfee Internet Security 2010 (63%)

Bronze Self-Protection Award

self-protection_bronze_sm.gif

AVG Internet Security 9.0 (59%)

F-Secure Internet Security 2010 (57%)

VBA32 Personal 3.12 (55%)

Trend Micro Internet Security 2010 (50%)

PC Tools Internet Security 2010 (49%)

Тест провален

Microsoft Security Essentials 1.0 (29%)

---

Обращаю ваше внимание на то что впервые мы проводили подобное тестирование на двух операционных системах: Windows XP SP3 (x86) и Windows 7 (x86), ниже сравнение результатов тестирования на двух вышеописанных ОС:

self-protection3_1.png

Так же сравнение результатов с предыдущим тестом:

self-protection32.png

---

Скачать подробный отчёт о тестировании в формате exel

  • Upvote 15

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
senyak

Ну что же - все молодцы :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
zzkk
Ну что же - все молодцы

Если откинуть ХР и смотреть только на семерку, то далеко не все молодцы. :(

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Вот и долгожданные результаты. На этой неделе дотестили Online Solutions Security Suite и надо признаться не зря это сделали, буквально чуть чуть не хватило до Платины.

Вообще результаты весь интересные. Особенно если смотреть график Windows XP и Windows 7 x86 - одни хуже на 7-ке, другие лучше. Например, Outpost взял бы Платину, если бы не пресловутый Windows 7.

Также посмотрите не прогресс BitDefender и Eset. Впечатляет, неправда ли?

P.S. Большое спасибо Вячеславу Копейцеву (Kopeicev) за помощь в проведении теста. Отличный дебют, так держать! ;)

А где x64?

По этой ОС выложим отдельное сравнение в конце сентября, с писал ранее об этом в теме о подготовке теста. Мотивация - сильные отличия x64, лучше будет для первого раза рассмотреть ее отдельно. Первые результаты показали, что там все хуже будет.

Если откинуть ХР и смотреть только на семерку, то далеко не все молодцы. sad.gif

Да и на XP еще далеко не все молодцы. Меня если честно расстроил Microsoft. Ведь даже OneCare смотрелась лучше в этом тесте ... :(

А еще глядишь, и скоро все буквально научатся защищать все свои процессы. Например, Eset много потерял на том, что у него довольно легко прибивается GUI.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
senyak

Забыл. А что с Sophos случилось? Чего его выкинули?

Сергей - Online Solutions Security Suite много вопросов задает? Не подскажете?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Забыл. А что с Sophos случилось? Чего его выкинули?

Потому что корп. продукт, чтобы не мешать в одну кучу. Там самозащита строиться на принципе разграничения доступа для пользователей (копр. юзер не видит \процессов антивируса). Кроме того, сейчас поставить standalone endpoint protection не поднимая сервер управления нельзя, даже триалки нет отдельной. Было сильно лениво заморачиваться с этим, особенно с учетом того, что по первой причине sophos бы все равно слил.

Сергей - Online Solutions Security Suite много вопросов задает? Не подскажете?

Терпимо. Продукт _неклассический_, для него задавать вопросы вполне нормально ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Ego Dekker

Например, Eset много потерял на том, что у него довольно легко прибивается GUI.
Да, графическая оболочка «убивается», но на работе антивируса не сказывается, можете проверить.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
Да, графическая оболочка «убивается», но на работе антивируса не сказывается, можете проверить.

Мы знаем, поэтому за такое давали 0.5 балла - функциональность нарушена. Если и вирусы переставал ловить, то ставили 0. Во всех кейсах проверяли работоспособность антивирусной компоненты real-time монитора.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
DiabloNova

Как и говорил - гора золота) В тестировании 2010 методами 2006 года) Ни о чем. Результаты показывают не то что произошло совершенствование продуктов, а то что тесты устарели.

А что веб то процент потерял?:)) Ну это смешно отнять у него процент за ядерный ZwTerminateProcess, учитывая вообще идиотизм присутствия ядерных API в тесте. Налицо несовершенство подходов и методов.

  • Upvote 5

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Rampant

У меня вопрос по методологии, у вас сказано:

При установке антивирусов использовались рекомендуемые производителем настройки по умолчанию и производились все рекомендуемые программой действия (перезагрузка системы, обновление и т.д.). Все компоненты защиты активировались, если это не было предусмотрено после установки автоматически.

так настройки продуктов были в умолчании или настраивались вручную? и если настраивались дополнительно, то все ли продукты?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Отличные результаты. :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Deja_Vu

А результаты в PDF или XPS будут?

А то в статье говорится, про результаты в PDF, но там не ссылка, а просто текст.

А по тесту ... ну да.. интересно ... гораздо интереснее результаты на х64 .... х86 - это прошлое

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Kopeicev
А результаты в PDF или XPS будут?

А то в статье говорится, про результаты в PDF, но там не ссылка, а просто текст.

А по тесту ... ну да.. интересно ... гораздо интереснее результаты на х64 .... х86 - это прошлое

В PDF - будут, но позже.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Tranzit

Eset получил серебро ?:D Неужели за столько лет они наконец поняли что без самозащиты никуда? А отключить его вирусам было легко и просто,что я и понял за 3 года использования продукции компании Eset. Да на днях попробовал отключить Ess через диспетчер задач и о чудо мне было отказано в доступе.Прогресс на лицо,однако разработчикам ещё работать и работать,поскольку методов отключения антивируса довольно много.А если eset научится ещё лечить активное заражение и удалять вредоносные файлы,драйверы и т.п то цены ему не будет. :rolleyes: Плохо только что с nod 32 проблему с самозащитой они не пытаются исправить.Естественно все силы брошены на флагманский продукт ESS.Ждём решения и для nod 32.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
так настройки продуктов были в умолчании или настраивались вручную? и если настраивались дополнительно, то все ли продукты?

Использовались настройки по умолчанию, ничего специально не настраивалось.

Как и говорил - гора золота) В тестировании 2010 методами 2006 года) Ни о чем. Результаты показывают не то что произошло совершенствование продуктов, а то что тесты устарели.

А что веб то процент потерял?smile.gif) Ну это смешно отнять у него процент за ядерный ZwTerminateProcess, учитывая вообще идиотизм присутствия ядерных API в тесте. Налицо несовершенство подходов и методов.

Я что-то не видел в теме о подготовке теста каких-то реальных предложений, дополнительных методах, утилитах и т.п. ZwTerminateProcess тоже обсудили, оставили две функции ядра для оценки динамики изменений. Да тот же прокол у DrWeb на этом методе ничего ровным счетом в результатах не поменял, все равно Платина. А багу поправят.

Плохо только что с nod 32 проблему с самозащитой они не пытаются исправить

Там все плохо как и раньше?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
slavik_dm

мдя.. вот кружка дёгтя в ложке меда...результат MSE - мягко говоря не радует..

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин

Да, еще хотел сразу сказать для разных недалеких людей, кто видит в результатах только то, что хочет увидеть. Мы специально не меняли методы теста с января 2009. Не меняли и схему награждения, которая актуальна еще больше - с 2007 года. Это я к тому, что любые разговоры о какой-то там заточке теста или тому подобное нужно воспринимать исключительно как отмазку и оправдания представителей вендоров своего бездействия на протяжении последних 1.5 года.

а что с 64bit OS? может вне конкурса можно минитест сделать для аутсайдеров?

Да, будет вне конкурса отдельным сравнением выложено.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Сергей Ильин
А почему для теста были выбраны продукты класса Internet Security?Мне были-бы интереснее результаты Антивируса Касперского 2011,и avast5 free.

Потому что мы стараемся и будем стараться тестировать именно Internet Security, так как "чистые антивирусы" у многих вендоров превращаются в продукты для бедных с минимально возможным функционалом, не обеспечивающим комплексную защиту. Да и большинство читателей просит тесты как раз Internet Security.

Что касается Антивируса Касперского 2011 и avast5 free, то результаты теста их самозащиты с очень большой долей вероятности будут такими же ;)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Да, будет вне конкурса отдельным сравнением выложено.

продукты эти же примут участие?

так на вскидку обновлено:

Avast! Internet Security 5.0.677

AVG Internet Security 9.0.851

BitDefender Internet Security 2011

ESET Smart Security 4.2.64.12

F-Secure Internet Security 2011

G DATA Internet Security 2011 (21.1.0.5)

Norton Internet Security 2011 (18.1.0.37)

Trend Micro Titanium Internet Security 2011

Outpost Security Suite 7.0.3 (3392.517.1242)

PC Tools Internet Security 2011 (8.0.0.605)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka

Уже результаты опубликовали...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Уже результаты опубликовали...

я имел ввиду х64

По этой ОС выложим отдельное сравнение в конце сентября, с писал ранее об этом в теме о подготовке теста. Мотивация - сильные отличия x64, лучше будет для первого раза рассмотреть ее отдельно. Первые результаты показали, что там все хуже будет.

к концу сентября можно было и обновить список продуктов

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Виталий Я.

Мы высказали обоснованные сомнения в итогах тестирования Outpost 7 на Windows 7. После 21 часа надеемся выработать общую позицию по этому вопросу.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Danilka
я имел ввиду х64

к концу сентября можно было и обновить список продуктов

Зачем? Интересно сравнить те, которые участвовали.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Liam
Зачем?

ну просто выглядит это ----> смотрите ребята чем вы пользовались...

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • PR55.RP55
      В категории установленные программы необходимо добавить распределение по типу программ. ( актуальных для темы лечения ) Браузеры Антивирусы VPN - Сервисы Порой у некоторых пользователей установлено буквально по 200 программ и сидеть  искать установлен ли браузер или антивирус - или VPN, удалён ли он или от него остались в системе хвосты...  
    • demkd
      ничего нового ---------------------------------------------------------
       4.99.5
      ---------------------------------------------------------
       o Добавлен новый режим запуска для работы с неактивной системой без необходимости загрузки с флешки или диска.
         Начиная с Windows 8 доступна интеграция uVS в меню дополнительных параметров загрузки для
         запуска uVS из штатной среды восстановления Windows (WinRE) для работы с _неактивной_ системой.

         Интеграция осуществляется нажатием кнопки "Интегрировать uVS в меню дополнительных параметров загрузки".
         Загрузиться в меню можно с помощью кнопки "Перезагрузить систему в меню дополнительных параметров загрузки",
         после появления меню выберите:
         Поиск и устранение неисправностей/Диагностика/Troubleshoot(зависит от версии и региона Windows) --> uVS

         В отличии от dclone, uVS уже не получится разместить в образе WinRE, просто не хватит места на диске,
         поэтому запуск uVS происходит из каталога запуска процесса интеграции, т.е. при обновлении версии uVS
         не нужно повторно выполнять интеграцию, достаточно обновить uVS в каталоге из которого была произведена интеграция.
         В пути до uVS допустимо использовать кириллицу, даже если WinRE не имеет поддержки русского языка.
         При запуске из меню дополнительно производится инициализация сети в WinRE, т.е. будет доступна сеть
         для проверки файлов на VT, проверки сертификатов или для предоставления доступа удаленному пользователю к "рабочему столу".

       o Разовый доступ к рабочему столу доступен в WinRE/WinPЕ если в нем была инициализирована сеть,
         если образ сделан в uVS или загрузка была через интегрированный пункт в меню то сеть инициализируется при старте системы
         автоматически, однако поддержки uPNP в WinRE по умолчанию нет, поэтому для подключения к "рабочему столу" WinPE
         следует использовать обратное подключение к клиенту с белым адресом. (если подключение будет через интернет).
         (!) В WinRE/PE доступен только один режим захвата экрана - GDI, передача экрана нормально работает в WinRE/PE на базе
         (!) Win8/Win8.1/Win11, в Win11 и WinPE на его базе необходим включенный режим BLT, в противном случае консольные окна не отображаются.
         (!) Как минимум часть версий WinPE на базе Win10 дефектные (все x86), при работе с ним не отображаются консольные окна и есть проблемы
         (!) с отрисовкой окон и без удаленного доступа.
         (!) Аналогичная проблема наблюдается в WinRE для устаревших билдов Win10, для новых билдов Win10 проблемы нет.
         (!) В некоторых случаях окно uVS может оказаться за меню загрузки, в этом случае используйте Alt+Tab для переключения окон.

       o Добавлены новые модули:
         o файл rein/rein.x64 отвечает за запуск uVS из меню.
         o файл usvc.x64 отвечает за запуск uVS под LocalSystem.
         o встроенный ресурс getcpb отвечает за получение файлов из пользовательского буфера обмена при запуске под LocalSystem.

       o В окно лога подключения к удаленному рабочему столу добавлены кнопки для быстрого доступа к настройкам системы,
         запуску uVS и файлового менеджера.

       o Добавлена поддержка создания загрузочных образов дисков на базе WinPE+ADK v10.1.26100.2454 (декабрь 2024).
         (!) для создания 32-х битного WinPE или WinPE с поддержкой старого железа этот ADK не годится.
         (!) для создания 32-х битных образов используйте ADK для Windows 10 2004. (см. подробнее в FAQ.txt)

       o Улучшена функция создания загрузочных дисков.
         ISO стал мультизагрузочным с поддержкой UEFI, ISO теперь создается в UDF формате,
         т.е. загрузка с диска будет работать и на старом компьютере без UEFI и на новом с UEFI.
         Образ диска теперь занимает немного меньше места за счет дополнительно оптимизации содержимого UDF ISO.
         Добавлена проверка на разметку флешки, допустимая разметка MBR, GPT не поддерживается.
         (!) Загрузочная флешка всегда форматируется в FAT32, вся информация на флешке будет удалена,
         (!) флешки теперь мультизагрузочные.

       o Если недоступен режим захвата экрана DDA то серверная часть теперь автоматически устанавливает режим захвата GDI.

       o Теперь пока открыто окно удаленного рабочего стола удаленная система не будет засыпать.

       o Теперь окно лога передачи файла можно свернуть вместе с основным окном.

       o При ручном вводе одноразового кода доступа к удаленному рабочему столу тире теперь расставляются автоматически.

       o Исполняемый файл при выборе режима разового доступа к рабочему столу теперь
         всегда имеет фиксированное имя "uvsrdp".
         Т.е. теперь можно из одного каталога последовательно запустить удаленный рабочий стол и затем uVS в обычном режиме.

       o Оптимизирована вспомогательная функция копирования незащищенных файлов, теперь она работает немного быстрее
         системной функции CopyFile если копирование файла происходит на другой диск и значительно быстрее если
         при этом исходный файл хотя бы частично попал в файловый кэш.

       o Уменьшены требования к доступной памяти при запуске в системе без файла подкачки.
         Уменьшено максимально возможное число файлов в списке для x86 систем до 100000.

       o uVS теперь совместим со штатной средой восстановления Windows 8.

       o Перехват клавиатуры выделен в отдельный поток, что снизило инпут лаг нажатий клавиш и устранило проблему
         задержки ввода с клавиатуры на клиентской машине при передаче файлов по узкому каналу (менее 10Mbit).

       o Исправлена ошибка из-за которой не восстанавливался размер окна удаленного рабочего стола при повторном нажатии Alt+V.

       o Исправлена ошибка из-за которой был доступен просмотр экрана удаленного компьютера в режиме "только передача файлов"
         если был выбран режим захвата экрана GDI или DDA1.

       o Исправлена ошибка из-за которой в окне удаленного доступа при выборе настройки из списка передавались нажатия и движения мыши
         в удаленную систему.

       o Исправлена ошибка из-за которой назначение основного дисплея влияло на номер дисплея в DDA режиме, что приводило
         к неправильному расчету координат мыши на виртуальном дисплее удаленной системы.

       o Исправлена ошибка из-за которой не сохранялся каталог дополнительных файлов при создании загрузочной флешки.

       o Передаваемый по сети файл теперь блокируется не полностью на время передачи, а остается доступным для чтения.

       o Исправлена ошибка из-за которой не передавались на удаленный компьютер файлы с длинным путем (ошибка "путь не найден").

       o Исправлена ошибка из-за которой в редких случаях не восстанавливались права доступа и владелец ключей реестра после их модификации.

       
    • PR55.RP55
      Добавить в меню команды: Блокировать запуск файла по: [MinimumStackCommitInBytes] Снять блокировку [MinimumStackCommitInBytes] установленную uVS - [1077777777] Полностью снять блокировку [MinimumStackCommitInBytes] -  [?ХХХХХХХХ?] ---------- Пример: Блокировать запуск файла по: [MinimumStackCommitInBytes] IFEO\mediaget.exe: [MinimumStackCommitInBytes] 1077777777 IFEO\PowwerTool.exe: [MinimumStackCommitInBytes] 1077777777 -------- Команда: Проверить реестр и доступные копии реестра ( с возможностью указать копию ) на IFEO -  [MinimumStackCommitInBytes] Команда: Проверить реестр и доступные копии реестра ( а тут можно подумать, на что ещё можно проверить копию )
    • PR55.RP55
      В том году была статья : по поводу MinimumStackCommitInBytes https://www.trendmicro.com/en_in/research/23/e/attack-on-security-titans-earth-longzhi-returns-with-new-tricks.html Похоже и у нас начали активно это применять. https://forum.kasperskyclub.ru/topic/465310-slovil-majner-kogda-skachival-obhod-blokirovki-diskorda/ https://www.cyberforum.ru/viruses/thread3189071.html?ysclid=m4x30zzs6v421256067  
    • demkd
      И не должен работать, такое удалять разрешено только вручную.
×