Перейти к содержанию
antonl2003

Ежедневный траффик по обновлению GUP (раздатчика)

Recommended Posts

antonl2003

Имеется такая схема: есть головной офис в нём развёрнут SEPM, созданы группы (это удалённые офисы в которых развёрнуты клиенты SEP 6 штук) и в каждой группе определён так называемый раздатчик обновлений GUP. При такой схеме всё обновляется и работает, но меня смущает ежедневный траффик (так как он лимитированный), который хавает наш назначеный раздатчик в удалённом офисе, он состовляет порядка 80 мб, а бывает и в 2-3 раза больше. Подскажите пожайлуста во первых это нормально или нет. Во вторых, как установить расписание закачки этих обновлений например на ночь дабы не засорять канал. Почему качается такой объём, а не дельта (всего лишь изменения) или 80 мб это и есть дельта. Может подскажите менее затратный вариант по траффику. И как резвернуть или назначить сервер LivaUpdate, может с помощью его можно решить эту проблему. Вобщем посоветуйте что нить.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell

Трафик у меня такой же - нормально.

Для GUP вплоть до 11.0.6000а нельзя к сожалению сделать такое расписание.

В дифинишинах у симантека нет такого понятия как у касперского.... Поэтому качает всё.

Чтобы снизить трафик у меня сделано следующим образом:

1) SEPM получает обновления с ftp сервера. ВНИМАНИЕ! Расписание для LU в SEPM сбоит! Источник обновлений переключаю ручками с фейкового на ftp один раз в неделю! Иначе может обновляться по нескольку раз в день несмотря на то что ему стоит раз в неделю...

2) На ftp выкладывает обновления LUA.

3) Офисные клиенты обновляются с ftp раз-два в день.

4) Клиенты на каналах получают со своего GUP обновления, GUP с SEPM, а SEPM когда я ручками раз в неделю на него запущу это.

Вот такой велосипед, иначе вряд ли что получится. Увы..

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
ShIvADeSt

Хм я думал трабла только у меня с траффиком.

2Shell - насчет дельт Вы не правы. Я этот вопрос поднимал еще год назад и Кирилл Керценбаум посоветовал делать время хранения баз побольше (я сделал 30 дней). Для версии 11.0.4000 этого было достаточно и постепенно у меня в день стало скачиваться не более 4-8 метров. НО с переходом на злосчастную 11.0.6000 все стало чудесато. Часть клиентов (вернее ГУПов) нормально запрашивают дельты и генерят трафик в пределах 10 метров, а вот другие куролесят и качают от 80 до 180 метров. Что вообще не айс. Сам открывать кейсы я не могу, так как меня нет в доверенных лицах (один раз открывал, достали спрашивать почему меня нет в списке), а в ГО своих проблем хватает.

Так что здесь какой то косяк в новой версии с генерацией дельт, раньше все было отлично - после пары дней трафик снижался весьма сильно, а сейчас свистопляска какая то.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
antonl2003

"Я этот вопрос поднимал еще год назад и Кирилл Керценбаум посоветовал делать время хранения баз побольше (я сделал 30 дней)."

А подскажите в каком месте можно задать этот период в версии sepm 11.05 и ещё, что подразумевает под собой такой параметр в sepm как количество ревизий по умолчанию стоит 3, где то читал что рекомендуют увеличить до 9 ревизий, но не понял какой смысл хранить эти ревизии. Хотелось бы добиться канечно той самой дельты хотя метров в 10.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
ShIvADeSt

Я как раз ревизии и имел ввиду. 9 ревизий мало (на собственном опыте). У меня реальное снижение траффика было только при величинах 20-30 (до версии 11.0.6000 щас вообще хз че делать). Смысл хранить вот в чем - при пересылке обновлений вначале считается дельта - то есть происходит побайтное сравнение предыдущих обновлений и текущего. Алгоритм увы я не знаю - но вроде юзается SymDelta.exe, которая формирует файл различий. Почему для нормального формирования дельты нужно много ревизий - это к разработчикам (мне вообще не понятно, почему не выпускают просто ежедневные обновления типа как для КАВа, НОДа и прочих).

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
antonl2003

а 30 дней это сколько ревизий тогда?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
antonl2003

и ещё кстати вопрос как понять такое: в "параметрах связи" это в политиках группы есть такое "период контрольного сигнала" в котором можно установить время -мне не понятно к чему этот параметр относится толи к обновлениям GUPa с сервера SEPM через заданное время, толи это можно предположить что контрольный сигнал направляемый к SEPM лишь для передачи состояния клиента этой группы. так же непонятен параметр рандомизация +- для какого такого времени запланированного , где его можно запланировать хрен поймёшь. лучше бы расписание обновлений для GUPOV сделали чтобы поменьше траффика тоскать

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
angel-keeper

Уважаемый antonl2003 ознакомитесь внимательно с документацией к SEPM и тогда половина вопросов отпадет автоматически.

При настройки "Параметры связи" внизу есть кнопочка "Справка" нажав её вы получите ответ на свой вопрос.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell
2Shell - насчет дельт Вы не правы.

Не знаю, не знаю...

Проделан эксперимент - увеличено до 30 дней на GUP позавчера.

Второй день смотрю за трафиком. На каждый GUP по 100 - 195 метров уходит. Версия 11.0.6000

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
foxxp

Аналогично боролся с проблеммой трафика для симантека начиная с версии 11.0.4000 - по любому жрет от 80 и выше метров в сутки, бывало базы и то 5 гигабайт разрастались, приходилось полностью все удалять и LUA и заново ставить. За счет того что, скорость интернета подняли вроде бы проблемма уже стала менее актуальной, т.к. организация у нас является закрытой от интернета, закачиваю базы дома и переношу уже на внутренний сервер организации. Все также жду надежды от компании Symantec что размер трафика они уменьшат, либо сделают как в ранних версиях полное обновление баз из единого файла, в том числе и списка превентивных угроз.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
ShIvADeSt
Не знаю, не знаю...

Проделан эксперимент - увеличено до 30 дней на GUP позавчера.

Второй день смотрю за трафиком. На каждый GUP по 100 - 195 метров уходит. Версия 11.0.6000

Я и говорю, что на 11.0.6000 все как то через одно место. Часть ГУПов обновляется с минимальным трафиком, меньше 10 метров, часть с нормальным - 80 метров, а часть с заоблачным 160 метров. А вот моя тема

http://www.anti-malware.ru/forum/index.php...vADeSt&st=0

в ней как раз был решен вопрос насчет обновлений. И на тот момент ( на тех версиях все было ок). А сейчас после апдейта до 11.0.6000 опять чудеса начались.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Kolik
И на тот момент ( на тех версиях все было ок). А сейчас после апдейта до 11.0.6000 опять чудеса начались.

Поборол чудеса ??

А то стремно обновлять у меня трафик это критично :blink:

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
ShIvADeSt

забил я на это дело, это не основная моя задача.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров

подытожу:

1. кол-во ревизий каждый определяет для себя сам. все зависит от:

- насколько велика вероятность того, что какая-та машина выключена продолжительное время

- насколько критично уменьшение загрузки канала связи.

Если канал критичен и при этом машины могут быть долго выключены, то храните больше ревизий (за день публикуется 3 ревизии, т.ч. если машина может быть недоступна неделю, то логично хранить около 20-30 ревизий, но это займет достаточно места на SEPM.

Если канал не критичен, а больше критично место на SEPM, то уменьшайте кол-во ревизий до 10. Меньше 10 смысла нет, т.к. во многих случаях в понедельник (т.е. после 2 выходных) кто-нибудь да задержится на работу и это приведет к тому, что GUP будет качать полный пакет обновлений.

Вроде, логично)))

2. Самое важное!

Для мониторинга состояния и кол-во загруженного GUP-ами появилась утилита. Сразу обращаю внимание, что официально она не поддерживается, но вероятность того, что она что-то может испортить минимальна, т.к. читает логи IIS + берет минимальное кол-во информации из базы данных.

Утилиту можно взять здесь (она периодически обновляется, появляются новые фичи, т.ч. следите за обновлениями):

http://www.symantec.com/connect/downloads/...ibution-monitor

Посмотреть как ее использовать, правда, на английском, но четко и понятно, можно здесь:

http://www.screencast.com/t/MzU0Mzk0ZT

Если с просмотром на английском есть проблемы, то там довольно просто все в readme прописано.

Удачи с мониторингом GUP!!!

  • Upvote 10

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell

Олег Шабуров, спасибо, но покапавшись глубже с утилитой понятно что это несколько не совсем нужно кому либо.

По нескольким причинам:

1) Трафика передаваемого на клиента нет. Есть общий с заоблачными цифрами.

2) На 7 IE на Win 2003 слишком много ошибок. Полазив по гайдам не удалось настроить безошибочную работу скрипта :)

3) Вся статистика которая есть - может быть добыта в SEPM в отчетах. И в более удобной форме. Можно и напрямую к базе обратиться если что то нужно в определенном формате или детальное.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров
но покапавшись глубже с утилитой понятно что это несколько не совсем нужно кому либо

может стоит еще покопаться?)))

А если серьезно:

1. не нужно решать за других, т.к. знаю много заказчиков по всему миру, которые используют и говорят спасибо)

2. причины ниже.

Трафика передаваемого на клиента нет

есть трафик с SEPM на GUP. А это самое главное.

Цель создания GUP - сокращение трафика между центром и регионами за узкими каналами связи. Именно этот трафик и нужно сократить большинству пользователей.

Сколько передается между GUP и клиентами - это не особо критично, т.к. GUP как раз создан для того, чобы его иметь в том же месторасположении, что и клиентов, соответственно, канал связи между ними уже будет широким. Ну если вам уж совсем интересно, сколько передается с GUP на клиента, то можно прикинуть.... обновления с GUP не будет больше, чем обновление с SEPM на GUP.

Есть общий с заоблачными цифрами

именно для того чтобы не было заоблачных цифр и создана эта утилита.

Если где-то кто-то качает полные обновления, то это:

- либо клиенты напрямую подключаются к SEPM.

- либо GUP получает полные обновления и у вас много GUP-ов)).

Обнаружив это можно предпринять действия к устранению проблем.....

На 7 IE на Win 2003 слишком много ошибок. Полазив по гайдам не удалось настроить безошибочную работу скрипта

у меня IE7 и Win2003 у меня работает на ура). Какие ошибки то выдает? поделитесь конфигурационным файлом?

Вся статистика которая есть - может быть добыта в SEPM в отчетах. И в более удобной форме.

вряд ли. С учетом того, что утилита разработана продакт-менеджером по этому продукту, сомневаюсь, чо он не знает как этом можно сделать и решил просто поупражняться в программировании. Статистики по работе GUP в отчетах нет. Если знаете как ее показать - покажите.

Можно и напрямую к базе обратиться если что то нужно в определенном формате или детальное

в базе есть только часть информации. именно поэтому нужна дополнительная настройка IIS, откуда берется информация по кол-ву трафика.

а вообще, не все любят ковыряться с базой. да и не все знают где и что искать).

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell

Под клиентом я имею ввиду GUP. Трафик GUP - клиент не критичен вовсе.

Статистика - где какие дифинишины можно посмотреть хотя бы если на главной странице SEPM щелкнуть по обновлениям, затем выбрать сервер. Откроется второе окно в котором будут не обновленные хосты. Среди них будет и GUP если он обновляется.

Конфиг:

connection_type=ODBCODBC_DSN=SymantecEndpointSecurityDSNODBC_Username=endpointODBC_Password=*****OLEDB_string=Provider=SQLOLEDB;Data Source=localhost;Initial Catalog=Endpoint;Integrated Security=SSPIOLEDB_Username=OLEDB_Password=GUP_view=ALLoperational_status=SHOWsepm_domain=SHOWsepm_group=HIDESEPM_IISlogPath=\\10.0.0.26\c$\WINDOWS\System32\LogFiles\W3SVC2\sepm_path=\\localhost\c$\Program Files\Symantec\Symantec Endpoint Protection Manager\autorefresh=yesrefresh_interval=10

Рефреш кстати хоть и включен в конфиге - на странице пишет disabled))

Ошибки:

при запуске сначала e73d952c2e7bt.jpg

потом

9cd59bc17908t.jpg

хотя путь до логов IIS правильный. Указание пути типа SEPM1_IISlogPath тоже не приводит к исчезновению ошибки.

затем сразу

932199b38adct.jpg

трафик дневной :o

517d47376b4at.jpg

Поиск в графе "Search for IP or Network" после вышеописанных ошибок выдает тот же результат.

Релоад страницы тянет снова же 2 ошибки о том что не может найти конфиги IIS и ошибки IE.

IIS настроен согласно инструкции (log visits, Access data sources across domains for IE, Date, Time, Client IP Address, URI Stem, Protocol Status and Bytes Sent).

OS Win2003 Ent SP2 without enhanced explorer options.

SEPM 11.0.6005 на БД MS SQL 2008

Установленный IE 8.0.6001 не привел к исчезновению ошибок :)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell
может стоит еще покопаться?)))

А если серьезно:

1. не нужно решать за других, т.к. знаю много заказчиков по всему миру, которые используют и говорят спасибо)

Простите, не хотелось обидеть.

Но пока просто не вижу того что нельзя увидеть в SEPM или выдернуть с БД)

Только трафик SEPM-GUP? Но реальных цифр же нет в отчете - сколько какой скушал. Есть сведения о клиенте, какие на нем дифинишины и остальные данные по железу и ОС. Его и нет в заявленном на STN http://www.symantec.com/connect/imagebrows...60521/_original

Средств урезать трафик GUPа как выше из треда видно, нет (6000+ версия с шаманством по ревизиям).

Предсказуемость GUP - обновит\что то не обновит\ручной запуск тоже пока не реализованы. Отсюда и тема эта.

smc -updateconfig на GUP для принудительного запуска обновления если GUP увидит все таки обновления на SEPM = это шаманство.

Проблемы еще не озвучены в теме - если SEPM 6000\6005 версии а GUP 4202 - непредсказуемая синусообразная закачка обновлений.

Видюшка-гайд, честно, не осилена пока =)

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell

Что то редактировать кнопка пропала))

Сведения о железе\компах можно вытянуть из таблицы SQL SEM_COMPUTER.

Гупы - GUP_LIST

Ну и т.д.

Неудобство только с преобразованием IP адресов.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров

Shell, спасибо, что помогли найти некоторые недочеты в утилите (по поводу неправильного отображения спика GUP).

Это исправление уже сделано, новая версия утилиты будет доступна со дня на день.

по поводу остального отвечу немного позже.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров
Рефреш кстати хоть и включен в конфиге - на странице пишет disabled))

видимо, по причине возникновения ошибок.

Ошибки:

в разделах посвященных пути к логам IIS или пути к SEPM не оставляли, случаем, строки с адресом, в которой в начале стоит знак комментария, например:

# SEPM2_IISlogPath=\\sepm2\e$\SEPMlogs\W3SVC2\

если оставляли, то уберите, т.к. утилита не понимает знаков комментария и пытается обратиться и по этому пути))))). Сам на это напоролся...

Но пока просто не вижу того что нельзя увидеть в SEPM или выдернуть с БД)

я для себя вижу следующее:

- удобное отображение списка GUP-ов, в котором сразу видно, какие GUPы "чувствуют себя плохо"

- по какой причине "им плохо", т.е. какие компоненты у них не обновились или же они просто не доступны и т.д.

- если GUP-ов много отсортировать "безпроблемные" и оствить список только тех, в которых есть проблемы

- общее кол-во использованного трафика (у вас оно пока не работает), предлагаю подождать публикации новой версии (ожидается в понедельник), а там посмотреть... если проблема останется, я был бы рад пообщаться поближе))))

- куча разной информации (при наведении мышкой на различные поля), которая может оказаться полезной.

- большое кол-во функций, которые пока не реализованы, но стоят в списке на ближайшее время))))))))))

Только трафик SEPM-GUP? Но реальных цифр же нет в отчете - сколько какой скушал.

эта фича тоже находится в списке функций, которые владелец утилиты планирует добавить. Т.е. будет видно, какой из GUP-ов сколько "съел".

Средств урезать трафик GUPа как выше из треда видно, нет

не уверен, что понял правильно.... можете уточнить? GUP сокращает трафик, причем очень хорошо. Если он качает полный пакет обновлений, то в большинстве случаев это связано с тем, что клиент был недоступен слишком долгое время и SEPM уже не может предоставить дельту. Если я что-то неправильно понял, то уточните.

Кстати, в 11.0.6.1, будет исправлена одна ошибка, по причине которой случались ситуации, когда GUP качал полное обновление вместо дельты.

Предсказуемость GUP - обновит\что то не обновит\ручной запуск тоже пока не реализованы. Отсюда и тема эта.

smc -updateconfig на GUP для принудительного запуска обновления если GUP увидит все таки обновления на SEPM = это шаманство.

опять же не уверен, что понимаю о чем речь. Если клиент запросил обновление у GUP, то GUP его запросит у SEPM. Если клиент не запрашивает, то, скорее всего, он стоит в PULL MODE и время между хартбитами у него очень большое. Если же он и PUSH и по какой-то причине не начинает закачивать обновление, То можно попробовать из консоли SEPM запустить коману "update content" или что-то похоже)))). У меня стабильно отрабатывает....

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell
не уверен, что понял правильно.... можете уточнить? GUP сокращает трафик, причем очень хорошо. Если он качает полный пакет обновлений, то в большинстве случаев это связано с тем, что клиент был недоступен слишком долгое время и SEPM уже не может предоставить дельту. Если я что-то неправильно понял, то уточните.

Кстати, в 11.0.6.1, будет исправлена одна ошибка, по причине которой случались ситуации, когда GUP качал полное обновление вместо дельты.

опять же не уверен, что понимаю о чем речь. Если клиент запросил обновление у GUP, то GUP его запросит у SEPM. Если клиент не запрашивает, то, скорее всего, он стоит в PULL MODE и время между хартбитами у него очень большое. Если же он и PUSH и по какой-то причине не начинает закачивать обновление, То можно попробовать из консоли SEPM запустить коману "update content" или что-то похоже)))). У меня стабильно отрабатывает....

Клиенты действительно все стоят в Pull mode с интервалом в 45 +/- 15 минут. Иначе сервер SEPM захлебывается.

Я имею ввиду две технологии - LU и GUP.

В LU было расписание, в GUP его нет. Хотя LU в SEPM 11.0.4202 чихал на заданное расписание =) и обновлял чаще.

Вы выше написали что будет исправлена ошибка с закачкой полного обновления вместо дельты. Жду как маны небесной :)

За коррекцию остальных ошибок в утилитке - спасибо, посмотрю как только дела разбросаю (понедельник сложный день).

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров
В LU было расписание, в GUP его нет

LU позволяет брать обновления либо с LUA, либо с LiveUpdate.

GUP же берет с SEPM. А с SEPM можно брать дельты, которые на порядок отличаются по размеру. Поэтому расписание для GUP - менее критичный параметр.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Shell

Олег, Вы были правы. После того как убраны ВСЕ комментарии - осталась только ошибка IE при выполнении скрипта.

И рефреш автоматический появился.

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты
Олег Шабуров

попробуйте последнюю версию:

http://www.symantec.com/connect/sites/defa...onitor_v2.8.zip

в ней должна быть исправлена проблема с неправильным отображением списка GUP-ов.

Если ошибка скрипта так и выдается, то мне нужен ваш конфигурационный файл. Можете поделиться (oleg подчеркивание shaburov собака symantec.com)?

Поделиться сообщением


Ссылка на сообщение
Поделиться на другие сайты

  • Сообщения

    • demkd
      Правильно будет вот так: cexec "C:\Windows\System32\WindowsPowerShell\v1.0\powershell.exe" Remove-MpPreference -ExclusionPath "путь" и оно работает, если powerShell на месте и это действительно powershell.
    • Vvvyg
      Можно через powershell в обычном режиме: powershell Remove-MpPreference -ExclusionPath "путь" Только скриптом не удаётся выполнить, все варианты, в т. ч. с полным путём, дают ошибку [Error: 0x2 - Не удается найти указанный файл. ] exec "powerchell.exe" Remove-MpPreference -ExclusionPath "путь" exec powerchell.exe Remove-MpPreference -ExclusionPath "путь" exec "C:\WINDOWS\System32\WindowsPowerShell\v1.0\powerchell.exe" Remove-MpPreference -ExclusionPath "путь" С cexec - то же самое.
    • AM_Bot
      Платформа разведки угроз RT Protect TI способна взаимодействовать с RT Protect EDR и другими средствами защиты информации, что помогает автоматически выявить и предотвратить кибератаки, а также провести детализированное расследование с опорой на накопленные сообществом знания.      ВведениеАрхитектура RT Protect TIФункциональные возможности RT Protect TI3.1. Подключение фидов3.2. Работа с обнаружениями: «Активность»3.3. Работа с артефактами3.4. Использование YARA-правилУправление уязвимостями4.1. Менеджмент организаций, пользователей и API-клиентов4.2. Взаимодействие с RT Protect EDRСценарии использования RT Protect TI5.1. Работа с дашбордами5.2. Граф связей5.3. Создание фидов5.4. Работа с платформой в режиме веб-сервиса5.5. Определение распространённости угроз5.6. Проведение ретроспективного анализа инфраструктуры на предмет компрометацииСистемные требования RT Protect TIПлан дальнейшей разработкиВыводыВведениеКонтроль инфраструктуры на предмет наличия актуальных угроз и обогащение аналитики, применяемой в средствах защиты информации, дают возможность значительно расширить детектирующую логику, а также сформировать современную и гибкую модель защиты, обеспечивающую устойчивость к самым передовым атакам.RT Protect TI позволяет организовать централизованный процесс накопления данных Threat Intelligence и предоставить аналитикам единый интерфейс анализа выявляемых угроз.Архитектура RT Protect TI Архитектура RT Protect TI разрабатывалась с учётом первостепенных потребностей современных MSS-провайдеров в тесном взаимодействии с RT Protect EDR. Учитывались потребности как в качественном API, так и в удобном веб-интерфейсе для аналитиков, которым необходимо на ежедневной основе исследовать выявленные индикаторы компрометации и их распространённость относительно защищаемых инфраструктур.Серверная часть включает в себя хранилище распространяемых на серверы EDR наборов аналитики и проверяемых вредоносных файлов, веб-интерфейс и ключевую базу данных с информацией об актуальных угрозах и распространённости их обнаружений. Рисунок 1. Схема взаимодействия RT Protect TI с другими системами При внедрении RT Protect TI возможна реализация множества интеграций в различных сценариях:Взаимодействие с широким спектром решений: EDR, SIEM, IRP, EASM.Формирование данных об актуальных угрозах при проведении ретроспективного анализа инфраструктуры на предмет компрометации.Динамическое формирование и распространение потоков данных (фидов) и наборов аналитики, релевантных для конкретного решения или потребителя.Интеграция с решениями класса Sandbox.Функциональные возможности RT Protect TIПодключение фидовПервичной задачей при использовании киберразведывательных платформ является формирование собственной базы данных по индикаторам компрометации. Для этого в веб-интерфейсе реализована возможность подключения и гибкой настройки источников данных. Рисунок 2. Основные настройки источника данных в RT Protect TI Подключение фидов реализовано как по URL, так и путём ручной загрузки файлов. Доступ к проприетарным источникам по URL можно организовать с использованием приватных токенов доступа.При подключении источника возможно выбрать формат получаемых данных: JSON (JSONL), CSV, TXT. Далее необходимо настроить парсинг его полей.  Рисунок 3. Настройка парсинга нового источника в RT Protect TI Для каждого источника возможно выбрать, какой вердикт будет формироваться для полученных из него индикаторов компрометации: «Безопасный», «Подозрительный» или «Вредоносный». При сборе данных из источника при формировании вердикта может учитываться его вес («confidence» — уверенность в данных). Также источники с безопасными артефактами (IP-адреса, домены, хеши и т. д.) позволяют формировать белые списки и фильтровать с помощью них ложноположительные срабатывания из вредоносных источников. В свою очередь, для каждого источника в настройках указывается его приоритет, что позволяет гибко формировать вердикты для артефактов из различных фидов.Работа с обнаружениями: «Активность» По результатам анализа артефактов для каждого из последних формируется вердикт на основе данных из подключённых источников. Вердикты фиксируются в разделе «Активность», где собираются сведения обо всех артефактах, обнаруженных на подключённых клиентах, и формируется рейтинг их распространённости. На вкладке «Артефакты» отображается общая распространённость артефактов среди всех клиентов системы. На основе этих данных можно составить рейтинг угроз, определить наиболее часто встречаемые угрозы, получить статистику их распространения.  Рисунок 4. Работа с артефактами  На вкладке «Организации и клиенты» каждая угроза ассоциирована с конкретным клиентом (организацией), где она была обнаружена. С помощью этих сведений можно классифицировать угрозы в зависимости от конкретных организаций или отраслей, где угроза встречается чаще всего.Так как все обнаруженные на клиенте артефакты фиксируются, имеется возможность провести ретроспективный анализ обнаруженных ранее артефактов, для которых критерий вредоносности был установлен позже момента фактического обнаружения. Таким образом возможно выявить угрозы, которые не были задетектированы в момент их реализации. Рисунок 5. Работа с организациями и клиентами Если по данным одного источника артефакт является вредоносным, но при этом он фигурирует в белых списках по данным второго источника, то такой артефакт помечается как безопасный. Подобный разнобой может свидетельствовать о ложноположительных данных источника с вредоносными артефактами. Рисунок 6. Работа с источниками данных С использованием функциональности раздела «Источники данных» возможно анализировать артефакты из различных источников — например, искать доверенные системные хеши, данные о которых получены из фидов сообщающих о вредоносной активности. Страница позволяет произвести оценку каждого источника данных на предмет его вклада в формирование вердиктов для обнаруженных артефактов. Таким образом возможно определить как более полезные с точки зрения вклада в аналитику источники данных, так и те источники, чьи артефакты редко встречаются в обнаружениях.Эта страница также позволяет произвести корреляцию между несколькими источниками данных, тем самым предоставляя возможность выявить часто пересекающиеся источники. В таком случае аналитик может оценить полезность того или иного источника и принять решение об исключении менее популярных или источников с повторяющимися данными. Рисунок 7. Работа с источниками данных Работа с артефактамиДля каждого фигурирующего в системе артефакта доступна его страница, обобщающая все имеющиеся на платформе данные о нём. При открытии такой страницы автоматически запускаются все доступные интеграции, среди которых в зависимости от настроек и наличия интеграционных ключей могут присутствовать VirusTotal, RSTCloud, Netlas и другие. Список может быть расширен. Рисунок 8. Основная страница артефакта Система RT Protect TI содержит в своём составе собственную библиотеку тегов, созданную аналитиками команды RT Protect. Предоставляется возможность как назначить теги вручную, так и автоматически установить их из фида. Назначение тегов из внешних источников осуществляется при помощи механизма «псевдонимов», который позволяет аналитику задать соответствие между тегами из библиотеки стороннего вендора и собственной библиотеки производителя. Таким образом теги любого вендора в любом формате могут быть преобразованы в теги собственной библиотеки. Рисунок 9. Добавление тега к артефакту Помимо этого, в платформе доступна функциональность выстраивания взаимосвязей между сущностями — например, связывание вредоносного файла со вшитым в него адресом сервера управления. Рисунок 10. Связанные артефакты Важной функциональностью RT Protect TI является возможность отслеживать обнаружения в различных организациях. Это позволяет определить распространённость потенциальной угрозы и увидеть факты её детектирования в различных инфраструктурах с указанием конкретного клиента, количества обнаружений и даты последнего выявления. Рисунок 11. Обнаружения артефакта В других разделах доступны результаты обогащения данных об артефакте за счёт множества внешних интеграций, позволяющих значительно дополнить имеющуюся в фидах информацию. Рисунок 12. Информация VirusTotal по артефакту На вкладке «Внешние источники» доступна информация об обнаружениях исследуемого артефакта в настроенных ранее фидах. При этом выводится вся информация, указанная при настройке конкретного источника. Рисунок 13. Информация из внешнего источника по артефакту Ни один источник данных не может быть абсолютно достоверным. В случае ошибки либо недостатка информации для вынесения вердикта аналитик имеет возможность вручную выставить корректный вердикт для артефакта, написать дополнительный комментарий к вердикту, а также указать время его актуальности. Рисунок 14. Добавление заключения аналитика к артефакту Другой возможностью платформы, значительно повышающей удобство командной работы с обнаружениями, является функциональность добавления комментариев к каждому артефакту. С её помощью аналитики имеют возможность фиксировать замечания и наблюдения. Рисунок 15. Отображение комментариев к артефакту Использование YARA-правилПомимо проверки артефактов RT Protect TI поддерживает возможность проверки файлов — как с использованием встроенных YARA-правил, так и путём отправки в решения класса Sandbox. Рисунок 16. Область поиска информации об артефактах По результатам проверки пользователю предоставляется набор YARA-правил, срабатывание которых было зафиксировано при проверке файла. Рисунок 17. Область поиска информации об артефактах Наборы YARA-правил возможно формировать как вручную, так и путём взаимодействия с репозиториями, например на GitHub. Таким образом, единожды настроив сбор отдельного YARA-файла либо целого репозитория, возможно добиться регулярного пополнения и обновления встроенных наборов. Рисунок 18. Раздел настройки наборов YARA-правил Управление уязвимостямиПлатформа предоставляет возможность осуществлять сбор информации об актуальных уязвимостях из таких баз, как БДУ ФСТЭК России, NVD и другие, а также выявлять бреши в установленном ПО по данным из интегрируемых по API систем.В качестве примера можно привести систему анализа ПО на конечных точках во взаимодействии с RT Protect EDR. Рисунок 19. Страница уязвимости с информацией о её распространённости по организациям и экземплярам ПО Анализ на наличие уязвимостей также возможно проводить с точки зрения анализа установленного ПО. Рисунок 20. Страница ПО с информацией о найденных в нём уязвимостях и о распространённости Менеджмент организаций, пользователей и API-клиентовВ системе поддерживается мультиарендная модель разделения доступа. Это позволяет делить пользователей по организациям и ограничивать доступ к данным об обнаружениях, а также к чувствительным настройкам аналитики, распространяемой с использованием платформы. Рисунок 21. Создание новой организации в RT Protect TI При этом выделяется одна организация-владелец, пользователи которой имеют доступ ко всей аналитике, агрегируемой в платформе. Важно отметить, что в рамках каждой организации также осуществляется разделение доступа: внедрена ролевая модель. Рисунок 22. Страница организации — владельца платформы В рамках менеджмента каждой организации существует возможность как добавления пользователей, так и формирования токена доступа для интеграций. Токен позволяет обращаться к API платформы и реализовывать широкий спектр задач по взаимодействию с другими решениями. Рисунок 23. Выпуск токена клиента в RT Protect TI Ролевая модель пользователей каждой организации включает в себя три основные роли: «Администратор», «Аналитик», «Пользователь». Важно отметить, что функциональность этих ролей также зависит от того, является ли организация пользователя владельцем платформы. Рисунок 24. Создание нового пользователя в RT Protect TI Взаимодействие с RT Protect EDRОдной из ключевых функциональных возможностей RT Protect TI является глубокое взаимодействие с RT Protect EDR. TI-платформа поддерживает создание и менеджмент всех наборов аналитики, доступных в EDR. Рисунок 25. Раздел настройки наборов распространяемых индикаторов атак При формировании наборов индикаторов компрометации предоставляется возможность их гибкой настройки. В такие наборы могут попадать как материалы из различных источников данных, так и наиболее актуальные угрозы, зафиксированные в контролируемых инфраструктурах. Помимо этого, возможно автоматически добавлять в них всю получаемую при работе с платформой аналитику. Также предоставляется возможность формирования списков исключений: наборов хешей, IP-адресов и доменов, наиболее часто фигурирующих в запросах от интеграций с целью фильтрации непосредственно в тех системах, с которыми осуществляется взаимодействие. Это позволяет значительно снизить число проверок. Рисунок 26. Конфигурация набора индикаторов компрометации   Важно отметить, что эта функциональность используется как при создании наборов распространяемых чёрных и белых списков в EDR, так и при формировании собственных фидов, доступ к которым предоставляется по URL, но ограничен требованием приватного токена клиента.Сценарии использования RT Protect TI Работа с дашбордамиНа главной странице представлены основные статистические графики и таблицы. Среди прочего там доступны информация по статистике добавления новых артефактов и график активности по проверке артефактов всех типов. Рисунок 27. Статистика добавления артефактов на TI-платформу Возможно перейти отсюда к информации об обнаружениях выбранного типа артефактов за соответствующий промежуток времени либо к отчётам по конкретным артефактам. Рисунок 28. Варианты отображения дашборда «Активность» Помимо этого, представлены топ-5 фидов по вкладу в аналитику, а также трендовые и наиболее распространённые вредоносные артефакты. Рисунок 29. Просмотр дашбордов вида «Топ-5» Дополнительно возможно отследить активность по использованию интеграций: сервисов обогащения данных об артефактах, песочниц и др. Рисунок 30. Варианты отображения дашбордов отчётов Таким образом, панель дашбордов предоставляет основную сводку активности в защищаемых инфраструктурах с возможностью детализации данных по различным критериям.Граф связейВажным элементом веб-интерфейса является возможность построения и просмотра графа связей между сущностями. Граф позволяет отобразить все связи исследуемого артефакта и дополнить их. Рисунок 31. Отображение графа связей Путём выстраивания связей в рамках расследования можно существенно расширить информацию об атаке, а также получить дополнительные данные о её распространённости в подконтрольных инфраструктурах.Создание фидовRT Protect TI предоставляет функциональность по формированию собственных фидов с динамическим обновлением данных. Рисунок 32. Создание наборов распространяемой аналитики — фидов Логика конфигураций создаваемых фидов совпадает с логикой формирования наборов индикаторов компрометации, распространяемых в RT Protect EDR. Доступно формирование наборов как по данным фидов, так и по последней фиксируемой активности, а также по заключениям работающих на платформе аналитиков.Работа с платформой в режиме веб-сервисаДоступ к платформе также возможно предоставить внешним пользователям — сотрудникам сторонних организаций, чьи права на изменение аналитики и параметров взаимодействия с RT Protect EDR ограничены. Рисунок 33. Отображение главной страницы и разделов для администратора организации Администратор организации имеет возможность создавать собственные токены для интеграций, а также добавлять пользователей. Всем пользователям будет доступна только информация об обнаруженных в их организациях артефактах. Рисунок 34. Отображение активности для администратора организации Определение распространённости угрозС использованием функциональности отслеживания данных о распространённости обнаружений вне зависимости от вердикта возможно определять масштаб вредоносной активности.Допустим, в рамках расследования инцидента в одной из организаций было обнаружено, что ранее неизвестный артефакт является вредоносным. Аналитик выносит для него соответствующий вердикт и обнаруживает, что он также встречался ранее в данных из источников других организаций. В результате автоматизированно предотвращается масштабная атака — путём распространения списков блокировки. Рисунок 35. Выявление и блокирование масштабной атаки Проведение ретроспективного анализа инфраструктуры на предмет компрометации Поставляемые TI-платформой данные могут быть использованы не только в рамках задач по мониторингу и поиску угроз (Threat Hunting), но и при выполнении ретроспективного анализа инфраструктуры на предмет компрометации — особенно если в исследуемой инфраструктуре ещё не настроены СЗИ.  Рисунок 36. Использование данных TI при проведении ретроспективного анализа инфраструктуры на предмет компрометации В этом случае возможно сформировать ограниченный набор наиболее актуальных угроз и осуществить их поиск на конечных точках. В рамках этой задачи платформа RT Protect TI уже доказала свою эффективность в связке с услугой RT Retro (ретроспективного анализа инфраструктуры), предоставляемой специалистами АО «РТ-Информационная безопасность».Системные требования RT Protect TIДля корректной работы системы сервер должен соответствовать ряду требований. Таблица 1. Системные требования к серверу управленияКомпонентТребованияМинимальныеРекомендуемыеЦП8 ядерНе менее 10 ядер частотой минимум 2,4 ГГц с возможностью работы в 20 потоковОЗУ16 ГБ32 ГБСвободное место на диске1 ТБ2 ТБ (итоговый размер будет зависеть от количества подключённых источников)Программное обеспечениеLinux-сервер с 64-разрядной архитектурой и ОС, поддерживающей контейнеризацию с использованием Docker План дальнейшей разработкиКлючевыми направлениями развития платформы являются:Расширение набора поддерживаемых сущностей: «Malware», «Tool», «Incident», «Campaign», «APT» и т. д. Поддержка протокола STIX позволит значительно углубить информацию об обнаруживаемых угрозах и возможности проведения соответствующего анализа.Поддержка проверки индикаторов компрометации не только с использованием API, но и путём направления исходных логов (по протоколам Syslog, CEF и др.) непосредственно в TI-платформу.Дальнейшее развитие сервисной модели использования (веб-версии).Развитие гибкости взаимодействия с различными СЗИ и сервисами.Полный план разработки продукта может быть предоставлен в рамках пилотного проекта.ВыводыRT Protect TI предоставляет функциональность по агрегации, корреляции и хранению данных о киберугрозах, обеспечению своевременности мер реагирования, а также актуализации экспертизы. При интеграционном взаимодействии с RT Protect EDR и другими средствами защиты платформа способна показать полный ландшафт угроз в инфраструктуре.Достоинства:Мультиарендная модель с возможностью использования на месте (on-premise), в облаке (on-cloud) и в формате SaaS.Гибкое управление фидами и артефактами, возможность создания собственных фидов.Возможность взаимодействия с решениями класса Sandbox.Глубокое интеграционное взаимодействие с RT Protect EDR.Входит в реестр российского ПО.Недостатки:Высокоуровневые данные TI доступны только в метаданных (реализация сущностей запланирована на 2025 г.).Нет сертификатов ФСТЭК и ФСБ России.Взаимодействие со сторонними СЗИ возможно только по API (реализация обработки «сырых» логов запланирована на 2025 г.).Читать далее
    • demkd
      В документации правильно, просто забыл убрать, после того как сменил тип интеграции.   Удаление исключений работает только в режиме виртуализации, в принципе системная защита ядра легко преодолевается, но дефендер тогда сходит с ума и ведет себя неадекватно, поэтому только виртуализация, можно конечно допилить что бы удалялось через api, но это все равно не будет работать с неактивной системой, поэтому оставил так как есть.
    • santy
      Demkd, судя по тестам интеграция uVS и  WinRE, запуск uVS из меню Winpe прошли нормально. (проверил на W10), Единственно, после завершения интеграции выходит сообщение, что при обновлении uVS интеграцию необходимо повторить. Так ли это? В документации указано, что если обновление выполнено в каталоге, который ранее был интегрирован с WinRe, то повторная интеграция не нужна.  
×