Функциональные возможности SQUID и SARG

Аннотация. В данной работе рассмотрены вопросы, которые касаются изучения функциональных возможностей таких программных средств, используемых для анализа и контроля трафика, как SARG. В ходе выполнения работы были изучены теоретические материалы по тематике исследования, даны понятия программным пакетам SARG и squid, а также выделены основные функциональные возможности данных продуктов. Знание данных функциональных особенностей поможет в работе любому системному администратору, а также позволит осуществить выбор необходимого программного пакета для его дальнейшего внедрения на предприятии.
Ключевые слова: трафик, администрирование, SARG, squid, интернет. 
Abstract. This paper discusses issues related to the study of the functionality of software tools used for traffic analysis and control, such as SARG. In the course of the work, theoretical materials on the research topic were studied, concepts were given to the SARG and squid software packages, and the main functionality of these products was highlighted. Knowledge of these functional features will help any system administrator to work, as well as allow you to select the necessary software package for its further implementation in the enterprise.
Keywords: traffic, administration, SARG, squid, Internet.
В настоящее время одним из самых важных вопросов, который постоянно должен беспокоить системного администратора, является контроль статистических данных о пользовании интернетом в рамках конкретного предприятия. Владея такой информацией, системный администратор всегда сможет дать грамотный ответ на вопрос «куда и с какой целью был потрачен весь имеющийся трафик», а также провести обоснование для руководства необходимости увеличения канала и своевременного выявления и пресечения трафика, который относится к нежелательному.
Самую большую часть в любой организации, который представляет наибольший интерес, представляет HTTP-трафик, который дает возможность проводить оценку активности рабочих и их основных предпочтений. Кроме этого, это является одним из негласных способов узнать, чем занимаются рабочие в свободное время.
До сих пор не имеется ни одного достаточного полного пособия, которое описывало бы все существующие в настоящее время программы для учета и анализа трафика, а также их преимущества и недостатки. Конечно понятно, что их основное назначение заключается в подсчете объема трафика, который тратится за определенный временной интервал, однако ни о каких дополнительны функциях и возможностях, которые отличают данные программные средства, структурированной информации практически нет.
Чаще всего на практике применяются такие программы, как SARG и squid. Данные программные средства являются наиболее старыми, однако это ни в коем случае не умаляет их функциональных возможностей. В связи с вышесказанным можно с уверенностью сказать, что изучение вопросов, которые касаются функциональных возможностей таких программных средств, как SARG и squid, является весьма актуальным в настоящее время.
Squid представляет собой программное обеспечение, которое выполняет функцию кэширующего прокси-сервера для таких распространенных протоколов, как HTTP, FTP, HTTPS. Он был создан разработчика в качестве программного обеспечения, которое имеет открытый исходный код. Любой из запросов в данной программе осуществляется как один процесс ввода или вывода, который никоим образом не блокируется. Squid обладает функцией работы с Active Directory Windows Server с помощью процедуры аутентификации через LDAP, что создает возможность применять ограничения к доступу во всемирную сеть для конкретного пользователя, если он имеет личную запись на сервере Windows, и собирать данные по применению трафика каждым из пользователей.
В программном обеспечении squid существует возможность поддержки следующих видов идентификации пользователей:
- по текущему IP-адресу сети;
- по полученным реквизитам;
- по идентификатору агента пользователя.
Для того, чтобы развернуть данную программу, необходимо выполнить следующую последовательность операций:
- произвести установку программного пакета squid и всех необходимых для его работы элементов;
- осуществить настройку файла конфигурации squid.com (данная операция обладает первостепенной важностью);
- сформировать базу данных, которые будут кэшироваться
- произвести запуск демона squid и выполнить настройку его автозапуска на компьютере, находящемся на рабочем месте сотрудника.
К основным функциональным преимуществам программного пакета squid можно отнести:
- гибкая фильтрация запросов;
- опознавание пользователей по IP-адресу или имени;
- работа по расписанию;
- обрезка (а точнее подмена) банеров;
- блокировка доступа к нежелательным сайтам;
- поддержка работы с TLS/SSL соединениями;
- поддержка загрузки бандлов сертификатов для корректного отслеживания цепочки сертификационных центров при генерации;
- выполнение каждого запроса определенного пользователя системы реализуется посредством одного большого процесса ввода-вывода, благодаря чему создается достаточно высокая эффективность работы сервера;
- имеется возможность проведения аутентификации пользователей с использованием достаточно большого круда методик (таких как NCSA, LDAP, MSNT, NTLM, PAM, SMB, SASL);
- наличие возможности работы как с Linux, так и с Windows [1, 2].
Среди функциональных недостатков можно выделить:
- тонкая настройка под себя и свои требования требует нехилого гандикапа и умения вникать в десяток чужих разных конфигов и факов, чтоб собрать рабочую версию, подогнанную под нужные параметры;
- отсутствие официальной русской документации;
- невозможно обработать логи с разных серверов и собрать статистику в одном месте;
- все браузеры нужно руками настраивать на работу с прокси-сервером, иначе доступа в интернет не будет вообще.
Теперь перейдем к рассмотрению второй утилиты – SARG. Это программное средство, которое осуществляет формирование отчетов, базируясь на результатах анализа лог-файла прокси сервера программного пакета squid. Данные отчеты дают возможность кто из пользователей системы осуществлял переход к конкретному сайту и в какое время происходило данное обращение. Общий отчет может оказать огромную помощь в осуществлении тарификации пользователей, которые осуществляют свою деятельность через squid, поскольку в ее состав входит общий трафик и определенное число коннектов для конкретного пользователя за выбранный временной промежуток.
Перед тем, как осуществлять установку программного пакета SARG, требуется осуществить настройку сервера. Это связано с тем, что программный пакет формирует все необходимые отчеты в формате HTML, в связи с чем необходимо осуществить все необходимые манипуляции с сервером. В большинстве ситуаций достаточно создать спецаильны йсервер lighttpd.
По умолчанию SARG формирует отчет за весь доступный период, отчет содержит детализацию по пользователям (адресам) и посещенным ими сайтам, использованию трафика и кэша, загрузкам (см. рисунок 1). Отдельно можно просмотреть наиболее посещаемые сайты, данный отчет сортирует сайты не по трафику, а по количеству посещений.
Рисунок 1 – Пример отчета в программе SARG [3]
Для каждого из пользователей можно вывести всю статистику (см. рисунок 2).
Рисунок 2 – Пример исчерпывающей статистики в программе SARG [3]
Можно также просмотреть график потребления трафика и статистику работы по датам и времени (см. рисунок 3).
Рисунок 3 - График потребления трафика и статистику работы по датам и времени [3]
К основным функциональным преимуществам данной утилиты относится:
- наличие возможности задачи сразу нескольких различных конфигурационных файлов для того, чтобы сформировать отчеты, выводимые в различной форме;
- простота интерфейса;
- формирование временных графиков и графиков данных;
- достаточно большое число режимов настройки вывода отчетов (порядка 120);
- имеется возможность работы с LDAP;
- пользователи могут получить доступ только для своих отчетов на web-сервере;
- наличие возможности осуществлять преобразование логов в необходимый формат с целью экономии места;
- наличие функциональной возможности работы с файлами squid;
- возможность отправки по электронной почте необходимого отчета;
- высокая универсальность программного средства и т.д.
Среди основных функциональных недостатков можно выделить:
- необходимо создавать дополнительный HTTP сервер для удобства с программой, что усложняет этап настройки;
- программа является достаточно большой и в настоящее время существуют намного более компактные программы;
- на данный момент доступны только отчеты topusers;
- не умеет объединять пользователей в группы и вести статистику по группам;
- длительность генерации отчетов существенно выше, чем в других программах.
Таким образом, в ходе выполнения данной работы было произведено ознакомление с назначением, функционалом и установкой таких программных средств для анализа трафика, как SARG и squid. Данная информация может оказаться очень полезной для системных администраторов, которые имеют практический опыт работы по настройке систем подобного рода.
Список используемой литературы
1 SquidGuard - ДЛЯ ВСЕХ [Электронный ресурс]. Свободный доступ: https://www.opennet.ru/docs/RUS/squidguard (дата обращения – 24.11.2020 г.).
2 Настройка Squid + SquidGuard + SSL + Active Directory (FreeBSD 12) [Электронный ресурс]. Свободный доступ: https://zremcom.com/zametki/freebsd/196-squid-squidguard-ssl-active-directy (дата обращения – 24.11.2020 г.).
3 SARG - анализируем логи прокси-севера Squid [Электронный ресурс]. Свободный доступ: https://interface31.ru/tech_it/2011/03/sarg-analiziruem-logi-proksi-severa-squid.html (дата обращения – 24.11.2020 г.).