ipset: get_reestr_hostlist exclude zapret-hosts-user.txt

This commit is contained in:
bol-van 2021-12-12 12:58:58 +03:00
parent 42eb901928
commit 8919cc321f
2 changed files with 21 additions and 2 deletions

View File

@ -702,7 +702,7 @@ ip2net фильтрует входные данные, выкидывая неп
Тогда init скрипт будет запускать tpws с листом zapret-hosts-users.txt. Тогда init скрипт будет запускать tpws с листом zapret-hosts-users.txt.
2) Список доменов РКН может быть получен скриптом ipset/get_reestr_hostlist.sh - кладется в ipset/zapret-hosts.txt.gz. 2) Список доменов РКН может быть получен скриптом ipset/get_reestr_hostlist.sh - кладется в ipset/zapret-hosts.txt.gz.
Этот скрипт автоматически добавляет к списку РКН домены из zapret-hosts-user.txt. Этот скрипт автоматически добавляет к списку РКН домены из zapret-hosts-user.txt и исключает zapret-hosts-exclude.txt.
init скрипт будет запускать tpws с листом zapret-hosts.txt.gz. init скрипт будет запускать tpws с листом zapret-hosts.txt.gz.
При фильтрации по именам доменов демон должен запускаться без фильтрации по ipset. При фильтрации по именам доменов демон должен запускаться без фильтрации по ipset.

View File

@ -20,12 +20,31 @@ curl -k --fail --max-time 600 --connect-timeout 5 --retry 3 --max-filesize 25165
echo reestr list download failed echo reestr list download failed
exit 2 exit 2
} }
reestr_list()
{
LANG=C cut -s -f2 -d';' "$ZREESTR" | LANG=C nice -n 5 sed -Ee 's/^\*\.(.+)$/\1/' -ne 's/^[a-z0-9A-Z._-]+$/&/p' | $AWK '{ print tolower($0) }'
}
composite_list()
{
# combine reestr and user list
if [ -f "$ZUSERLIST_EXCLUDE" ]; then
reestr_list | nice -n 5 $GREP -xvFf "$ZUSERLIST_EXCLUDE"
else
reestr_list
fi
[ -f "$ZUSERLIST" ] && $AWK '{ print tolower($0) }' <"$ZUSERLIST"
}
dlsize=$(LANG=C wc -c "$ZREESTR" | xargs | cut -f 1 -d ' ') dlsize=$(LANG=C wc -c "$ZREESTR" | xargs | cut -f 1 -d ' ')
if test $dlsize -lt 204800; then if test $dlsize -lt 204800; then
echo list file is too small. can be bad. echo list file is too small. can be bad.
exit 2 exit 2
fi fi
(LANG=C cut -s -f2 -d';' "$ZREESTR" | LANG=C sed -Ee 's/^\*\.(.+)$/\1/' -ne 's/^[a-z0-9A-Z._-]+$/&/p' | $AWK '{ print tolower($0) }' ; cat "$ZUSERLIST" ) | sort -u | zz "$ZHOSTLIST"
composite_list | sort -u | zz "$ZHOSTLIST"
rm -f "$ZREESTR" rm -f "$ZREESTR"
hup_zapret_daemons hup_zapret_daemons