Память под сокеты

Список форумов » FreeBSD » Сети и FreeBSD

Часовой пояс: UTC + 4 часа

Страница 1 из 1

[ Сообщений: 15 ]

Автор

Сообщение

nevzorofff

Заголовок сообщения: Память под сокеты

Добавлено: Вт 13 авг, 2019 9:07 pm

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

В /var/log/messages по прошествии суток-двух после перезагрузки начинают валиться сообщения:
Для примера:

Код:

Aug 13 09:25:41 homeserver transmission-daemon[1126]: Couldn't connect socket 50 to 31.180.250.110, port 51413 (errno 12 - Cannot allocate memory) (/wrkdirs/usr/ports/net-p2p/transmission-daemon/work/transmission-2.94/libtransmission/net.c:290)
Aug 13 09:45:23 homeserver unbound[1070]: [1070:1] notice: sendto failed: Cannot allocate memory
Aug 13 09:45:23 homeserver unbound[1070]: [1070:1] notice: remote address is 8.8.8.8 port 53

Как узнать памяти подо что добавить? У компа её 6 гигов.

В top памяти ещё много:

Код:

last pid: 28768;  load averages:  0.10,  0.18,  0.17                                                                                                                                       up 1+23:03:42  22:03:13
44 processes:  1 running, 43 sleeping
CPU:  0.6% user,  0.0% nice,  0.9% system,  0.3% interrupt, 98.3% idle
Mem: 259M Active, 4477M Inact, 196M Laundry, 1017M Wired, 589M Buf, 128M Free
Swap: 12G Total, 12G Free

Сетевой нагрузки-то нет:
Непубличный промежуточный tor узел, торренты, файлопомойка и шлюз в интернет для квартиры(в пределах десяти клиентских устройств).

loader.conf:

Код:

#Squid diskd
kern.ipc.msgmnb=8192
kern.ipc.msgssz=64
kern.ipc.msgtql=2048
#Squid end
kern.ipc.nmbclusters=32768

sysctl.conf

Код:

kern.ipc.maxsockbuf=16777216
kern.ipc.somaxconn=1024

Что ещё куда проверить и подкрутить?

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Вт 13 авг, 2019 11:53 pm

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

В /var/log/messages по прошествии суток-двух после перезагрузки начинают валиться сообщения:
Для примера:

Код:

Aug 13 09:25:41 homeserver transmission-daemon[1126]: Couldn't connect socket 50 to 31.180.250.110, port 51413 (errno 12 - Cannot allocate memory) (/wrkdirs/usr/ports/net-p2p/transmission-daemon/work/transmission-2.94/libtransmission/net.c:290)
Aug 13 09:45:23 homeserver unbound[1070]: [1070:1] notice: sendto failed: Cannot allocate memory
Aug 13 09:45:23 homeserver unbound[1070]: [1070:1] notice: remote address is 8.8.8.8 port 53

Как узнать памяти подо что добавить? У компа её 6 гигов.

В top памяти ещё много:

Код:

last pid: 28768;  load averages:  0.10,  0.18,  0.17                                                                                                                                       up 1+23:03:42  22:03:13
44 processes:  1 running, 43 sleeping
CPU:  0.6% user,  0.0% nice,  0.9% system,  0.3% interrupt, 98.3% idle
Mem: 259M Active, 4477M Inact, 196M Laundry, 1017M Wired, 589M Buf, 128M Free
Swap: 12G Total, 12G Free

Код:

#Squid diskd
kern.ipc.msgmnb=8192
kern.ipc.msgssz=64
kern.ipc.msgtql=2048
#Squid end
kern.ipc.nmbclusters=32768

sysctl.conf

Код:

kern.ipc.maxsockbuf=16777216
kern.ipc.somaxconn=1024

Что ещё куда проверить и подкрутить?

# sysctl net.graph.maxdata ?

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Ср 14 авг, 2019 12:52 pm

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

net.graph.maxdata: 4096

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Ср 14 авг, 2019 6:15 pm

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

net.graph.maxdata: 4096

/boot/loader.conf
...
# increase netgraph kernel params
net.graph.maxdata=65535
net.graph.maxalloc=65535

# reboot

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Ср 14 авг, 2019 10:05 pm

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Не помогло

Код:

# sysctl net.graph.maxdata
net.graph.maxdata: 65535
# sysctl net.graph.maxalloc
net.graph.maxalloc: 65535

Код:

Aug 14 22:01:43 homeserver unbound[1084]: [1084:1] notice: sendto failed: No buffer space available
Aug 14 22:01:43 homeserver unbound[1084]: [1084:1] notice: remote address is 8.8.8.8 port 53

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Ср 14 авг, 2019 11:45 pm

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

Не помогло

Код:

# sysctl net.graph.maxdata
net.graph.maxdata: 65535
# sysctl net.graph.maxalloc
net.graph.maxalloc: 65535

Код:

Aug 14 22:01:43 homeserver unbound[1084]: [1084:1] notice: sendto failed: No buffer space available
Aug 14 22:01:43 homeserver unbound[1084]: [1084:1] notice: remote address is 8.8.8.8 port 53

теперь сообщения только от unbound?
после установки ядерных параметров перезагружали?
сетевые карты какие?

# uname -a

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Ср 14 авг, 2019 11:56 pm

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Пока да, но до суток могут сообщения не вылазить.

Кроме трансмиссиии и унбаунда ещё самба дурила - видео на ТВ приставку могла переставать отдавать. С 3-5 попытки подключится - работало, но в логи она не жаловалась.

Сетевушки в локалку смотрят две re (материнка Kontron KT965 ATXP) + в PCI воткнута fxp.

Код:

FreeBSD homeserver 12.0-STABLE FreeBSD 12.0-STABLE r349024 GENERIC amd64

Вообще есть некоторое ощущение, что проблемы начались после обновления со стейбла на релиз. Но в стейбле есть проблема - тунель в тунеле не заводится. Интернет по PPPoE и L2TP тунели(цепляются роутеры пары друзей, родственников чтобы можно было понять что у них, если какие-то проблемы) устанавливаются, но пакеты не ходят.

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Чт 15 авг, 2019 1:03 am

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

Код:

FreeBSD homeserver 12.0-STABLE FreeBSD 12.0-STABLE r349024 GENERIC amd64

Internet<-fxp[WAN]-FreeBSD-[ LAN(2xre)
PPPoE+L2TP|nat|squid|unbound|transmission|samba|

Вы не попутали про обновление со Stable -> Release?
У Вас Stable, проблемы с тунелем в тунеле вроде в релизе были.

покажите кусок из dmesg про fxp и re
fxp(pci), а re - какие?

сделайте netstat -m и vmstat -z, сейчас и когда начнет реально отваливаться.
потом посмотрим и vmstat -i на всякий случай.
И да, еще покажите ifconfig -a
И весь тюнинг в /boot/loader.conf и /etc/sysctl.conf

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Пт 16 авг, 2019 9:46 am

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Схема с интернетом чуть служнее:
Кабель от провайдера заходит в микротик и всё прилетающее от провайдера засовывается в VLAN15.
VLAN2 с того же роутера - локалка для раздачи её по wifi. Эти два влана идут транком в fxp. Бридж для локалки целиком - обе re и vlan2 на fxp0.

По сервисам - ещё промежуточная tor нода непубличная, трафика минимум, нужна как соск прокся для обхода блокировок РКНа.

Stable и Release - да, местами перепутал. Был Release, обновился до Stable

Сейчас вот проглючило опять

Код:

 # netstat -m
584/9796/10380 mbufs in use (current/cache/total)
579/697/1276/32768 mbuf clusters in use (current/cache/total/max)
579/686 mbuf+clusters out of packet secondary zone in use (current/cache)
0/40/40/189165 4k (page size) jumbo clusters in use (current/cache/total/max)
0/0/0/56049 9k jumbo clusters in use (current/cache/total/max)
0/0/0/31527 16k jumbo clusters in use (current/cache/total/max)
1304K/4003K/5307K bytes allocated to network (current/cache/total)
0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters)
0/0/0 requests for mbufs delayed (mbufs/clusters/mbuf+clusters)
0/0/0 requests for jumbo clusters delayed (4k/9k/16k)
0/0/0 requests for jumbo clusters denied (4k/9k/16k)
25 sendfile syscalls
22 sendfile syscalls completed without I/O request
3 requests for I/O initiated by sendfile
3 pages read by sendfile as part of a request
22 pages were valid at time of a sendfile request
0 pages were valid and substituted to bogus page
0 pages were requested for read ahead by applications
0 pages were read ahead by sendfile
0 times sendfile encountered an already busy page
0 requests for sfbufs denied
0 requests for sfbufs delayed

Блин, вместо vmstat два раза вставил от netstat, роутер уже перезагрузил. Как ещё глюканёт - выложу.

После перезагрузки и минут 10. Покрутил 10 минут фильм с хорошим битрейтом, потом снял. Пока жалоб в сислоге и видимых проблем нет:

Код:

# netstat -m
584/1951/2535 mbufs in use (current/cache/total)
580/690/1270/32768 mbuf clusters in use (current/cache/total/max)
580/685 mbuf+clusters out of packet secondary zone in use (current/cache)
0/173/173/189165 4k (page size) jumbo clusters in use (current/cache/total/max)
0/0/0/56049 9k jumbo clusters in use (current/cache/total/max)
0/0/0/31527 16k jumbo clusters in use (current/cache/total/max)
1306K/2559K/3865K bytes allocated to network (current/cache/total)
0/0/0 requests for mbufs denied (mbufs/clusters/mbuf+clusters)
0/0/0 requests for mbufs delayed (mbufs/clusters/mbuf+clusters)
0/0/0 requests for jumbo clusters delayed (4k/9k/16k)
0/0/0 requests for jumbo clusters denied (4k/9k/16k)
0 sendfile syscalls
0 sendfile syscalls completed without I/O request
0 requests for I/O initiated by sendfile
0 pages read by sendfile as part of a request
0 pages were valid at time of a sendfile request
0 pages were valid and substituted to bogus page
0 pages were requested for read ahead by applications
0 pages were read ahead by sendfile
0 times sendfile encountered an already busy page
0 requests for sfbufs denied
0 requests for sfbufs delayed

Код:

 # vmstat -z
ITEM                   SIZE  LIMIT     USED     FREE      REQ FAIL SLEEP

UMA Kegs:               224,      0,     131,       5,     131,   0,   0
UMA Zones:              680,      0,     133,       2,     133,   0,   0
UMA Slabs:               80,      0,    1957,      43,    2170,   0,   0
UMA Hash:               256,      0,       9,       6,      14,   0,   0
4 Bucket:                32,      0,      24,     851,    2684,   0,   0
6 Bucket:                48,      0,       7,     823,     605,   0,   0
8 Bucket:                64,      0,      17,     789,   18256,  21,   0
12 Bucket:               96,      0,      23,     387,   17694,   0,   0
16 Bucket:              128,      0,      95,     432,   19736,   1,   0
32 Bucket:              256,      0,      42,     153,    7362,   7,   0
64 Bucket:              512,      0,     124,      92,    4102, 275,   0
128 Bucket:            1024,      0,      83,     153,    7634,   1,   0
256 Bucket:            2048,      0,     166,      16,   20258,  21,   0
vmem:                  1792,      0,       3,       1,       3,   0,   0
vmem btag:               56,      0,   14306,     533,   14733, 105,   0
VM OBJECT:              256,      0,   24965,     295,   51573,   0,   0
RADIX NODE:             144,      0,   71018,      73,  123418,   0,   0
MAP:                    240,      0,       3,      61,       3,   0,   0
KMAP ENTRY:             120,      0,      23,     241,      23,   0,   0
MAP ENTRY:              120,      0,  113272,   21005,  482616,   0,   0
VMSPACE:               2560,      0,      47,       7,    1535,   0,   0
fakepg:                 104,      0,       0,       0,       0,   0,   0
64 pcpu:                  8,      0,    3250,     334,    3250,   0,   0
mt_stats_zone:           64,      0,     443,     325,     443,   0,   0
mt_zone:                 24,      0,     443,     392,     443,   0,   0
16:                      16,      0,    2035,     475,   73042,   0,   0
32:                      32,      0,    2327,     798,   36478,   0,   0
64:                      64,      0,   13267,    3907,  298313,   0,   0
128:                    128,      0,    7817,    4087,  191618,   0,   0
256:                    256,      0,   22154,    2986,   37321,   0,   0
512:                    512,      0,     484,     300,    4190,   0,   0
1024:                  1024,      0,      94,     106,    2966,   0,   0
2048:                  2048,      0,      95,      45,   67442,   0,   0
4096:                  4096,      0,     511,       4,    5537,   0,   0
8192:                  8192,      0,      56,       0,     468,   0,   0
16384:                16384,      0,      20,       8,     621,   0,   0
32768:                32768,      0,      10,       4,     372,   0,   0
65536:                65536,      0,      15,       2,     745,   0,   0
SLEEPQUEUE:              80,      0,     307,     220,     307,   0,   0
Files:                   80,      0,     300,     200,   43240,   0,   0
filedesc0:             1104,      0,      72,      18,    1559,   0,   0
rangeset pctrie nodes:    144,      0,       0,       0,       0,   0,   0
TURNSTILE:              136,      0,     307,      73,     307,   0,   0
rl_entry:                40,      0,     177,     423,     177,   0,   0
umtx pi:                 96,      0,       0,       0,       0,   0,   0
umtx_shm:                88,      0,   21082,     203,   21086,   0,   0
MAC labels:              40,      0,       0,       0,       0,   0,   0
PROC:                  1328,      0,      71,      19,    1558,   0,   0
THREAD:                1400,      0,     197,     109,     533,   0,   0
cpuset:                 104,      0,       7,     272,       7,   0,   0
domainset:               40,      0,       0,       0,       0,   0,   0
audit_record:          1280,      0,       0,       0,       0,   0,   0
mbuf_packet:            256, 2421330,     580,     685,  421959,   0,   0
mbuf:                   256, 2421330,       7,    1263, 6549717,   0,   0
mbuf_cluster:          2048,  32768,    1265,       5,    1269,   0,   0
mbuf_jumbo_page:       4096, 189165,       0,     173,  833167,   0,   0
mbuf_jumbo_9k:         9216,  56049,       0,       0,       0,   0,   0
mbuf_jumbo_16k:       16384,  31527,       0,       0,       0,   0,   0
epoch_record pcpu:      256,      0,       4,      60,       4,   0,   0
ttyinq:                 160,      0,     180,      20,     315,   0,   0
ttyoutq:                256,      0,      95,     100,     167,   0,   0
DMAR_MAP_ENTRY:         120,      0,       0,       0,       0,   0,   0
FPU_save_area:          512,      0,       0,       0,       0,   0,   0
g_bio:                  376,      0,       0,    1290,  222924,   0,   0
nvme_request:           128,      0,       0,       0,       0,   0,   0
cryptop:                128,      0,       0,     279,     299,   0,   0
cryptodesc:             120,      0,       0,     264,     598,   0,   0
crypto_session:          24,      0,       4,     330,       4,   0,   0
vtnet_tx_hdr:            24,      0,       0,       0,       0,   0,   0
VNODE:                  480,      0,    2153,      55,    2392,   0,   0
VNODEPOLL:              120,      0,       0,       0,       0,   0,   0
BUF TRIE:               144,      0,    1571,   38119,   11404,   0,   0
NAMEI:                 1024,      0,       0,      40,   36353,   0,   0
rentr:                   24,      0,       0,       0,       0,   0,   0
S VFS Cache:            108,      0,    1775,     115,    4510,   0,   0
STS VFS Cache:          148,      0,       0,       0,       0,   0,   0
L VFS Cache:            328,      0,     278,      46,     292,   0,   0
LTS VFS Cache:          368,      0,       0,       0,       0,   0,   0
NCLNODE:                592,      0,       0,       0,       0,   0,   0
DIRHASH:               1024,      0,     134,      10,     134,   0,   0
procdesc:               136,      0,       0,       0,       0,   0,   0
AIO:                    208,      0,       0,       0,       0,   0,   0
AIOP:                    32,      0,       0,       0,       0,   0,   0
AIOCB:                  752,      0,       0,       0,       0,   0,   0
AIOLIO:                 280,      0,       0,       0,       0,   0,   0
pipe:                   760,      0,      18,      22,     707,   0,   0
Mountpoints:           2744,      0,       8,       4,       8,   0,   0
ksiginfo:               112,      0,      71,     979,    1678,   0,   0
itimer:                 352,      0,       0,       0,       0,   0,   0
KNOTE:                  160,      0,      58,     192,   99798,   0,   0
socket:                 872, 195112,     135,     113,    7575,   0,   0
unpcb:                  256, 195120,      39,      96,    3622,   0,   0
IPsec SA lft_c:          16,      0,       4,     508,       4,   0,   0
ipq:                     56,   1065,       0,       0,       0,   0,   0
udp_inpcb:              488, 195112,      39,      81,    1448,   0,   0
udpcb:                   32, 195125,      39,     586,    1448,   0,   0
tcp_inpcb:              488, 195112,      39,     137,    2436,   0,   0
tcpcb:                  976, 195112,      37,     119,    2436,   0,   0
tcptw:                   88,  27810,       2,     268,     104,   0,   0
syncache:               168,  15364,       0,     184,     545,   0,   0
hostcache:               96,  15375,     190,     220,     190,   0,   0
sackhole:                32,      0,       0,       0,       0,   0,   0
tfo:                      4,      0,       0,       0,       0,   0,   0
tfo_ccache_entries:      80,      0,       0,       0,       0,   0,   0
tcpreass:                48,   2075,       0,     332,       3,   0,   0
tcp_log:                400, 1000000,       0,       0,       0,   0,   0
tcp_log_bucket:         144,      0,       0,       0,       0,   0,   0
tcp_log_node:           120,      0,       0,       0,       0,   0,   0
sctp_ep:               1280, 195114,       0,       0,       0,   0,   0
sctp_asoc:             2408,  40000,       0,       0,       0,   0,   0
sctp_laddr:              48,  80012,       0,     332,       8,   0,   0
sctp_raddr:             736,  80000,       0,       0,       0,   0,   0
sctp_chunk:             152, 400010,       0,       0,       0,   0,   0
sctp_readq:             152, 400010,       0,       0,       0,   0,   0
sctp_stream_msg_out:    112, 400015,       0,       0,       0,   0,   0
sctp_asconf:             40, 400000,       0,       0,       0,   0,   0
sctp_asconf_ack:         48, 400060,       0,       0,       0,   0,   0
udplite_inpcb:          488, 195112,       0,       0,       0,   0,   0
ripcb:                  488, 195112,       3,      61,      15,   0,   0
rtentry:                208,      0,      23,     110,      25,   0,   0
selfd:                   64,      0,     155,     651,  486720,   0,   0
swpctrie:               144, 756675,       0,       0,       0,   0,   0
swblk:                  136, 756668,       0,       0,       0,   0,   0
FFS inode:              160,      0,    2104,      96,    2341,   0,   0
FFS1 dinode:            128,      0,       0,       0,       0,   0,   0
FFS2 dinode:            256,      0,    2104,      41,    2341,   0,   0
NetGraph items:          72,  65565,       1,     402,    1402,   0,   0
NetGraph data items:     72,  65565,       0,     527, 2815948,   0,   0
IPFW counters:           16,      0,      10,     246,      10,   0,   0
IPFW dynamic states data:     88,  16425,       0,       0,       0,   0,   0
IPFW parent dynamic states:     32,   4125,       0,       0,       0,   0,   0
IPFW IPv4 dynamic states:     40,      0,       0,       0,       0,   0,   0
IPFW IPv6 dynamic states:     72,      0,       0,       0,       0,   0,   0

Код:

vmstat -i
interrupt                          total       rate
irq1: atkbd0                           2          0
irq16: uhci0+                       7208          9
irq23: fxp0 uhci2+                 20383         24
cpu0:timer                        181323        217
cpu1:timer                        128015        153
irq258: re0                        14861         18
irq260: re1                       496079        594
irq261: ahci0:ch0                   7210          9
irq266: ahci0:ch5                  53099         64
Total                             908180       1087

ifconfig -a

Код:

re0: flags=8943<UP,BROADCAST,RUNNING,PROMISC,SIMPLEX,MULTICAST> metric 0 mtu 1500
        options=8209b<RXCSUM,TXCSUM,VLAN_MTU,VLAN_HWTAGGING,VLAN_HWCSUM,WOL_MAGIC,LINKSTATE>
        ether 00:e0:f4:1e:28:39
        inet 192.168.99.254 netmask 0xffffff00 broadcast 192.168.99.255
        media: Ethernet autoselect (100baseTX <full-duplex>)
        status: active
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
re1: flags=8943<UP,BROADCAST,RUNNING,PROMISC,SIMPLEX,MULTICAST> metric 0 mtu 1500
        options=8209b<RXCSUM,TXCSUM,VLAN_MTU,VLAN_HWTAGGING,VLAN_HWCSUM,WOL_MAGIC,LINKSTATE>
        ether 00:e0:f4:1e:28:3a
        media: Ethernet autoselect (1000baseT <full-duplex>)
        status: active
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
fxp0: flags=8943<UP,BROADCAST,RUNNING,PROMISC,SIMPLEX,MULTICAST> metric 0 mtu 1500
        options=2008<VLAN_MTU,WOL_MAGIC>
        ether 00:90:27:0d:aa:53
        media: Ethernet autoselect (100baseTX <full-duplex>)
        status: active
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
lo0: flags=8049<UP,LOOPBACK,RUNNING,MULTICAST> metric 0 mtu 16384
        options=680003<RXCSUM,TXCSUM,LINKSTATE,RXCSUM_IPV6,TXCSUM_IPV6>
        inet6 ::1 prefixlen 128
        inet6 fe80::1%lo0 prefixlen 64 scopeid 0x4
        inet 127.0.0.1 netmask 0xff000000
        groups: lo
        nd6 options=21<PERFORMNUD,AUTO_LINKLOCAL>
lo1: flags=8049<UP,LOOPBACK,RUNNING,MULTICAST> metric 0 mtu 16384
        options=680003<RXCSUM,TXCSUM,LINKSTATE,RXCSUM_IPV6,TXCSUM_IPV6>
        inet 172.31.1.1 netmask 0xffffffff
        groups: lo
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
vlan2: flags=8943<UP,BROADCAST,RUNNING,PROMISC,SIMPLEX,MULTICAST> metric 0 mtu 1500
        ether 00:90:27:0d:aa:53
        groups: vlan
        vlan: 2 vlanpcp: 0 parent interface: fxp0
        media: Ethernet autoselect (100baseTX <full-duplex>)
        status: active
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
vlan15: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500
        ether 00:90:27:0d:aa:53
        groups: vlan
        vlan: 15 vlanpcp: 0 parent interface: fxp0
        media: Ethernet autoselect (100baseTX <full-duplex>)
        status: active
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
gre0: flags=8051<UP,POINTOPOINT,RUNNING,MULTICAST> metric 0 mtu 1476
        options=80000<LINKSTATE>
        tunnel inet 95.183.AA.BB --> 93.171.CC.EE
        inet 10.0.255.34 --> 10.0.255.33 netmask 0xff000000
        groups: gre
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
gif0: flags=8051<UP,POINTOPOINT,RUNNING,MULTICAST> metric 0 mtu 1280
        options=80000<LINKSTATE>
        tunnel inet 95.183.AA.BB --> 80.211.FF.GG
        inet 192.168.199.254 --> 192.168.199.253 netmask 0xfffffffc
        groups: gif
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
ng0: flags=88d1<UP,POINTOPOINT,RUNNING,NOARP,SIMPLEX,MULTICAST> metric 0 mtu 1492
        inet 95.183.AA.BB --> 92.62.DD.EE netmask 0xffffffff
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>
ng1: flags=88d1<UP,POINTOPOINT,RUNNING,NOARP,SIMPLEX,MULTICAST> metric 0 mtu 1400
        inet 192.168.199.1 --> 192.168.199.4 netmask 0xffffffff
        inet6 fe80::2e0:f4ff:fe1e:2839%ng1 prefixlen 64 scopeid 0xb
        nd6 options=21<PERFORMNUD,AUTO_LINKLOCAL>
ng2: flags=88d1<UP,POINTOPOINT,RUNNING,NOARP,SIMPLEX,MULTICAST> metric 0 mtu 1400
        inet 192.168.199.1 --> 192.168.199.16 netmask 0xffffffff
        nd6 options=29<PERFORMNUD,IFDISABLED,AUTO_LINKLOCAL>

ng0 интернет
В gif и gre трафика мизер, для ssh и вебинтерфейса всякой сетевого железа.

dmesg

Код:

fxp0: <Intel 82558 Pro/100 Ethernet> port 0xbc00-0xbc1f mem 0xbfeff000-0xbfefffff,0xff600000-0xff6fffff irq 23 at device 4.0 on pci3
miibus2: <MII bus> on fxp0
inphy0: <i82555 10/100 media interface> PHY 1 on miibus2
inphy0:  10baseT, 10baseT-FDX, 100baseTX, 100baseTX-FDX, auto, auto-flow

re0

Код:

re0: <RealTek 8168/8111 B/C/CP/D/DP/E/F/G PCIe Gigabit Ethernet> port 0x9800-0x98ff mem 0xff1ff000-0xff1fffff irq 16 at device 0.0 on pci1
re0: Using 1 MSI message
re0: Chip rev. 0x38000000
re0: MAC rev. 0x00500000
miibus0: <MII bus> on re0
rgephy0: <RTL8169S/8110S/8211 1000BASE-T media interface> PHY 1 on miibus0
rgephy0:  none, 10baseT, 10baseT-FDX, 10baseT-FDX-flow, 100baseTX, 100baseTX-FDX, 100baseTX-FDX-flow, 1000baseT, 1000baseT-master, 1000baseT-FDX, 1000baseT-FDX-master, 1000baseT-FDX-flow, 1000baseT-FDX-flow-master, auto, auto-flow
re0: Using defaults for TSO: 65518/35/2048
re0: Ethernet address: 00:e0:f4:1e:28:39
re0: netmap queues/slots: TX 1/256, RX 1/256

re1

Код:

re1: <RealTek 8168/8111 B/C/CP/D/DP/E/F/G PCIe Gigabit Ethernet> port 0xa800-0xa8ff mem 0xff2ff000-0xff2fffff irq 17 at device 0.0 on pci2
re1: Using 1 MSI message
re1: Chip rev. 0x38000000
re1: MAC rev. 0x00500000
miibus1: <MII bus> on re1
rgephy1: <RTL8169S/8110S/8211 1000BASE-T media interface> PHY 1 on miibus1
rgephy1:  none, 10baseT, 10baseT-FDX, 10baseT-FDX-flow, 100baseTX, 100baseTX-FDX, 100baseTX-FDX-flow, 1000baseT, 1000baseT-master, 1000baseT-FDX, 1000baseT-FDX-master, 1000baseT-FDX-flow, 1000baseT-FDX-flow-master, auto, auto-flow
re1: Using defaults for TSO: 65518/35/2048
re1: Ethernet address: 00:e0:f4:1e:28:3a
re1: netmap queues/slots: TX 1/256, RX 1/256

loader.conf

Код:

 # cat /boot/loader.conf
geom_mirror_load="YES"

#Squid diskd
kern.ipc.msgmnb=8192
kern.ipc.msgssz=64
kern.ipc.msgtql=2048
#Squid end

kern.ipc.nmbclusters=32768
net.link.gif.max_nesting=3
#kern.ipc.somaxconn=1024
#kern.ipc.maxsockbuf=16777216


# increase netgraph kernel params
net.graph.maxdata=65535
net.graph.maxalloc=65535

sysctl.conа

Код:

# cat /etc/sysctl.conf
# Uncomment this to prevent users from seeing information about processes that
# are being run under another UID.
#security.bsd.see_other_uids=0
kern.ipc.maxsockbuf=16777216
kern.ipc.somaxconn=1024

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Пт 16 авг, 2019 1:41 pm

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

а смысл заворачивать wifi в vlan2 на роутер-freebsd - для контроля и сервисов?

Цитата:

По сервисам - ещё промежуточная tor нода непубличная, трафика минимум, нужна как соск прокся для обхода блокировок РКНа.

понято, но лично я бы исключил этот сервис, лучше на клиентах установить Tor-Browser.

Цитата:

Сейчас вот проглючило опять

смотрите что начинает валить в логи, сначала одни сообщения, затем другие и тд и тп,
это пища для размышления.

В качестве firewall'а: ipfw? nat на freebsd?

fxp - да еще pci, слабовато...
на iface=re1 пусто? я не увидел что несет re1, это при том что по vmstat -i:

Код:

irq260: re1 496079 594

максимальное кол-во прерываний в системе, это странно.

система не крешится, в panic не выпадает?

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Пт 16 авг, 2019 2:01 pm

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

lavr писал(а):

а смысл заворачивать wifi в vlan2 на роутер-freebsd - для контроля и сервисов?

Микротик стоит в коридоре, к нему заведён кабель от провайдера, но микротик как ротуер не нужен, нужен только wifi у входной двери, ближе к центру квартиры, а freebsd роутер стоит в дальнем углу, вланы - чтобы второй кабель не тянуть между freebsd и микротиком.

lavr писал(а):

понято, но лично я бы исключил этот сервис, лучше на клиентах установить Tor-Browser.

Да неудобно между браузерами переключаться, и каждый раз логин-пароль вводить, а так всё максимально прозрачно для клиентов squid заворачивает в тор.

lavr писал(а):

В качестве firewall'а: ipfw? nat на freebsd?

ng_nat, его mpd5 сам заводит.
ipfw да, правил там минимум.

lavr писал(а):

fxp - да еще pci, слабовато...

Интернет 100мбит/с, на торрентах почти всё выжимает, что есть, мне и 60 хватало, но тут 100 стало дешевле ))

lavr писал(а):

на iface=re1 пусто? я не увидел что несет re1, это при том что по vmstat -i:

re1 - мой десктоп с гигабитным интерфейсом. После перезагрузки прогнал там 2 гиговый файл на максимальной скорости и фильм fullhd включил, всё работало нормально, снял анамнез когда работало нормально.
re0 - проводная часть локалки, сейчас там висит Dune и второй телек со встроенным андроидом.

На Wifi (vlan2) висият только телефоны потому что 2.4 засран до невозможности.

lavr писал(а):

система не крешится, в panic не выпадает?

Ну, может, было за два месяца два-три раза. Перезагружалось само когда сеть тупила.

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Вс 18 авг, 2019 12:43 am

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Начало отваливаться, снял данные:

Но, похоже всё отваливается из-за того, что IP висит на интерфейсе, обращённом к моему десктопу. Трансмиссия прямо обильно сыпала, стал будить десктоп, в это время линк на freebsd упал и через 3с поднялся, а трансмиссия в момент пробуждения перестала сыпать. Да и жалобы на самбу от домочадцев поступали именно тогда, когда меня нет ))

Ща переставлю патчкорды, чтобы IP адрес висел на сетевухе, смотрящей на коммутатор(хотя, самый правильный вариант создать для адреса виртуальный интерфейс и тоже загнать его в бридж) и посмотрю )

netstat -m

vmstat -z

vmstat -i

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Пн 19 авг, 2019 11:44 am

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Перекинул адрес на vlan2, он всегда в апе - не помогло. Исключил re0, куда подключен десктоп, из бриджа, остались re1 и vlan2 в локальной сети, оба всегда в апе. Не помогло. Более того, unbound сращу после загрузки стал жаловаться на нехватку памяти под буфера.

Код:

Aug 19 12:28:41 homeserver unbound[1079]: [1079:1] notice: remote address is 40.90.4.201 port 53
Aug 19 12:28:41 homeserver unbound[1079]: [1079:1] notice: sendto failed: No buffer space available

Вернуться к началу

lavr

Заголовок сообщения: Re: Память под сокеты

Добавлено: Вт 20 авг, 2019 12:18 am

Зарегистрирован: Пт 03 сен, 2004 1:26 pm
Сообщения: 2366

nevzorofff писал(а):

sorry, Вы больше запутываете, что и куда подключено.

В указанном выводе, криминала не углядел.
Про сообщения в логи я не просто так писал, может быть важно,
какие первыми появились, какие потом, сообщения могут быть разные.

Предлагаю в личку или email, sorry, отпуск однако.

Вернуться к началу

nevzorofff

Заголовок сообщения: Re: Память под сокеты

Добавлено: Вт 20 авг, 2019 1:06 am

Зарегистрирован: Вс 02 фев, 2014 3:00 pm
Сообщения: 13

Сейчас так: в бридже локальной сети только vlan2 и re1. К vlan2(fxp0 точнее) подключен микротик. К re1 - тупой 8 портовый коммутатор.
Проблем нет уже 12 часов, кроме одного плевка unbound в логи, что привёл выше.
Когда десктоп в режиме сна - re0 перевключается в 10мбит, подозреваю, что из-за десктопа, и от этого все проблемы.

Вернуться к началу

Страница 1 из 1

[ Сообщений: 15 ]

Версия для печати

Пред. тема | След. тема

Список форумов » FreeBSD » Сети и FreeBSD

Часовой пояс: UTC + 4 часа

Кто сейчас на конференции

Зарегистрированные пользователи: Google [Bot]

Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения