Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Too many open files (many image on readme) #19463

Closed
ledlamp opened this issue Apr 21, 2022 · 12 comments
Closed

Too many open files (many image on readme) #19463

ledlamp opened this issue Apr 21, 2022 · 12 comments
Labels

Comments

@ledlamp
Copy link

ledlamp commented Apr 21, 2022

Description

A repository with 500 small images in its readme, fails to load a majority of the images with 404 and 500 errors: https://gitea.moe/lamp/500-image

Gitea logs various "too many open file" errors such as the following:
[E] RepoAssignment Invalid repo /srv/gitea/data/repositories/lamp/500-image.git: open /dev/null: too many open files
[E] RepoAssignment Invalid repo /srv/gitea/data/repositories/lamp/500-image.git: pipe2: too many open files
[E] RepoAssignment Invalid repo /srv/gitea/data/repositories/lamp/500-image.git: fork/exec /usr/bin/git: too many open files
[E] PANIC: session(release): open /srv/gitea/data/sessions/8/6/86b2632f34bf4a7e: too many open files
[I] http: Accept error: accept unix /srv/gitea/gitea.sock: accept4: too many open files; retrying in 5ms

This doesn't reproduce on the demo server: https://try.gitea.io/Lamp/500-image
so this probably depends on the environment, but i'm posting as an issue because I suspect gitea is opening more files than it ought to be.

FWIW, with fastcgi transport this issue renders the entire web server unresponsive after loading the repository. I had to change to http.

Gitea Version

1.16.6

Can you reproduce the bug on the Gitea demo site?

No

Log Gist

regular: https://gist.githubusercontent.com/asdfisdffdg/506346f12b672abf8f8a6c35d6e71aac/raw/3dc56de93efd60dd47d37131b5abaff4fbd33e53/gistfile1.txt debug: https://gist.githubusercontent.com/asdfisdffdg/ba829b9f7451eec87a6f0da72e280f00/raw/94fe21537c152b2d248c54a3ecba586d3840134e/gistfile1.txt

Screenshots

2022-04-21_13-01-11-947 lamp500-image_-500-image-gitea moe-_Google_Ch

Git Version

1.16.6

Operating System

Rocky Linux 8

How are you running Gitea?

Using your binary

systemd service

[Unit]
Description=Gitea git server
After=network.target

[Service]
User=git
Group=git
WorkingDirectory=/srv/gitea
ExecStart=/srv/gitea/gitea web
MemoryHigh=2G
MemoryMax=3G

[Install]
WantedBy=multi-user.target

systemctl show

Type=simple
Restart=no
NotifyAccess=none
RestartUSec=100ms
TimeoutStartUSec=1min 30s
TimeoutStopUSec=1min 30s
RuntimeMaxUSec=infinity
WatchdogUSec=0
WatchdogTimestamp=Thu 2022-04-21 14:55:31 CDT
WatchdogTimestampMonotonic=2381616958832
PermissionsStartOnly=no
RootDirectoryStartOnly=no
RemainAfterExit=no
GuessMainPID=yes
MainPID=1375444
ControlPID=0
FileDescriptorStoreMax=0
NFileDescriptorStore=0
StatusErrno=0
Result=success
UID=949
GID=946
NRestarts=0
ExecMainStartTimestamp=Thu 2022-04-21 14:55:31 CDT
ExecMainStartTimestampMonotonic=2381616958770
ExecMainExitTimestampMonotonic=0
ExecMainPID=1375444
ExecMainCode=0
ExecMainStatus=0
ExecStart={ path=/srv/gitea/gitea ; argv[]=/srv/gitea/gitea web ; ignore_errors=no ; start_time=[Thu 2022-04-21 14:55:31 CDT] ; stop_time=[n/a] ; pid=1375444 ; code=(null) ; status=0/0 }
Slice=system.slice
ControlGroup=/system.slice/gitea.service
MemoryCurrent=206057472
CPUUsageNSec=[not set]
EffectiveCPUs=
EffectiveMemoryNodes=
TasksCurrent=143
IPIngressBytes=18446744073709551615
IPIngressPackets=18446744073709551615
IPEgressBytes=18446744073709551615
IPEgressPackets=18446744073709551615
Delegate=no
CPUAccounting=no
CPUWeight=[not set]
StartupCPUWeight=[not set]
CPUShares=[not set]
StartupCPUShares=[not set]
CPUQuotaPerSecUSec=infinity
CPUQuotaPeriodUSec=infinity
AllowedCPUs=
AllowedMemoryNodes=
IOAccounting=no
IOWeight=[not set]
StartupIOWeight=[not set]
BlockIOAccounting=no
BlockIOWeight=[not set]
StartupBlockIOWeight=[not set]
MemoryAccounting=yes
DefaultMemoryLow=0
DefaultMemoryMin=0
MemoryMin=0
MemoryLow=0
MemoryHigh=2147483648
MemoryMax=3221225472
MemorySwapMax=infinity
MemoryLimit=infinity
DevicePolicy=auto
TasksAccounting=yes
TasksMax=49375
IPAccounting=no
UMask=0022
LimitCPU=infinity
LimitCPUSoft=infinity
LimitFSIZE=infinity
LimitFSIZESoft=infinity
LimitDATA=infinity
LimitDATASoft=infinity
LimitSTACK=infinity
LimitSTACKSoft=8388608
LimitCORE=infinity
LimitCORESoft=0
LimitRSS=infinity
LimitRSSSoft=infinity
LimitNOFILE=262144
LimitNOFILESoft=1024
LimitAS=infinity
LimitASSoft=infinity
LimitNPROC=30859
LimitNPROCSoft=30859
LimitMEMLOCK=65536
LimitMEMLOCKSoft=65536
LimitLOCKS=infinity
LimitLOCKSSoft=infinity
LimitSIGPENDING=30859
LimitSIGPENDINGSoft=30859
LimitMSGQUEUE=819200
LimitMSGQUEUESoft=819200
LimitNICE=0
LimitNICESoft=0
LimitRTPRIO=0
LimitRTPRIOSoft=0
LimitRTTIME=infinity
LimitRTTIMESoft=infinity
WorkingDirectory=/srv/gitea
OOMScoreAdjust=0
Nice=0
IOSchedulingClass=0
IOSchedulingPriority=0
CPUSchedulingPolicy=0
CPUSchedulingPriority=0
CPUAffinity=
CPUAffinityFromNUMA=no
NUMAPolicy=n/a
NUMAMask=
TimerSlackNSec=50000
CPUSchedulingResetOnFork=no
NonBlocking=no
StandardInput=null
StandardInputData=
StandardOutput=journal
StandardError=inherit
TTYReset=no
TTYVHangup=no
TTYVTDisallocate=no
SyslogPriority=30
SyslogLevelPrefix=yes
SyslogLevel=6
SyslogFacility=3
LogLevelMax=-1
LogRateLimitIntervalUSec=0
LogRateLimitBurst=0
SecureBits=0
CapabilityBoundingSet=cap_chown cap_dac_override cap_dac_read_search cap_fowner cap_fsetid cap_kill cap_setgid cap_setuid cap_setpcap cap_linux_immutable cap_net_bind_service cap_net_broadcast cap_net_admin cap_net_raw cap_ipc_lock cap_ipc_owner cap_sys_module cap_sys_rawio cap_sys_chroot cap_sys_ptrace cap_sys_pacct cap_sys_admin cap_sys_boot cap_sys_nice cap_sys_resource cap_sys_time cap_sys_tty_config cap_mknod cap_lease cap_audit_write cap_audit_control cap_setfcap cap_mac_override cap_mac_admin cap_syslog cap_wake_alarm cap_block_suspend cap_audit_read cap_perfmon cap_bpf
AmbientCapabilities=
User=git
Group=git
DynamicUser=no
RemoveIPC=no
MountFlags=
PrivateTmp=no
PrivateDevices=no
ProtectKernelTunables=no
ProtectKernelModules=no
ProtectControlGroups=no
PrivateNetwork=no
PrivateUsers=no
PrivateMounts=no
ProtectHome=no
ProtectSystem=no
SameProcessGroup=no
UtmpMode=init
IgnoreSIGPIPE=yes
NoNewPrivileges=no
SystemCallErrorNumber=0
LockPersonality=no
RuntimeDirectoryPreserve=no
RuntimeDirectoryMode=0755
StateDirectoryMode=0755
CacheDirectoryMode=0755
LogsDirectoryMode=0755
ConfigurationDirectoryMode=0755
MemoryDenyWriteExecute=no
RestrictRealtime=no
RestrictSUIDSGID=no
RestrictNamespaces=no
MountAPIVFS=no
KeyringMode=private
KillMode=control-group
KillSignal=15
SendSIGKILL=yes
SendSIGHUP=no
Id=gitea.service
Names=gitea.service
Requires=-.mount system.slice sysinit.target
WantedBy=multi-user.target
Conflicts=shutdown.target
Before=multi-user.target shutdown.target
After=systemd-journald.socket sysinit.target basic.target network.target -.mount system.slice
RequiresMountsFor=/srv/gitea
Description=Gitea git server
LoadState=loaded
ActiveState=active
FreezerState=running
SubState=running
FragmentPath=/srv/gitea/gitea.service
UnitFileState=enabled
UnitFilePreset=disabled
StateChangeTimestamp=Thu 2022-04-21 14:55:31 CDT
StateChangeTimestampMonotonic=2381616958834
InactiveExitTimestamp=Thu 2022-04-21 14:55:31 CDT
InactiveExitTimestampMonotonic=2381616958834
ActiveEnterTimestamp=Thu 2022-04-21 14:55:31 CDT
ActiveEnterTimestampMonotonic=2381616958834
ActiveExitTimestamp=Thu 2022-04-21 14:55:30 CDT
ActiveExitTimestampMonotonic=2381615911078
InactiveEnterTimestamp=Thu 2022-04-21 14:55:31 CDT
InactiveEnterTimestampMonotonic=2381616953431
CanStart=yes
CanStop=yes
CanReload=no
CanIsolate=no
CanFreeze=yes
StopWhenUnneeded=no
RefuseManualStart=no
RefuseManualStop=no
AllowIsolate=no
DefaultDependencies=yes
OnFailureJobMode=replace
IgnoreOnIsolate=no
NeedDaemonReload=no
JobTimeoutUSec=infinity
JobRunningTimeoutUSec=infinity
JobTimeoutAction=none
ConditionResult=yes
AssertResult=yes
ConditionTimestamp=Thu 2022-04-21 14:55:31 CDT
ConditionTimestampMonotonic=2381616955804
AssertTimestamp=Thu 2022-04-21 14:55:31 CDT
AssertTimestampMonotonic=2381616955809
Transient=no
Perpetual=no
StartLimitIntervalUSec=10s
StartLimitBurst=5
StartLimitAction=none
FailureAction=none
SuccessAction=none
InvocationID=abe28dbf7bdf4b9ca7d5fd919cbf89c9
CollectMode=inactive

Database

SQLite

@silverwind
Copy link
Member

silverwind commented Apr 22, 2022

LimitNOFILE=262144
LimitNOFILESoft=1024

That ought to be enough, but maybe you can check via lsof -p <pid-of-gitea> to see the actual files opened when it happens. Maybe #19454 is actually related.

@ledlamp
Copy link
Author

ledlamp commented Apr 22, 2022

Hmm

# while true; do lsof -p 2190433 | wc -l; sleep 1; done
25
25
25
510
697
881
55
55
55
55

What does LimitNOFILESoft mean versus LimitNOFILE? because it looks like it reaches 1024 easily but 262144 should be way more than enough.

here's an lsof at idle

COMMAND     PID USER   FD      TYPE             DEVICE  SIZE/OFF      NODE NAME
gitea   2190433  git  cwd       DIR                8,2      4096   9308136 /srv/gitea
gitea   2190433  git  rtd       DIR                8,2      4096         2 /
gitea   2190433  git  txt       REG                8,2 107546440   9327897 /srv/gitea/gitea
gitea   2190433  git  mem       REG                8,2    253556   3281977 /srv/gitea/data/indexers/issues.bleve/store/00000000002c.zap
gitea   2190433  git  mem-W     REG                8,2    131072   3280595 /srv/gitea/data/indexers/issues.bleve/store/root.bolt
gitea   2190433  git    0r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git    1u     unix 0xffff99177b47f500       0t0 238022457 type=STREAM
gitea   2190433  git    2u     unix 0xffff99177b47f500       0t0 238022457 type=STREAM
gitea   2190433  git    3u  a_inode               0,14         0     12352 [eventpoll]
gitea   2190433  git    4r     FIFO               0,13       0t0 238024115 pipe
gitea   2190433  git    5w     FIFO               0,13       0t0 238024115 pipe
gitea   2190433  git    6uW     REG                8,2         0   3281753 /srv/gitea/data/queues/common/LOCK
gitea   2190433  git    7w      REG                8,2     22222   3281754 /srv/gitea/data/queues/common/LOG
gitea   2190433  git    8w      REG                8,2         0   3283192 /srv/gitea/data/queues/common/000086.log
gitea   2190433  git    9w      REG                8,2       145   3283204 /srv/gitea/data/queues/common/MANIFEST-000087
gitea   2190433  git   10r      REG                8,2       167   3281760 /srv/gitea/data/queues/common/000002.ldb
gitea   2190433  git   11u      REG                8,2   2781184   3280545 /srv/gitea/data/gitea.db
gitea   2190433  git   12u     unix 0xffff9917591c3f00       0t0 238023533 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   13r      REG                8,2       622   3277447 /srv/gitea/data/queues/common/000027.ldb
gitea   2190433  git   15uW     REG                8,2    131072   3280595 /srv/gitea/data/indexers/issues.bleve/store/root.bolt
gitea   2190433  git   16r      REG                8,2    253556   3281977 /srv/gitea/data/indexers/issues.bleve/store/00000000002c.zap
gitea   2190433  git   89u     unix 0xffff99169a642400       0t0 238060949 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  134u     unix 0xffff9917f3408000       0t0 238060105 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  162u     unix 0xffff99166fbb4380       0t0 238060980 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  294u     unix 0xffff99165c920d80       0t0 238061051 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  782u     unix 0xffff9917fcc29200       0t0 238062246 /srv/gitea/gitea.sock type=STREAM

and here's an lsof i did while loading the page

COMMAND     PID USER   FD      TYPE             DEVICE  SIZE/OFF      NODE NAME
gitea   2190433  git  cwd       DIR                8,2      4096   9308136 /srv/gitea
gitea   2190433  git  rtd       DIR                8,2      4096         2 /
gitea   2190433  git  txt       REG                8,2 107546440   9327897 /srv/gitea/gitea
gitea   2190433  git  mem       REG                8,2    253556   3281977 /srv/gitea/data/indexers/issues.bleve/store/00000000002c.zap
gitea   2190433  git  mem-W     REG                8,2    131072   3280595 /srv/gitea/data/indexers/issues.bleve/store/root.bolt
gitea   2190433  git    0r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git    1u     unix 0xffff99177b47f500       0t0 238022457 type=STREAM
gitea   2190433  git    2u     unix 0xffff99177b47f500       0t0 238022457 type=STREAM
gitea   2190433  git    3u  a_inode               0,14         0     12352 [eventpoll]
gitea   2190433  git    4r     FIFO               0,13       0t0 238024115 pipe
gitea   2190433  git    5w     FIFO               0,13       0t0 238024115 pipe
gitea   2190433  git    6uW     REG                8,2         0   3281753 /srv/gitea/data/queues/common/LOCK
gitea   2190433  git    7w      REG                8,2     22222   3281754 /srv/gitea/data/queues/common/LOG
gitea   2190433  git    8w      REG                8,2         0   3283192 /srv/gitea/data/queues/common/000086.log
gitea   2190433  git    9w      REG                8,2       145   3283204 /srv/gitea/data/queues/common/MANIFEST-000087gitea   2190433  git   10r      REG                8,2       167   3281760 /srv/gitea/data/queues/common/000002.ldb
gitea   2190433  git   11u      REG                8,2   2781184   3280545 /srv/gitea/data/gitea.db
gitea   2190433  git   12u     unix 0xffff9917591c3f00       0t0 238023533 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   13r      REG                8,2       622   3277447 /srv/gitea/data/queues/common/000027.ldb
gitea   2190433  git   14r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   15uW     REG                8,2    131072   3280595 /srv/gitea/data/indexers/issues.bleve/store/root.bolt
gitea   2190433  git   16r      REG                8,2    253556   3281977 /srv/gitea/data/indexers/issues.bleve/store/00000000002c.zap
gitea   2190433  git   17r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   18r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   19r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   20r     FIFO               0,13       0t0 238098314 pipe
gitea   2190433  git   21r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   22w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   23r     FIFO               0,13       0t0 238102471 pipe
gitea   2190433  git   24u     unix 0xffff9917fccd2400       0t0 238086033 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   25r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   26r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   27r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   28r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   29r     FIFO               0,13       0t0 238100449 pipe
gitea   2190433  git   30r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   31r     FIFO               0,13       0t0 238098331 pipe
gitea   2190433  git   32r     FIFO               0,13       0t0 238100455 pipe
gitea   2190433  git   33r  unknown                                        /proc/2190433/fd/33 (readlink: No such file or directory)
gitea   2190433  git   35r     FIFO               0,13       0t0 238098403 pipe
gitea   2190433  git   36r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   37r     FIFO               0,13       0t0 238102513 pipe
gitea   2190433  git   38u     unix 0xffff9917fccd3f00       0t0 238086035 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   39w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   40r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   41r     FIFO               0,13       0t0 238100286 pipe
gitea   2190433  git   42r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   43r     FIFO               0,13       0t0 238100372 pipe
gitea   2190433  git   44w     FIFO               0,13       0t0 238098331 pipe
gitea   2190433  git   45r     FIFO               0,13       0t0 238100858 pipe
gitea   2190433  git   46w     FIFO               0,13       0t0 238098403 pipe
gitea   2190433  git   48r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   49w     FIFO               0,13       0t0 238100286 pipe
gitea   2190433  git   51r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   52r     FIFO               0,13       0t0 238098404 pipe
gitea   2190433  git   53r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   55r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   60u     unix 0xffff9916b4f28480       0t0 238100708 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   61r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   64r     FIFO               0,13       0t0 238098312 pipe
gitea   2190433  git   65r     FIFO               0,13       0t0 238100287 pipe
gitea   2190433  git   66r     FIFO               0,13       0t0 238098387 pipe
gitea   2190433  git   67r     FIFO               0,13       0t0 238102530 pipe
gitea   2190433  git   68w     FIFO               0,13       0t0 238100287 pipe
gitea   2190433  git   69w     FIFO               0,13       0t0 238098312 pipe
gitea   2190433  git   70r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   71r     FIFO               0,13       0t0 238098313 pipe
gitea   2190433  git   72r     FIFO               0,13       0t0 238102499 pipe
gitea   2190433  git   73r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   74r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   75r     FIFO               0,13       0t0 238098293 pipe
gitea   2190433  git   76u     unix 0xffff99181cd5c800       0t0 238087761 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   77u     unix 0xffff99164f630000       0t0 238094084 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   78r     FIFO               0,13       0t0 238100360 pipe
gitea   2190433  git   79w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   80u     unix 0xffff9917fccd3600       0t0 238094086 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   81w     FIFO               0,13       0t0 238100372 pipe
gitea   2190433  git   82r     FIFO               0,13       0t0 238098349 pipe
gitea   2190433  git   83r     FIFO               0,13       0t0 238098289 pipe
gitea   2190433  git   84r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   85u     unix 0xffff9917fccd7980       0t0 238094091 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   86u     unix 0xffff99181cd5d580       0t0 238084941 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   87r     FIFO               0,13       0t0 238098332 pipe
gitea   2190433  git   88u     unix 0xffff99165dc69680       0t0 238084943 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   89w     FIFO               0,13       0t0 238098314 pipe
gitea   2190433  git   90u     unix 0xffff99165dc68000       0t0 238084944 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   91r     FIFO               0,13       0t0 238100856 pipe
gitea   2190433  git   92w     FIFO               0,13       0t0 238100856 pipe
gitea   2190433  git   93w     FIFO               0,13       0t0 238098313 pipe
gitea   2190433  git   94r     FIFO               0,13       0t0 238102582 pipe
gitea   2190433  git   95r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git   96u     unix 0xffff99164b3ede80       0t0 238097141 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git   97r     FIFO               0,13       0t0 238098315 pipe
gitea   2190433  git   98w     FIFO               0,13       0t0 238098404 pipe
gitea   2190433  git   99r     FIFO               0,13       0t0 238100303 pipe
gitea   2190433  git  100r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  102r     FIFO               0,13       0t0 238098333 pipe
gitea   2190433  git  103w     FIFO               0,13       0t0 238098315 pipe
gitea   2190433  git  104w     FIFO               0,13       0t0 238098332 pipe
gitea   2190433  git  105w     FIFO               0,13       0t0 238098289 pipe
gitea   2190433  git  106r     FIFO               0,13       0t0 238100239 pipe
gitea   2190433  git  107r     FIFO               0,13       0t0 238100266 pipe
gitea   2190433  git  108r     FIFO               0,13       0t0 238098316 pipe
gitea   2190433  git  109w     FIFO               0,13       0t0 238100239 pipe
gitea   2190433  git  111r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  112r     FIFO               0,13       0t0 238098405 pipe
gitea   2190433  git  113w     FIFO               0,13       0t0 238098316 pipe
gitea   2190433  git  114w     FIFO               0,13       0t0 238098387 pipe
gitea   2190433  git  115w     FIFO               0,13       0t0 238100303 pipe
gitea   2190433  git  116w     FIFO               0,13       0t0 238098405 pipe
gitea   2190433  git  117r     FIFO               0,13       0t0 238100857 pipe
gitea   2190433  git  118r     FIFO               0,13       0t0 238098290 pipe
gitea   2190433  git  119r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  120w     FIFO               0,13       0t0 238098290 pipe
gitea   2190433  git  121w     FIFO               0,13       0t0 238100266 pipe
gitea   2190433  git  122u     unix 0xffff9916453d4800       0t0 238100711 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  123r     FIFO               0,13       0t0 238100399 pipe
gitea   2190433  git  125w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  127u     unix 0xffff9916453d6c00       0t0 238100712 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  128u     unix 0xffff9916453d2880       0t0 238100713 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  131w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  132w     FIFO               0,13       0t0 238102499 pipe
gitea   2190433  git  133r     FIFO               0,13       0t0 238102470 pipe
gitea   2190433  git  134u     unix 0xffff9917f3408000       0t0 238060105 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  135w     FIFO               0,13       0t0 238100857 pipe
gitea   2190433  git  136u     unix 0xffff99177bed8480       0t0 238093307 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  137u     unix 0xffff99177bedd100       0t0 238093308 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  138r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  139r     FIFO               0,13       0t0 238098319 pipe
gitea   2190433  git  140w     FIFO               0,13       0t0 238098293 pipe
gitea   2190433  git  141r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  142w     FIFO               0,13       0t0 238098333 pipe
gitea   2190433  git  143w     FIFO               0,13       0t0 238100858 pipe
gitea   2190433  git  144r     FIFO               0,13       0t0 238098406 pipe
gitea   2190433  git  145r     FIFO               0,13       0t0 238098306 pipe
gitea   2190433  git  146u     unix 0xffff99164f617980       0t0 238096389 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  147r     FIFO               0,13       0t0 238102500 pipe
gitea   2190433  git  148r     FIFO               0,13       0t0 238100267 pipe
gitea   2190433  git  149r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  150r     FIFO               0,13       0t0 238098385 pipe
gitea   2190433  git  151r     FIFO               0,13       0t0 238100859 pipe
gitea   2190433  git  152w     FIFO               0,13       0t0 238100859 pipe
gitea   2190433  git  153r     FIFO               0,13       0t0 238098424 pipe
gitea   2190433  git  154r     FIFO               0,13       0t0 238098291 pipe
gitea   2190433  git  155r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  156r     FIFO               0,13       0t0 238100304 pipe
gitea   2190433  git  158w     FIFO               0,13       0t0 238098424 pipe
gitea   2190433  git  161r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  162w     FIFO               0,13       0t0 238098385 pipe
gitea   2190433  git  163u     unix 0xffff9916a44e3a80       0t0 238096406 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  165r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  166r     FIFO               0,13       0t0 238100373 pipe
gitea   2190433  git  167r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  169r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  170w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  171r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  172w     FIFO               0,13       0t0 238102500 pipe
gitea   2190433  git  173w     FIFO               0,13       0t0 238100304 pipe
gitea   2190433  git  174w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  175w     FIFO               0,13       0t0 238100360 pipe
gitea   2190433  git  176r     FIFO               0,13       0t0 238098386 pipe
gitea   2190433  git  177r     FIFO               0,13       0t0 238102486 pipe
gitea   2190433  git  178w     FIFO               0,13       0t0 238098386 pipe
gitea   2190433  git  179r     FIFO               0,13       0t0 238098374 pipe
gitea   2190433  git  180w     FIFO               0,13       0t0 238098306 pipe
gitea   2190433  git  181r     FIFO               0,13       0t0 238098317 pipe
gitea   2190433  git  182w     FIFO               0,13       0t0 238102486 pipe
gitea   2190433  git  183r     FIFO               0,13       0t0 238102487 pipe
gitea   2190433  git  184u     unix 0xffff9917b92c4c80       0t0 238087807 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  186w     FIFO               0,13       0t0 238102487 pipe
gitea   2190433  git  187r     FIFO               0,13       0t0 238102501 pipe
gitea   2190433  git  188w     FIFO               0,13       0t0 238098406 pipe
gitea   2190433  git  189w     FIFO               0,13       0t0 238098317 pipe
gitea   2190433  git  190r     FIFO               0,13       0t0 238098318 pipe
gitea   2190433  git  191w     FIFO               0,13       0t0 238098318 pipe
gitea   2190433  git  192r     FIFO               0,13       0t0 238100305 pipe
gitea   2190433  git  193w     FIFO               0,13       0t0 238098319 pipe
gitea   2190433  git  194r     FIFO               0,13       0t0 238098407 pipe
gitea   2190433  git  195w     FIFO               0,13       0t0 238100373 pipe
gitea   2190433  git  196r     FIFO               0,13       0t0 238098334 pipe
gitea   2190433  git  197u     unix 0xffff991771658900       0t0 238096438 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  198w     FIFO               0,13       0t0 238102470 pipe
gitea   2190433  git  199w     FIFO               0,13       0t0 238098334 pipe
gitea   2190433  git  200r     FIFO               0,13       0t0 238102488 pipe
gitea   2190433  git  201w     FIFO               0,13       0t0 238100305 pipe
gitea   2190433  git  202u     unix 0xffff991771659680       0t0 238096442 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  203r     FIFO               0,13       0t0 238098388 pipe
gitea   2190433  git  204w     FIFO               0,13       0t0 238102488 pipe
gitea   2190433  git  205r     FIFO               0,13       0t0 238100306 pipe
gitea   2190433  git  206w     FIFO               0,13       0t0 238098388 pipe
gitea   2190433  git  207r     FIFO               0,13       0t0 238098425 pipe
gitea   2190433  git  208r     FIFO               0,13       0t0 238100236 pipe
gitea   2190433  git  209r     FIFO               0,13       0t0 238102489 pipe
gitea   2190433  git  210u     unix 0xffff9916b4e65a00       0t0 238096449 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  211w     FIFO               0,13       0t0 238102471 pipe
gitea   2190433  git  212r     FIFO               0,13       0t0 238098320 pipe
gitea   2190433  git  213w     FIFO               0,13       0t0 238102489 pipe
gitea   2190433  git  214r     FIFO               0,13       0t0 238102523 pipe
gitea   2190433  git  215r     FIFO               0,13       0t0 238098389 pipe
gitea   2190433  git  216w     FIFO               0,13       0t0 238102501 pipe
gitea   2190433  git  217w     FIFO               0,13       0t0 238098291 pipe
gitea   2190433  git  218r     FIFO               0,13       0t0 238102490 pipe
gitea   2190433  git  219w     FIFO               0,13       0t0 238100306 pipe
gitea   2190433  git  220w     FIFO               0,13       0t0 238102490 pipe
gitea   2190433  git  221w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  222w     FIFO               0,13       0t0 238102530 pipe
gitea   2190433  git  224w     FIFO               0,13       0t0 238102523 pipe
gitea   2190433  git  226u     unix 0xffff99177165e780       0t0 238101865 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  227r     FIFO               0,13       0t0 238103576 pipe
gitea   2190433  git  228r     FIFO               0,13       0t0 238102491 pipe
gitea   2190433  git  229r     FIFO               0,13       0t0 238100860 pipe
gitea   2190433  git  230u     unix 0xffff99177b47a400       0t0 238096469 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  231r     FIFO               0,13       0t0 238102472 pipe
gitea   2190433  git  232r     FIFO               0,13       0t0 238100307 pipe
gitea   2190433  git  233r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  234r     FIFO               0,13       0t0 238098292 pipe
gitea   2190433  git  235w     FIFO               0,13       0t0 238098292 pipe
gitea   2190433  git  236u     unix 0xffff99177b47ad00       0t0 238096475 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  237u     unix 0xffff99177b47da00       0t0 238096476 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  238u     unix 0xffff9918448e1f80       0t0 238096477 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  239w     FIFO               0,13       0t0 238098425 pipe
gitea   2190433  git  240w     FIFO               0,13       0t0 238098320 pipe
gitea   2190433  git  241w     FIFO               0,13       0t0 238102491 pipe
gitea   2190433  git  242w     FIFO               0,13       0t0 238098389 pipe
gitea   2190433  git  243r     FIFO               0,13       0t0 238102531 pipe
gitea   2190433  git  244w     FIFO               0,13       0t0 238100860 pipe
gitea   2190433  git  246r     FIFO               0,13       0t0 238100861 pipe
gitea   2190433  git  247u     unix 0xffff99179f765100       0t0 238096486 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  248u     unix 0xffff991865853f00       0t0 238085028 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  249u     unix 0xffff9917b6720000       0t0 238096487 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  250w     FIFO               0,13       0t0 238102472 pipe
gitea   2190433  git  251u     unix 0xffff9917b6725580       0t0 238096489 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  252r     FIFO               0,13       0t0 238102473 pipe
gitea   2190433  git  253r     FIFO               0,13       0t0 238100361 pipe
gitea   2190433  git  254r     FIFO               0,13       0t0 238100374 pipe
gitea   2190433  git  255u     unix 0xffff99179f760000       0t0 238096493 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  256u     unix 0xffff991748075a00       0t0 238085036 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  257u     unix 0xffff9917b6725100       0t0 238096494 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  258u     unix 0xffff9917b6724380       0t0 238096495 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  259u     unix 0xffff9916840a0d80       0t0 238096496 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  260w     FIFO               0,13       0t0 238098407 pipe
gitea   2190433  git  261r     FIFO               0,13       0t0 238098408 pipe
gitea   2190433  git  262r     FIFO               0,13       0t0 238098326 pipe
gitea   2190433  git  263w     FIFO               0,13       0t0 238102473 pipe
gitea   2190433  git  264w     FIFO               0,13       0t0 238100374 pipe
gitea   2190433  git  265w     FIFO               0,13       0t0 238100361 pipe
gitea   2190433  git  266w     FIFO               0,13       0t0 238100861 pipe
gitea   2190433  git  267w     FIFO               0,13       0t0 238098408 pipe
gitea   2190433  git  268u     unix 0xffff99179f764800       0t0 238085048 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  269r     FIFO               0,13       0t0 238098409 pipe
gitea   2190433  git  270r     FIFO               0,13       0t0 238102474 pipe
gitea   2190433  git  271w     FIFO               0,13       0t0 238098409 pipe
gitea   2190433  git  272r     FIFO               0,13       0t0 238100862 pipe
gitea   2190433  git  273r     FIFO               0,13       0t0 238102524 pipe
gitea   2190433  git  274r     FIFO               0,13       0t0 238102492 pipe
gitea   2190433  git  275w     FIFO               0,13       0t0 238102582 pipe
gitea   2190433  git  276r     FIFO               0,13       0t0 238098410 pipe
gitea   2190433  git  277w     FIFO               0,13       0t0 238102492 pipe
gitea   2190433  git  278r     FIFO               0,13       0t0 238102493 pipe
gitea   2190433  git  279w     FIFO               0,13       0t0 238098410 pipe
gitea   2190433  git  280w     FIFO               0,13       0t0 238102524 pipe
gitea   2190433  git  281r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  282r     FIFO               0,13       0t0 238100376 pipe
gitea   2190433  git  283w     FIFO               0,13       0t0 238102493 pipe
gitea   2190433  git  284w     FIFO               0,13       0t0 238100376 pipe
gitea   2190433  git  285r     FIFO               0,13       0t0 238102494 pipe
gitea   2190433  git  286w     FIFO               0,13       0t0 238102531 pipe
gitea   2190433  git  287r     FIFO               0,13       0t0 238102525 pipe
gitea   2190433  git  288w     FIFO               0,13       0t0 238102494 pipe
gitea   2190433  git  289r     FIFO               0,13       0t0 238100377 pipe
gitea   2190433  git  290w     FIFO               0,13       0t0 238102525 pipe
gitea   2190433  git  291w     FIFO               0,13       0t0 238100377 pipe
gitea   2190433  git  292r     FIFO               0,13       0t0 238103573 pipe
gitea   2190433  git  293r     FIFO               0,13       0t0 238102495 pipe
gitea   2190433  git  294w     FIFO               0,13       0t0 238102474 pipe
gitea   2190433  git  296r     FIFO               0,13       0t0 238100378 pipe
gitea   2190433  git  297w     FIFO               0,13       0t0 238100378 pipe
gitea   2190433  git  298w     FIFO               0,13       0t0 238103573 pipe
gitea   2190433  git  299r     FIFO               0,13       0t0 238100379 pipe
gitea   2190433  git  300r     FIFO               0,13       0t0 238102532 pipe
gitea   2190433  git  301w     FIFO               0,13       0t0 238102495 pipe
gitea   2190433  git  302r     FIFO               0,13       0t0 238100414 pipe
gitea   2190433  git  303r     FIFO               0,13       0t0 238102526 pipe
gitea   2190433  git  304w     FIFO               0,13       0t0 238102526 pipe
gitea   2190433  git  305w     FIFO               0,13       0t0 238100862 pipe
gitea   2190433  git  306r     FIFO               0,13       0t0 238100863 pipe
gitea   2190433  git  307r     FIFO               0,13       0t0 238102527 pipe
gitea   2190433  git  308w     FIFO               0,13       0t0 238100863 pipe
gitea   2190433  git  309w     FIFO               0,13       0t0 238100379 pipe
gitea   2190433  git  310w     FIFO               0,13       0t0 238102527 pipe
gitea   2190433  git  311r     FIFO               0,13       0t0 238102528 pipe
gitea   2190433  git  312r     FIFO               0,13       0t0 238102475 pipe
gitea   2190433  git  313r     FIFO               0,13       0t0 238102502 pipe
gitea   2190433  git  314u     unix 0xffff9916bbc18d80       0t0 238101795 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  317u     unix 0xffff9917e20d1f80       0t0 238100598 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  318w     FIFO               0,13       0t0 238102502 pipe
gitea   2190433  git  320r     FIFO               0,13       0t0 238098414 pipe
gitea   2190433  git  321r     FIFO               0,13       0t0 238100380 pipe
gitea   2190433  git  323u     unix 0xffff99177165bf00       0t0 238101866 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  325r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  326w     FIFO               0,13       0t0 238100307 pipe
gitea   2190433  git  328r     FIFO               0,13       0t0 238102451 pipe
gitea   2190433  git  329r     FIFO               0,13       0t0 238098321 pipe
gitea   2190433  git  330r     FIFO               0,13       0t0 238100308 pipe
gitea   2190433  git  331w     FIFO               0,13       0t0 238102475 pipe
gitea   2190433  git  332w     FIFO               0,13       0t0 238098374 pipe
gitea   2190433  git  333r     FIFO               0,13       0t0 238102503 pipe
gitea   2190433  git  335w     FIFO               0,13       0t0 238098414 pipe
gitea   2190433  git  336u     unix 0xffff991807ea4c80       0t0 238088714 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  337w     FIFO               0,13       0t0 238102503 pipe
gitea   2190433  git  338r     FIFO               0,13       0t0 238102504 pipe
gitea   2190433  git  340w     FIFO               0,13       0t0 238100380 pipe
gitea   2190433  git  341r     FIFO               0,13       0t0 238098294 pipe
gitea   2190433  git  342w     FIFO               0,13       0t0 238098294 pipe
gitea   2190433  git  343w     FIFO               0,13       0t0 238100308 pipe
gitea   2190433  git  344r     FIFO               0,13       0t0 238100309 pipe
gitea   2190433  git  345w     FIFO               0,13       0t0 238100309 pipe
gitea   2190433  git  346r     FIFO               0,13       0t0 238100310 pipe
gitea   2190433  git  347w     FIFO               0,13       0t0 238102504 pipe
gitea   2190433  git  348r     FIFO               0,13       0t0 238098295 pipe
gitea   2190433  git  349w     FIFO               0,13       0t0 238100310 pipe
gitea   2190433  git  350w     FIFO               0,13       0t0 238098321 pipe
gitea   2190433  git  351r     FIFO               0,13       0t0 238102505 pipe
gitea   2190433  git  352r     FIFO               0,13       0t0 238098322 pipe
gitea   2190433  git  353u     unix 0xffff99179f766300       0t0 238086759 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  354w     FIFO               0,13       0t0 238098322 pipe
gitea   2190433  git  355r     FIFO               0,13       0t0 238098323 pipe
gitea   2190433  git  356w     FIFO               0,13       0t0 238098323 pipe
gitea   2190433  git  357r     FIFO               0,13       0t0 238098324 pipe
gitea   2190433  git  358w     FIFO               0,13       0t0 238098324 pipe
gitea   2190433  git  359r     FIFO               0,13       0t0 238102476 pipe
gitea   2190433  git  360w     FIFO               0,13       0t0 238102476 pipe
gitea   2190433  git  361r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  362r     FIFO               0,13       0t0 238102477 pipe
gitea   2190433  git  363w     FIFO               0,13       0t0 238102477 pipe
gitea   2190433  git  364r     FIFO               0,13       0t0 238102478 pipe
gitea   2190433  git  365w     FIFO               0,13       0t0 238102478 pipe
gitea   2190433  git  366r     FIFO               0,13       0t0 238102479 pipe
gitea   2190433  git  367w     FIFO               0,13       0t0 238102479 pipe
gitea   2190433  git  368r     FIFO               0,13       0t0 238102480 pipe
gitea   2190433  git  369w     FIFO               0,13       0t0 238102505 pipe
gitea   2190433  git  370w     FIFO               0,13       0t0 238102480 pipe
gitea   2190433  git  371u     unix 0xffff99164a2a1200       0t0 238101867 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  373r     FIFO               0,13       0t0 238102506 pipe
gitea   2190433  git  374u     unix 0xffff99164a2a4c80       0t0 238101869 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  375w     FIFO               0,13       0t0 238102506 pipe
gitea   2190433  git  376u     unix 0xffff9916b4e52400       0t0 238101870 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  377w     FIFO               0,13       0t0 238102513 pipe
gitea   2190433  git  378r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  379r     FIFO               0,13       0t0 238098375 pipe
gitea   2190433  git  380w     FIFO               0,13       0t0 238098349 pipe
gitea   2190433  git  381r     FIFO               0,13       0t0 238102514 pipe
gitea   2190433  git  382w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  383u     unix 0xffff9916b4e54800       0t0 238101871 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  384w     FIFO               0,13       0t0 238102514 pipe
gitea   2190433  git  385r     FIFO               0,13       0t0 238098350 pipe
gitea   2190433  git  386u     unix 0xffff9916b4f43180       0t0 238098040 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  387r     FIFO               0,13       0t0 238102515 pipe
gitea   2190433  git  389w     FIFO               0,13       0t0 238102515 pipe
gitea   2190433  git  391u     unix 0xffff9916b4f40000       0t0 238098043 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  392u     unix 0xffff9916b4f44380       0t0 238098044 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  393u     unix 0xffff9916b4f42d00       0t0 238098045 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  394u     unix 0xffff9916b4f41f80       0t0 238098046 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  395r     FIFO               0,13       0t0 238102516 pipe
gitea   2190433  git  396u     unix 0xffff9917a56b0000       0t0 238087980 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  397w     FIFO               0,13       0t0 238098295 pipe
gitea   2190433  git  398r     FIFO               0,13       0t0 238098296 pipe
gitea   2190433  git  399u     unix 0xffff9916b4f46780       0t0 238098047 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  400u     unix 0xffff99177b479200       0t0 238087984 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  401w     FIFO               0,13       0t0 238098296 pipe
gitea   2190433  git  402u     unix 0xffff9916b4f43a80       0t0 238098048 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  403r     FIFO               0,13       0t0 238098297 pipe
gitea   2190433  git  404u     unix 0xffff9916453d3600       0t0 238100717 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  405r     FIFO               0,13       0t0 238098411 pipe
gitea   2190433  git  406w     FIFO               0,13       0t0 238098411 pipe
gitea   2190433  git  410w     FIFO               0,13       0t0 238100267 pipe
gitea   2190433  git  412u     unix 0xffff9916b4f2f980       0t0 238101606 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  414r     FIFO               0,13       0t0 238098412 pipe
gitea   2190433  git  415w     FIFO               0,13       0t0 238102516 pipe
gitea   2190433  git  416w     FIFO               0,13       0t0 238098412 pipe
gitea   2190433  git  417r     FIFO               0,13       0t0 238098325 pipe
gitea   2190433  git  420r     FIFO               0,13       0t0 238102517 pipe
gitea   2190433  git  421r     FIFO               0,13       0t0 238100314 pipe
gitea   2190433  git  423u     unix 0xffff9916b4f2de80       0t0 238101610 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  426w     FIFO               0,13       0t0 238100314 pipe
gitea   2190433  git  427w     FIFO               0,13       0t0 238098325 pipe
gitea   2190433  git  428u     unix 0xffff99169a504c80       0t0 238088012 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  429w     FIFO               0,13       0t0 238098326 pipe
gitea   2190433  git  430r     FIFO               0,13       0t0 238102481 pipe
gitea   2190433  git  431u     unix 0xffff99180196d580       0t0 238088015 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  432w     FIFO               0,13       0t0 238102481 pipe
gitea   2190433  git  433r     FIFO               0,13       0t0 238098327 pipe
gitea   2190433  git  434r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  435r     FIFO               0,13       0t0 238102482 pipe
gitea   2190433  git  436w     FIFO               0,13       0t0 238102517 pipe
gitea   2190433  git  437w     FIFO               0,13       0t0 238098327 pipe
gitea   2190433  git  438w     FIFO               0,13       0t0 238102482 pipe
gitea   2190433  git  439w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  440r     FIFO               0,13       0t0 238098413 pipe
gitea   2190433  git  441w     FIFO               0,13       0t0 238098413 pipe
gitea   2190433  git  442r     FIFO               0,13       0t0 238102483 pipe
gitea   2190433  git  443w     FIFO               0,13       0t0 238103576 pipe
gitea   2190433  git  444w     FIFO               0,13       0t0 238100399 pipe
gitea   2190433  git  445r     FIFO               0,13       0t0 238102583 pipe
gitea   2190433  git  446r     FIFO               0,13       0t0 238098415 pipe
gitea   2190433  git  447w     FIFO               0,13       0t0 238102483 pipe
gitea   2190433  git  448r     FIFO               0,13       0t0 238102484 pipe
gitea   2190433  git  449w     FIFO               0,13       0t0 238102484 pipe
gitea   2190433  git  450r     FIFO               0,13       0t0 238102518 pipe
gitea   2190433  git  451w     FIFO               0,13       0t0 238102518 pipe
gitea   2190433  git  452r     FIFO               0,13       0t0 238102519 pipe
gitea   2190433  git  453w     FIFO               0,13       0t0 238102519 pipe
gitea   2190433  git  454r     FIFO               0,13       0t0 238102520 pipe
gitea   2190433  git  455w     FIFO               0,13       0t0 238102520 pipe
gitea   2190433  git  456w     FIFO               0,13       0t0 238098415 pipe
gitea   2190433  git  457r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  458w     FIFO               0,13       0t0 238098375 pipe
gitea   2190433  git  459r     FIFO               0,13       0t0 238098376 pipe
gitea   2190433  git  460w     FIFO               0,13       0t0 238098350 pipe
gitea   2190433  git  461r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  462r     FIFO               0,13       0t0 238098351 pipe
gitea   2190433  git  463w     FIFO               0,13       0t0 238098351 pipe
gitea   2190433  git  464r     FIFO               0,13       0t0 238098352 pipe
gitea   2190433  git  465w     FIFO               0,13       0t0 238098352 pipe
gitea   2190433  git  466r     FIFO               0,13       0t0 238098353 pipe
gitea   2190433  git  467w     FIFO               0,13       0t0 238098353 pipe
gitea   2190433  git  468r     FIFO               0,13       0t0 238098354 pipe
gitea   2190433  git  469w     FIFO               0,13       0t0 238098354 pipe
gitea   2190433  git  470w     FIFO               0,13       0t0 238098376 pipe
gitea   2190433  git  471r     FIFO               0,13       0t0 238098355 pipe
gitea   2190433  git  472r     FIFO               0,13       0t0 238103575 pipe
gitea   2190433  git  473w     FIFO               0,13       0t0 238098355 pipe
gitea   2190433  git  477u     unix 0xffff9916b4f40d80       0t0 238098052 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  478u     unix 0xffff9916b4f41200       0t0 238098053 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  483u     unix 0xffff991658720480       0t0 238098058 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  485u     unix 0xffff991658723600       0t0 238098059 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  488u     unix 0xffff991658727980       0t0 238098062 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  489u     unix 0xffff991658727500       0t0 238098063 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  490u     unix 0xffff991658725e80       0t0 238098064 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  491u     unix 0xffff991658721b00       0t0 238098065 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  492u     unix 0xffff991658725100       0t0 238098066 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  493u     unix 0xffff991658722400       0t0 238098067 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  494u     unix 0xffff99164a366780       0t0 238098068 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  495u     unix 0xffff99164a363a80       0t0 238098069 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  497w     FIFO               0,13       0t0 238102583 pipe
gitea   2190433  git  498r     FIFO               0,13       0t0 238100864 pipe
gitea   2190433  git  499w     FIFO               0,13       0t0 238102532 pipe
gitea   2190433  git  500r     FIFO               0,13       0t0 238100268 pipe
gitea   2190433  git  501w     FIFO               0,13       0t0 238100268 pipe
gitea   2190433  git  502r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  503r     FIFO               0,13       0t0 238100269 pipe
gitea   2190433  git  504w     FIFO               0,13       0t0 238100864 pipe
gitea   2190433  git  505r     FIFO               0,13       0t0 238100865 pipe
gitea   2190433  git  506w     FIFO               0,13       0t0 238100865 pipe
gitea   2190433  git  507r     FIFO               0,13       0t0 238100866 pipe
gitea   2190433  git  508w     FIFO               0,13       0t0 238098297 pipe
gitea   2190433  git  509w     FIFO               0,13       0t0 238100866 pipe
gitea   2190433  git  510r     FIFO               0,13       0t0 238100400 pipe
gitea   2190433  git  511r     FIFO               0,13       0t0 238098298 pipe
gitea   2190433  git  512r     FIFO               0,13       0t0 238098356 pipe
gitea   2190433  git  513w     FIFO               0,13       0t0 238098356 pipe
gitea   2190433  git  514r     FIFO               0,13       0t0 238098357 pipe
gitea   2190433  git  515w     FIFO               0,13       0t0 238100236 pipe
gitea   2190433  git  516w     FIFO               0,13       0t0 238098357 pipe
gitea   2190433  git  517r     FIFO               0,13       0t0 238098358 pipe
gitea   2190433  git  518w     FIFO               0,13       0t0 238098358 pipe
gitea   2190433  git  519r     FIFO               0,13       0t0 238098377 pipe
gitea   2190433  git  520u     unix 0xffff991807ea0d80       0t0 238095177 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  521w     FIFO               0,13       0t0 238098377 pipe
gitea   2190433  git  522r     FIFO               0,13       0t0 238098416 pipe
gitea   2190433  git  524r     FIFO               0,13       0t0 238100867 pipe
gitea   2190433  git  525r     FIFO               0,13       0t0 238098378 pipe
gitea   2190433  git  526w     FIFO               0,13       0t0 238098378 pipe
gitea   2190433  git  527r     FIFO               0,13       0t0 238098379 pipe
gitea   2190433  git  528w     FIFO               0,13       0t0 238098379 pipe
gitea   2190433  git  529r     FIFO               0,13       0t0 238098380 pipe
gitea   2190433  git  530w     FIFO               0,13       0t0 238098380 pipe
gitea   2190433  git  531u     unix 0xffff9916a66f1680       0t0 238086815 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  532r     FIFO               0,13       0t0 238098381 pipe
gitea   2190433  git  533w     FIFO               0,13       0t0 238098416 pipe
gitea   2190433  git  534u     unix 0xffff9916b4e64c80       0t0 238086818 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  535w     FIFO               0,13       0t0 238100867 pipe
gitea   2190433  git  536r     FIFO               0,13       0t0 238103574 pipe
gitea   2190433  git  537w     FIFO               0,13       0t0 238098381 pipe
gitea   2190433  git  538r     FIFO               0,13       0t0 238100868 pipe
gitea   2190433  git  539w     FIFO               0,13       0t0 238100868 pipe
gitea   2190433  git  540r     FIFO               0,13       0t0 238098417 pipe
gitea   2190433  git  541w     FIFO               0,13       0t0 238098417 pipe
gitea   2190433  git  542r     FIFO               0,13       0t0 238098418 pipe
gitea   2190433  git  543w     FIFO               0,13       0t0 238098418 pipe
gitea   2190433  git  544r     FIFO               0,13       0t0 238100869 pipe
gitea   2190433  git  545w     FIFO               0,13       0t0 238100869 pipe
gitea   2190433  git  546r     FIFO               0,13       0t0 238100870 pipe
gitea   2190433  git  547w     FIFO               0,13       0t0 238100870 pipe
gitea   2190433  git  548r     FIFO               0,13       0t0 238102533 pipe
gitea   2190433  git  549r     FIFO               0,13       0t0 238100871 pipe
gitea   2190433  git  551w     FIFO               0,13       0t0 238100871 pipe
gitea   2190433  git  552r     FIFO               0,13       0t0 238098419 pipe
gitea   2190433  git  553w     FIFO               0,13       0t0 238098419 pipe
gitea   2190433  git  554r     FIFO               0,13       0t0 238098420 pipe
gitea   2190433  git  555w     FIFO               0,13       0t0 238101941 pipe
gitea   2190433  git  556w     FIFO               0,13       0t0 238101937 pipe
gitea   2190433  git  557r     FIFO               0,13       0t0 238101938 pipe
gitea   2190433  git  558r     FIFO               0,13       0t0 238101942 pipe
gitea   2190433  git  559r     FIFO               0,13       0t0 238101939 pipe
gitea   2190433  git  560w     FIFO               0,13       0t0 238098298 pipe
gitea   2190433  git  561r     FIFO               0,13       0t0 238101943 pipe
gitea   2190433  git  562w     FIFO               0,13       0t0 238102451 pipe
gitea   2190433  git  563w     FIFO               0,13       0t0 238100400 pipe
gitea   2190433  git  564w     FIFO               0,13       0t0 238100414 pipe
gitea   2190433  git  565w     FIFO               0,13       0t0 238103575 pipe
gitea   2190433  git  566r     FIFO               0,13       0t0 238100415 pipe
gitea   2190433  git  567w     FIFO               0,13       0t0 238100142 pipe
gitea   2190433  git  568r     FIFO               0,13       0t0 238100401 pipe
gitea   2190433  git  569r     FIFO               0,13       0t0 238100143 pipe
gitea   2190433  git  570w     FIFO               0,13       0t0 238098420 pipe
gitea   2190433  git  571r     FIFO               0,13       0t0 238100144 pipe
gitea   2190433  git  572r     FIFO               0,13       0t0 238098421 pipe
gitea   2190433  git  573w     FIFO               0,13       0t0 238098421 pipe
gitea   2190433  git  574w     FIFO               0,13       0t0 238100145 pipe
gitea   2190433  git  575r     FIFO               0,13       0t0 238100146 pipe
gitea   2190433  git  576w     FIFO               0,13       0t0 238102533 pipe
gitea   2190433  git  577r     FIFO               0,13       0t0 238100147 pipe
gitea   2190433  git  578r     FIFO               0,13       0t0 238102534 pipe
gitea   2190433  git  579r     FIFO               0,13       0t0 238098426 pipe
gitea   2190433  git  580w     FIFO               0,13       0t0 238098426 pipe
gitea   2190433  git  581r     FIFO               0,13       0t0 238098427 pipe
gitea   2190433  git  582w     FIFO               0,13       0t0 238098427 pipe
gitea   2190433  git  583r     FIFO               0,13       0t0 238098428 pipe
gitea   2190433  git  584w     FIFO               0,13       0t0 238098428 pipe
gitea   2190433  git  585r     FIFO               0,13       0t0 238098429 pipe
gitea   2190433  git  586w     FIFO               0,13       0t0 238098429 pipe
gitea   2190433  git  587r     FIFO               0,13       0t0 238098430 pipe
gitea   2190433  git  588w     FIFO               0,13       0t0 238098430 pipe
gitea   2190433  git  589w     FIFO               0,13       0t0 238103574 pipe
gitea   2190433  git  590w     FIFO               0,13       0t0 238100415 pipe
gitea   2190433  git  591w     FIFO               0,13       0t0 238100783 pipe
gitea   2190433  git  592w     FIFO               0,13       0t0 238100401 pipe
gitea   2190433  git  593r     FIFO               0,13       0t0 238098431 pipe
gitea   2190433  git  594w     FIFO               0,13       0t0 238098431 pipe
gitea   2190433  git  595w     FIFO               0,13       0t0 238102534 pipe
gitea   2190433  git  596w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  597w     FIFO               0,13       0t0 238102528 pipe
gitea   2190433  git  598r     FIFO               0,13       0t0 238102521 pipe
gitea   2190433  git  599w     FIFO               0,13       0t0 238102521 pipe
gitea   2190433  git  600r     FIFO               0,13       0t0 238103553 pipe
gitea   2190433  git  601w     FIFO               0,13       0t0 238103553 pipe
gitea   2190433  git  602r     FIFO               0,13       0t0 238102536 pipe
gitea   2190433  git  603r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  604r     FIFO               0,13       0t0 238102535 pipe
gitea   2190433  git  605w     FIFO               0,13       0t0 238102535 pipe
gitea   2190433  git  608w     FIFO               0,13       0t0 238102536 pipe
gitea   2190433  git  610r     FIFO               0,13       0t0 238102537 pipe
gitea   2190433  git  611w     FIFO               0,13       0t0 238102537 pipe
gitea   2190433  git  614r     FIFO               0,13       0t0 238100402 pipe
gitea   2190433  git  616r     FIFO               0,13       0t0 238103554 pipe
gitea   2190433  git  617w     FIFO               0,13       0t0 238103554 pipe
gitea   2190433  git  618u     unix 0xffff9916b4f2a400       0t0 238099912 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  619u     unix 0xffff9916b4f2c800       0t0 238099913 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  620u     unix 0xffff9916b4f2ec00       0t0 238099914 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  621u     unix 0xffff9916bbc1bf00       0t0 238099915 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  622r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  623r     FIFO               0,13       0t0 238103555 pipe
gitea   2190433  git  624w     FIFO               0,13       0t0 238103555 pipe
gitea   2190433  git  625w     FIFO               0,13       0t0 238100269 pipe
gitea   2190433  git  626r     FIFO               0,13       0t0 238103556 pipe
gitea   2190433  git  627w     FIFO               0,13       0t0 238103556 pipe
gitea   2190433  git  628r     FIFO               0,13       0t0 238102452 pipe
gitea   2190433  git  629r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  630r     FIFO               0,13       0t0 238103557 pipe
gitea   2190433  git  631w     FIFO               0,13       0t0 238103557 pipe
gitea   2190433  git  633r     FIFO               0,13       0t0 238103577 pipe
gitea   2190433  git  634w     FIFO               0,13       0t0 238103577 pipe
gitea   2190433  git  635r     FIFO               0,13       0t0 238100237 pipe
gitea   2190433  git  636w     FIFO               0,13       0t0 238100237 pipe
gitea   2190433  git  637w     FIFO               0,13       0t0 238102452 pipe
gitea   2190433  git  638w  unknown                                        /proc/2190433/fd/638 (readlink: No such file or directory)
gitea   2190433  git  639r     FIFO               0,13       0t0 238103558 pipe
gitea   2190433  git  640w     FIFO               0,13       0t0 238103558 pipe
gitea   2190433  git  641r     FIFO               0,13       0t0 238103559 pipe
gitea   2190433  git  642w     FIFO               0,13       0t0 238103559 pipe
gitea   2190433  git  643r     FIFO               0,13       0t0 238103560 pipe
gitea   2190433  git  644w     FIFO               0,13       0t0 238103560 pipe
gitea   2190433  git  645r     FIFO               0,13       0t0 238103561 pipe
gitea   2190433  git  646w     FIFO               0,13       0t0 238103561 pipe
gitea   2190433  git  647r     FIFO               0,13       0t0 238103562 pipe
gitea   2190433  git  648w     FIFO               0,13       0t0 238103562 pipe
gitea   2190433  git  649r     FIFO               0,13       0t0 238103563 pipe
gitea   2190433  git  650w     FIFO               0,13       0t0 238103563 pipe
gitea   2190433  git  651w     FIFO               0,13       0t0 238100402 pipe
gitea   2190433  git  652w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  653r     FIFO               0,13       0t0 238100416 pipe
gitea   2190433  git  654r     FIFO               0,13       0t0 238103564 pipe
gitea   2190433  git  655w     FIFO               0,13       0t0 238103564 pipe
gitea   2190433  git  656r     FIFO               0,13       0t0 238103565 pipe
gitea   2190433  git  657r     FIFO               0,13       0t0 238102453 pipe
gitea   2190433  git  658w     FIFO               0,13       0t0 238102453 pipe
gitea   2190433  git  659r     FIFO               0,13       0t0 238100238 pipe
gitea   2190433  git  660r     FIFO               0,13       0t0 238102454 pipe
gitea   2190433  git  661w     FIFO               0,13       0t0 238103565 pipe
gitea   2190433  git  662r     FIFO               0,13       0t0 238103566 pipe
gitea   2190433  git  663w     FIFO               0,13       0t0 238103566 pipe
gitea   2190433  git  664r     FIFO               0,13       0t0 238103567 pipe
gitea   2190433  git  665w     FIFO               0,13       0t0 238103567 pipe
gitea   2190433  git  666r     FIFO               0,13       0t0 238103568 pipe
gitea   2190433  git  667w     FIFO               0,13       0t0 238103568 pipe
gitea   2190433  git  668r     FIFO               0,13       0t0 238103569 pipe
gitea   2190433  git  669w     FIFO               0,13       0t0 238103569 pipe
gitea   2190433  git  670r     FIFO               0,13       0t0 238103570 pipe
gitea   2190433  git  671w     FIFO               0,13       0t0 238103570 pipe
gitea   2190433  git  672r     FIFO               0,13       0t0 238100403 pipe
gitea   2190433  git  673r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  674r     FIFO               0,13       0t0 238100429 pipe
gitea   2190433  git  675w     FIFO               0,13       0t0 238100403 pipe
gitea   2190433  git  676w     FIFO               0,13       0t0 238100416 pipe
gitea   2190433  git  677r     FIFO               0,13       0t0 238100417 pipe
gitea   2190433  git  678r     FIFO               0,13       0t0 238103571 pipe
gitea   2190433  git  679w     FIFO               0,13       0t0 238100417 pipe
gitea   2190433  git  680w     FIFO               0,13       0t0 238103571 pipe
gitea   2190433  git  681r     FIFO               0,13       0t0 238100418 pipe
gitea   2190433  git  682w     FIFO               0,13       0t0 238100418 pipe
gitea   2190433  git  683r     FIFO               0,13       0t0 238100419 pipe
gitea   2190433  git  684w     FIFO               0,13       0t0 238100419 pipe
gitea   2190433  git  685r     FIFO               0,13       0t0 238100784 pipe
gitea   2190433  git  686r     FIFO               0,13       0t0 238100420 pipe
gitea   2190433  git  687r     FIFO               0,13       0t0 238100785 pipe
gitea   2190433  git  688w     FIFO               0,13       0t0 238100420 pipe
gitea   2190433  git  689r     FIFO               0,13       0t0 238100421 pipe
gitea   2190433  git  690w     FIFO               0,13       0t0 238100421 pipe
gitea   2190433  git  691w     FIFO               0,13       0t0 238100429 pipe
gitea   2190433  git  692r     FIFO               0,13       0t0 238100430 pipe
gitea   2190433  git  694w     FIFO               0,13       0t0 238100790 pipe
gitea   2190433  git  695r     FIFO               0,13       0t0 238100791 pipe
gitea   2190433  git  697w     FIFO               0,13       0t0 238100430 pipe
gitea   2190433  git  698r     FIFO               0,13       0t0 238100408 pipe
gitea   2190433  git  699w     FIFO               0,13       0t0 238100408 pipe
gitea   2190433  git  701r     FIFO               0,13       0t0 238100409 pipe
gitea   2190433  git  702w     FIFO               0,13       0t0 238100409 pipe
gitea   2190433  git  703r     FIFO               0,13       0t0 238100410 pipe
gitea   2190433  git  704r     FIFO               0,13       0t0 238100431 pipe
gitea   2190433  git  705w     FIFO               0,13       0t0 238100410 pipe
gitea   2190433  git  706w     FIFO               0,13       0t0 238100431 pipe
gitea   2190433  git  707r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  708w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  709r     FIFO               0,13       0t0 238100792 pipe
gitea   2190433  git  710r     FIFO               0,13       0t0 238100432 pipe
gitea   2190433  git  711w     FIFO               0,13       0t0 238102454 pipe
gitea   2190433  git  712r     FIFO               0,13       0t0 238102455 pipe
gitea   2190433  git  713w     FIFO               0,13       0t0 238102455 pipe
gitea   2190433  git  714r     FIFO               0,13       0t0 238102456 pipe
gitea   2190433  git  715w     FIFO               0,13       0t0 238100432 pipe
gitea   2190433  git  716w     FIFO               0,13       0t0 238100796 pipe
gitea   2190433  git  717r     FIFO               0,13       0t0 238100797 pipe
gitea   2190433  git  718r     FIFO               0,13       0t0 238100433 pipe
gitea   2190433  git  719r     FIFO               0,13       0t0 238100798 pipe
gitea   2190433  git  720w     FIFO               0,13       0t0 238100433 pipe
gitea   2190433  git  721r     FIFO               0,13       0t0 238100434 pipe
gitea   2190433  git  722w     FIFO               0,13       0t0 238100799 pipe
gitea   2190433  git  723r     FIFO               0,13       0t0 238100800 pipe
gitea   2190433  git  724w     FIFO               0,13       0t0 238100434 pipe
gitea   2190433  git  725r     FIFO               0,13       0t0 238100801 pipe
gitea   2190433  git  726r     FIFO               0,13       0t0 238100435 pipe
gitea   2190433  git  727w     FIFO               0,13       0t0 238100435 pipe
gitea   2190433  git  728r     FIFO               0,13       0t0 238100436 pipe
gitea   2190433  git  729w     FIFO               0,13       0t0 238100436 pipe
gitea   2190433  git  735w     FIFO               0,13       0t0 238100805 pipe
gitea   2190433  git  736r     FIFO               0,13       0t0 238100806 pipe
gitea   2190433  git  739r     FIFO               0,13       0t0 238100807 pipe
gitea   2190433  git  742w     FIFO               0,13       0t0 238100808 pipe
gitea   2190433  git  743r     FIFO               0,13       0t0 238100809 pipe
gitea   2190433  git  745r     FIFO               0,13       0t0 238100810 pipe
gitea   2190433  git  749r  unknown                                        /proc/2190433/fd/749 (readlink: No such file or directory)
gitea   2190433  git  753r  unknown                                        /proc/2190433/fd/753 (readlink: No such file or directory)
gitea   2190433  git  755r  unknown                                        /proc/2190433/fd/755 (readlink: No such file or directory)
gitea   2190433  git  756r  unknown                                        /proc/2190433/fd/756 (readlink: No such file or directory)
gitea   2190433  git  759r  unknown                                        /proc/2190433/fd/759 (readlink: No such file or directory)
gitea   2190433  git  764r  unknown                                        /proc/2190433/fd/764 (readlink: No such file or directory)
gitea   2190433  git  765r     FIFO               0,13       0t0 238100270 pipe
gitea   2190433  git  766r  unknown                                        /proc/2190433/fd/766 (readlink: No such file or directory)
gitea   2190433  git  767r  unknown                                        /proc/2190433/fd/767 (readlink: No such file or directory)
gitea   2190433  git  768r  unknown                                        /proc/2190433/fd/768 (readlink: No such file or directory)
gitea   2190433  git  769u     unix 0xffff9916bbc18000       0t0 238100754 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  770u     unix 0xffff9916bbc1c380       0t0 238100755 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  771u     unix 0xffff9916bbc1ad00       0t0 238100756 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  773u  unknown                                        /proc/2190433/fd/773 (readlink: No such file or directory)
gitea   2190433  git  774u  unknown                                        /proc/2190433/fd/774 (readlink: No such file or directory)
gitea   2190433  git  775u  unknown                                        /proc/2190433/fd/775 (readlink: No such file or directory)
gitea   2190433  git  776w     FIFO               0,13       0t0 238100238 pipe
gitea   2190433  git  777r     FIFO               0,13       0t0 238100240 pipe
gitea   2190433  git  778w     FIFO               0,13       0t0 238100240 pipe
gitea   2190433  git  779r     FIFO               0,13       0t0 238100241 pipe
[root@avps ~]#
gitea   2190433  git  781r     FIFO               0,13       0t0 238100242 pipe
gitea   2190433  git  782w     FIFO               0,13       0t0 238100242 pipe
gitea   2190433  git  783r     FIFO               0,13       0t0 238100243 pipe
gitea   2190433  git  784w     FIFO               0,13       0t0 238100243 pipe
gitea   2190433  git  785r     FIFO               0,13       0t0 238100244 pipe
gitea   2190433  git  786w     FIFO               0,13       0t0 238100244 pipe
gitea   2190433  git  787r     FIFO               0,13       0t0 238100245 pipe
gitea   2190433  git  788w     FIFO               0,13       0t0 238100245 pipe
gitea   2190433  git  789r     FIFO               0,13       0t0 238100246 pipe
gitea   2190433  git  790w     FIFO               0,13       0t0 238100246 pipe
gitea   2190433  git  791r     FIFO               0,13       0t0 238100247 pipe
gitea   2190433  git  792w     FIFO               0,13       0t0 238100247 pipe
gitea   2190433  git  793w     FIFO               0,13       0t0 238102456 pipe
gitea   2190433  git  794r     FIFO               0,13       0t0 238102457 pipe
gitea   2190433  git  795w     FIFO               0,13       0t0 238102457 pipe
gitea   2190433  git  796r     FIFO               0,13       0t0 238102458 pipe
gitea   2190433  git  797w     FIFO               0,13       0t0 238102458 pipe
gitea   2190433  git  798w     FIFO               0,13       0t0 238100270 pipe
gitea   2190433  git  799u     unix 0xffff99181cd5ad00       0t0 238096318 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  801r     FIFO               0,13       0t0 238103572 pipe
gitea   2190433  git  802w     FIFO               0,13       0t0 238103572 pipe
gitea   2190433  git  813r     FIFO               0,13       0t0 238100271 pipe
gitea   2190433  git  814w     FIFO               0,13       0t0 238100271 pipe
gitea   2190433  git  815r     FIFO               0,13       0t0 238100272 pipe
gitea   2190433  git  816w     FIFO               0,13       0t0 238100272 pipe
gitea   2190433  git  817r     FIFO               0,13       0t0 238100273 pipe
gitea   2190433  git  818w     FIFO               0,13       0t0 238100273 pipe
gitea   2190433  git  819r     FIFO               0,13       0t0 238102459 pipe
gitea   2190433  git  820w     FIFO               0,13       0t0 238102459 pipe
gitea   2190433  git  821r     FIFO               0,13       0t0 238102460 pipe
gitea   2190433  git  822w     FIFO               0,13       0t0 238102460 pipe
gitea   2190433  git  823r     FIFO               0,13       0t0 238102461 pipe
gitea   2190433  git  824w     FIFO               0,13       0t0 238102461 pipe
gitea   2190433  git  825r     FIFO               0,13       0t0 238102462 pipe
gitea   2190433  git  826w     FIFO               0,13       0t0 238102462 pipe
gitea   2190433  git  827r     FIFO               0,13       0t0 238102463 pipe
gitea   2190433  git  828w     FIFO               0,13       0t0 238102463 pipe
gitea   2190433  git  829r     FIFO               0,13       0t0 238102464 pipe
gitea   2190433  git  830w     FIFO               0,13       0t0 238102464 pipe
gitea   2190433  git  831r     FIFO               0,13       0t0 238102465 pipe
gitea   2190433  git  832w     FIFO               0,13       0t0 238102465 pipe
gitea   2190433  git  833r     FIFO               0,13       0t0 238102466 pipe
gitea   2190433  git  834w     FIFO               0,13       0t0 238102466 pipe
gitea   2190433  git  835r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  836w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  837r     FIFO               0,13       0t0 238102467 pipe
gitea   2190433  git  838w     FIFO               0,13       0t0 238102467 pipe
gitea   2190433  git  839r     FIFO               0,13       0t0 238100277 pipe
gitea   2190433  git  840w     FIFO               0,13       0t0 238100277 pipe
gitea   2190433  git  841r     FIFO               0,13       0t0 238100278 pipe
gitea   2190433  git  842w     FIFO               0,13       0t0 238100278 pipe
gitea   2190433  git  843r     FIFO               0,13       0t0 238098307 pipe
gitea   2190433  git  845u     unix 0xffff9916bbc1ba80       0t0 238101852 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  846u     unix 0xffff9916b4e51b00       0t0 238101853 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  847u     unix 0xffff9916b4e55100       0t0 238101854 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git  848w     FIFO               0,13       0t0 238098307 pipe
gitea   2190433  git  851r      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  852w      CHR                1,3       0t0     12358 /dev/null
gitea   2190433  git  853r     FIFO               0,13       0t0 238100279 pipe
gitea   2190433  git  854w     FIFO               0,13       0t0 238100279 pipe
gitea   2190433  git  921u     unix 0xffff991657d9de80       0t0 238100641 /srv/gitea/gitea.sock type=STREAM
gitea   2190433  git 1019u     unix 0xffff9916b4f2a880       0t0 238100695 /srv/gitea/gitea.sock type=STREAM

@justhsu
Copy link

justhsu commented Apr 23, 2022

I have also been seeing a similar issue for the last few weeks after upgrading to 1.16.5, running into the file handle soft limit of 1024. I don't have a repo with many images, so I am not sure what the problem could be.

@zeripath
Copy link
Contributor

@justhsu what version did you upgrade from?

If you take a look at /admin/monitor are there lots of processes there?

@justhsu
Copy link

justhsu commented Apr 23, 2022

I updated from 1.14.something. And yes, looking under the monitoring tab, there are a lot of processes... all /usr/bin/git cat-file --batch .... So maybe this is related to #19454.

@zeripath
Copy link
Contributor

Please try the current build of the 1.16 head https://dl.gitea.io/gitea/1.16 or the docker tag 1.16-dev to see if that resolves your problem.

If so we can close this and mark #19454 as a fix

@ledlamp
Copy link
Author

ledlamp commented Apr 23, 2022

still having this issue on 1.16.6+4-g1f0dca461

@zeripath
Copy link
Contributor

hmm... so it's potentially not the same issue or #19454 isn't a sufficient fix. What does monitor show?

@zeripath
Copy link
Contributor

Actually reading again I'm fairly certain that this isn't the same issue as #19454. Your 500+ images are translating to a large number of immediate requests to open files and pipes to transfer data from git processes to the webserver and thence to your server.

I think at present we do open too many pipes but there's a fundamental limit to how low we can reduce this. However, it looks like your system is perhaps limiting the git user to too low a number. (I see fd 763 is being limited in your trace above!)

I guess the question is does 1.17/main behave better? - I think it should do so as I've done a lot of work to share the pipes but there's one more thing that could be done that would result in a further halving of the number of fds.

Another option might be to switch to a go-git build by building gitea with TAGS="gogit bindata sqlite sqlite_unlock_notify" make

@justhsu
Copy link

justhsu commented Apr 24, 2022

1.16.6+4-g1f0dca461 seems to resolve my issue. Thanks for all your work on this project!

@ledlamp
Copy link
Author

ledlamp commented Oct 9, 2022

I guess the question is does 1.17/main behave better?

it doesn't seem any better on 1.17.2.

@wxiaoguang
Copy link
Contributor

According to https://discourse.gitea.io/t/updateaccesstoken-unable-to-open-database-file-too-many-open-files/7103

The user upgrades to 1.19 and didn't see problem.

If you still have the problem, please report details with lsof to see what the open files are (well, in the latest version ...)

Feel free to reopen if there are new clues.

@github-actions github-actions bot locked as resolved and limited conversation to collaborators Jun 11, 2023
Sign up for free to subscribe to this conversation on GitHub. Already have an account? Sign in.
Labels
Projects
None yet
Development

No branches or pull requests

5 participants