]> CyberLeo.Net >> Repos - FreeBSD/FreeBSD.git/blob - share/man/man4/tcp.4
Address concerns about CPU usage while doing TCP reassembly.
[FreeBSD/FreeBSD.git] / share / man / man4 / tcp.4
1 .\" Copyright (c) 1983, 1991, 1993
2 .\"     The Regents of the University of California.
3 .\" Copyright (c) 2010-2011 The FreeBSD Foundation
4 .\" All rights reserved.
5 .\"
6 .\" Portions of this documentation were written at the Centre for Advanced
7 .\" Internet Architectures, Swinburne University of Technology, Melbourne,
8 .\" Australia by David Hayes under sponsorship from the FreeBSD Foundation.
9 .\"
10 .\" Redistribution and use in source and binary forms, with or without
11 .\" modification, are permitted provided that the following conditions
12 .\" are met:
13 .\" 1. Redistributions of source code must retain the above copyright
14 .\"    notice, this list of conditions and the following disclaimer.
15 .\" 2. Redistributions in binary form must reproduce the above copyright
16 .\"    notice, this list of conditions and the following disclaimer in the
17 .\"    documentation and/or other materials provided with the distribution.
18 .\" 3. Neither the name of the University nor the names of its contributors
19 .\"    may be used to endorse or promote products derived from this software
20 .\"    without specific prior written permission.
21 .\"
22 .\" THIS SOFTWARE IS PROVIDED BY THE REGENTS AND CONTRIBUTORS ``AS IS'' AND
23 .\" ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
24 .\" IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
25 .\" ARE DISCLAIMED.  IN NO EVENT SHALL THE REGENTS OR CONTRIBUTORS BE LIABLE
26 .\" FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
27 .\" DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
28 .\" OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
29 .\" HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
30 .\" LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
31 .\" OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
32 .\" SUCH DAMAGE.
33 .\"
34 .\"     From: @(#)tcp.4 8.1 (Berkeley) 6/5/93
35 .\" $FreeBSD$
36 .\"
37 .Dd February 6, 2017
38 .Dt TCP 4
39 .Os
40 .Sh NAME
41 .Nm tcp
42 .Nd Internet Transmission Control Protocol
43 .Sh SYNOPSIS
44 .In sys/types.h
45 .In sys/socket.h
46 .In netinet/in.h
47 .In netinet/tcp.h
48 .Ft int
49 .Fn socket AF_INET SOCK_STREAM 0
50 .Sh DESCRIPTION
51 The
52 .Tn TCP
53 protocol provides reliable, flow-controlled, two-way
54 transmission of data.
55 It is a byte-stream protocol used to
56 support the
57 .Dv SOCK_STREAM
58 abstraction.
59 .Tn TCP
60 uses the standard
61 Internet address format and, in addition, provides a per-host
62 collection of
63 .Dq "port addresses" .
64 Thus, each address is composed
65 of an Internet address specifying the host and network,
66 with a specific
67 .Tn TCP
68 port on the host identifying the peer entity.
69 .Pp
70 Sockets utilizing the
71 .Tn TCP
72 protocol are either
73 .Dq active
74 or
75 .Dq passive .
76 Active sockets initiate connections to passive
77 sockets.
78 By default,
79 .Tn TCP
80 sockets are created active; to create a
81 passive socket, the
82 .Xr listen 2
83 system call must be used
84 after binding the socket with the
85 .Xr bind 2
86 system call.
87 Only passive sockets may use the
88 .Xr accept 2
89 call to accept incoming connections.
90 Only active sockets may use the
91 .Xr connect 2
92 call to initiate connections.
93 .Pp
94 Passive sockets may
95 .Dq underspecify
96 their location to match
97 incoming connection requests from multiple networks.
98 This technique, termed
99 .Dq "wildcard addressing" ,
100 allows a single
101 server to provide service to clients on multiple networks.
102 To create a socket which listens on all networks, the Internet
103 address
104 .Dv INADDR_ANY
105 must be bound.
106 The
107 .Tn TCP
108 port may still be specified
109 at this time; if the port is not specified, the system will assign one.
110 Once a connection has been established, the socket's address is
111 fixed by the peer entity's location.
112 The address assigned to the
113 socket is the address associated with the network interface
114 through which packets are being transmitted and received.
115 Normally, this address corresponds to the peer entity's network.
116 .Pp
117 .Tn TCP
118 supports a number of socket options which can be set with
119 .Xr setsockopt 2
120 and tested with
121 .Xr getsockopt 2 :
122 .Bl -tag -width ".Dv TCP_FUNCTION_BLK"
123 .It Dv TCP_INFO
124 Information about a socket's underlying TCP session may be retrieved
125 by passing the read-only option
126 .Dv TCP_INFO
127 to
128 .Xr getsockopt 2 .
129 It accepts a single argument: a pointer to an instance of
130 .Vt "struct tcp_info" .
131 .Pp
132 This API is subject to change; consult the source to determine
133 which fields are currently filled out by this option.
134 .Fx
135 specific additions include
136 send window size,
137 receive window size,
138 and
139 bandwidth-controlled window space.
140 .It Dv TCP_CCALGOOPT
141 Set or query congestion control algorithm specific parameters.
142 See
143 .Xr mod_cc 4
144 for details.
145 .It Dv TCP_CONGESTION
146 Select or query the congestion control algorithm that TCP will use for the
147 connection.
148 See
149 .Xr mod_cc 4
150 for details.
151 .It Dv TCP_FUNCTION_BLK
152 Select or query the set of functions that TCP will use for this connection.
153 This allows a user to select an alternate TCP stack.
154 The alternate TCP stack must already be loaded in the kernel.
155 To list the available TCP stacks, see
156 .Va functions_available
157 in the
158 .Sx MIB Variables
159 section further down.
160 To list the default TCP stack, see
161 .Va functions_default
162 in the
163 .Sx MIB Variables
164 section.
165 .It Dv TCP_KEEPINIT
166 This
167 .Xr setsockopt 2
168 option accepts a per-socket timeout argument of
169 .Vt "u_int"
170 in seconds, for new, non-established
171 .Tn TCP
172 connections.
173 For the global default in milliseconds see
174 .Va keepinit
175 in the
176 .Sx MIB Variables
177 section further down.
178 .It Dv TCP_KEEPIDLE
179 This
180 .Xr setsockopt 2
181 option accepts an argument of
182 .Vt "u_int"
183 for the amount of time, in seconds, that the connection must be idle
184 before keepalive probes (if enabled) are sent for the connection of this
185 socket.
186 If set on a listening socket, the value is inherited by the newly created
187 socket upon
188 .Xr accept 2 .
189 For the global default in milliseconds see
190 .Va keepidle
191 in the
192 .Sx MIB Variables
193 section further down.
194 .It Dv TCP_KEEPINTVL
195 This
196 .Xr setsockopt 2
197 option accepts an argument of
198 .Vt "u_int"
199 to set the per-socket interval, in seconds, between keepalive probes sent
200 to a peer.
201 If set on a listening socket, the value is inherited by the newly created
202 socket upon
203 .Xr accept 2 .
204 For the global default in milliseconds see
205 .Va keepintvl
206 in the
207 .Sx MIB Variables
208 section further down.
209 .It Dv TCP_KEEPCNT
210 This
211 .Xr setsockopt 2
212 option accepts an argument of
213 .Vt "u_int"
214 and allows a per-socket tuning of the number of probes sent, with no response,
215 before the connection will be dropped.
216 If set on a listening socket, the value is inherited by the newly created
217 socket upon
218 .Xr accept 2 .
219 For the global default see the
220 .Va keepcnt
221 in the
222 .Sx MIB Variables
223 section further down.
224 .It Dv TCP_NODELAY
225 Under most circumstances,
226 .Tn TCP
227 sends data when it is presented;
228 when outstanding data has not yet been acknowledged, it gathers
229 small amounts of output to be sent in a single packet once
230 an acknowledgement is received.
231 For a small number of clients, such as window systems
232 that send a stream of mouse events which receive no replies,
233 this packetization may cause significant delays.
234 The boolean option
235 .Dv TCP_NODELAY
236 defeats this algorithm.
237 .It Dv TCP_MAXSEG
238 By default, a sender- and
239 .No receiver- Ns Tn TCP
240 will negotiate among themselves to determine the maximum segment size
241 to be used for each connection.
242 The
243 .Dv TCP_MAXSEG
244 option allows the user to determine the result of this negotiation,
245 and to reduce it if desired.
246 .It Dv TCP_NOOPT
247 .Tn TCP
248 usually sends a number of options in each packet, corresponding to
249 various
250 .Tn TCP
251 extensions which are provided in this implementation.
252 The boolean option
253 .Dv TCP_NOOPT
254 is provided to disable
255 .Tn TCP
256 option use on a per-connection basis.
257 .It Dv TCP_NOPUSH
258 By convention, the
259 .No sender- Ns Tn TCP
260 will set the
261 .Dq push
262 bit, and begin transmission immediately (if permitted) at the end of
263 every user call to
264 .Xr write 2
265 or
266 .Xr writev 2 .
267 When this option is set to a non-zero value,
268 .Tn TCP
269 will delay sending any data at all until either the socket is closed,
270 or the internal send buffer is filled.
271 .It Dv TCP_MD5SIG
272 This option enables the use of MD5 digests (also known as TCP-MD5)
273 on writes to the specified socket.
274 Outgoing traffic is digested;
275 digests on incoming traffic are verified.
276 When this option is enabled on a socket, all inbound and outgoing
277 TCP segments must be signed with MD5 digests.
278 .Pp
279 One common use for this in a
280 .Fx
281 router deployment is to enable
282 based routers to interwork with Cisco equipment at peering points.
283 Support for this feature conforms to RFC 2385.
284 .Pp
285 In order for this option to function correctly, it is necessary for the
286 administrator to add a tcp-md5 key entry to the system's security
287 associations database (SADB) using the
288 .Xr setkey 8
289 utility.
290 This entry can only be specified on a per-host basis at this time.
291 .Pp
292 If an SADB entry cannot be found for the destination,
293 the system does not send any outgoing segments and drops any inbound segments.
294 .Pp
295 Each dropped segment is taken into account in the TCP protocol statistics.
296 .El
297 .Pp
298 The option level for the
299 .Xr setsockopt 2
300 call is the protocol number for
301 .Tn TCP ,
302 available from
303 .Xr getprotobyname 3 ,
304 or
305 .Dv IPPROTO_TCP .
306 All options are declared in
307 .In netinet/tcp.h .
308 .Pp
309 Options at the
310 .Tn IP
311 transport level may be used with
312 .Tn TCP ;
313 see
314 .Xr ip 4 .
315 Incoming connection requests that are source-routed are noted,
316 and the reverse source route is used in responding.
317 .Pp
318 The default congestion control algorithm for
319 .Tn TCP
320 is
321 .Xr cc_newreno 4 .
322 Other congestion control algorithms can be made available using the
323 .Xr mod_cc 4
324 framework.
325 .Ss MIB Variables
326 The
327 .Tn TCP
328 protocol implements a number of variables in the
329 .Va net.inet.tcp
330 branch of the
331 .Xr sysctl 3
332 MIB.
333 .Bl -tag -width ".Va TCPCTL_DO_RFC1323"
334 .It Dv TCPCTL_DO_RFC1323
335 .Pq Va rfc1323
336 Implement the window scaling and timestamp options of RFC 1323
337 (default is true).
338 .It Dv TCPCTL_MSSDFLT
339 .Pq Va mssdflt
340 The default value used for the maximum segment size
341 .Pq Dq MSS
342 when no advice to the contrary is received from MSS negotiation.
343 .It Dv TCPCTL_SENDSPACE
344 .Pq Va sendspace
345 Maximum
346 .Tn TCP
347 send window.
348 .It Dv TCPCTL_RECVSPACE
349 .Pq Va recvspace
350 Maximum
351 .Tn TCP
352 receive window.
353 .It Va log_in_vain
354 Log any connection attempts to ports where there is not a socket
355 accepting connections.
356 The value of 1 limits the logging to
357 .Tn SYN
358 (connection establishment) packets only.
359 That of 2 results in any
360 .Tn TCP
361 packets to closed ports being logged.
362 Any value unlisted above disables the logging
363 (default is 0, i.e., the logging is disabled).
364 .It Va msl
365 The Maximum Segment Lifetime, in milliseconds, for a packet.
366 .It Va keepinit
367 Timeout, in milliseconds, for new, non-established
368 .Tn TCP
369 connections.
370 The default is 75000 msec.
371 .It Va keepidle
372 Amount of time, in milliseconds, that the connection must be idle
373 before keepalive probes (if enabled) are sent.
374 The default is 7200000 msec (2 hours).
375 .It Va keepintvl
376 The interval, in milliseconds, between keepalive probes sent to remote
377 machines, when no response is received on a
378 .Va keepidle
379 probe.
380 The default is 75000 msec.
381 .It Va keepcnt
382 Number of probes sent, with no response, before a connection
383 is dropped.
384 The default is 8 packets.
385 .It Va always_keepalive
386 Assume that
387 .Dv SO_KEEPALIVE
388 is set on all
389 .Tn TCP
390 connections, the kernel will
391 periodically send a packet to the remote host to verify the connection
392 is still up.
393 .It Va icmp_may_rst
394 Certain
395 .Tn ICMP
396 unreachable messages may abort connections in
397 .Tn SYN-SENT
398 state.
399 .It Va do_tcpdrain
400 Flush packets in the
401 .Tn TCP
402 reassembly queue if the system is low on mbufs.
403 .It Va blackhole
404 If enabled, disable sending of RST when a connection is attempted
405 to a port where there is not a socket accepting connections.
406 See
407 .Xr blackhole 4 .
408 .It Va delayed_ack
409 Delay ACK to try and piggyback it onto a data packet.
410 .It Va delacktime
411 Maximum amount of time, in milliseconds, before a delayed ACK is sent.
412 .It Va path_mtu_discovery
413 Enable Path MTU Discovery.
414 .It Va tcbhashsize
415 Size of the
416 .Tn TCP
417 control-block hash table
418 (read-only).
419 This may be tuned using the kernel option
420 .Dv TCBHASHSIZE
421 or by setting
422 .Va net.inet.tcp.tcbhashsize
423 in the
424 .Xr loader 8 .
425 .It Va pcbcount
426 Number of active process control blocks
427 (read-only).
428 .It Va syncookies
429 Determines whether or not
430 .Tn SYN
431 cookies should be generated for outbound
432 .Tn SYN-ACK
433 packets.
434 .Tn SYN
435 cookies are a great help during
436 .Tn SYN
437 flood attacks, and are enabled by default.
438 (See
439 .Xr syncookies 4 . )
440 .It Va isn_reseed_interval
441 The interval (in seconds) specifying how often the secret data used in
442 RFC 1948 initial sequence number calculations should be reseeded.
443 By default, this variable is set to zero, indicating that
444 no reseeding will occur.
445 Reseeding should not be necessary, and will break
446 .Dv TIME_WAIT
447 recycling for a few minutes.
448 .It Va reass.cursegments
449 The current total number of segments present in all reassembly queues.
450 .It Va reass.maxsegments
451 The maximum limit on the total number of segments across all reassembly
452 queues.
453 The limit can be adjusted as a tunable.
454 .It Va reass.maxqueuelen
455 The maximum number of segments allowed in each reassembly queue.
456 By default, the system chooses a limit based on each TCP connection's
457 receive buffer size and maximum segment size (MSS).
458 The actual limit applied to a session's reassembly queue will be the lower of
459 the system-calculated automatic limit and the user-specified
460 .Va reass.maxqueuelen
461 limit.
462 .It Va rexmit_min , rexmit_slop
463 Adjust the retransmit timer calculation for
464 .Tn TCP .
465 The slop is
466 typically added to the raw calculation to take into account
467 occasional variances that the
468 .Tn SRTT
469 (smoothed round-trip time)
470 is unable to accommodate, while the minimum specifies an
471 absolute minimum.
472 While a number of
473 .Tn TCP
474 RFCs suggest a 1
475 second minimum, these RFCs tend to focus on streaming behavior,
476 and fail to deal with the fact that a 1 second minimum has severe
477 detrimental effects over lossy interactive connections, such
478 as a 802.11b wireless link, and over very fast but lossy
479 connections for those cases not covered by the fast retransmit
480 code.
481 For this reason, we use 200ms of slop and a near-0
482 minimum, which gives us an effective minimum of 200ms (similar to
483 .Tn Linux ) .
484 .It Va initcwnd_segments
485 Enable the ability to specify initial congestion window in number of segments.
486 The default value is 10 as suggested by RFC 6928.
487 Changing the value on fly would not affect connections using congestion window
488 from the hostcache.
489 Caution:
490 This regulates the burst of packets allowed to be sent in the first RTT.
491 The value should be relative to the link capacity.
492 Start with small values for lower-capacity links.
493 Large bursts can cause buffer overruns and packet drops if routers have small
494 buffers or the link is experiencing congestion.
495 .It Va rfc3042
496 Enable the Limited Transmit algorithm as described in RFC 3042.
497 It helps avoid timeouts on lossy links and also when the congestion window
498 is small, as happens on short transfers.
499 .It Va rfc3390
500 Enable support for RFC 3390, which allows for a variable-sized
501 starting congestion window on new connections, depending on the
502 maximum segment size.
503 This helps throughput in general, but
504 particularly affects short transfers and high-bandwidth large
505 propagation-delay connections.
506 .It Va sack.enable
507 Enable support for RFC 2018, TCP Selective Acknowledgment option,
508 which allows the receiver to inform the sender about all successfully
509 arrived segments, allowing the sender to retransmit the missing segments
510 only.
511 .It Va sack.maxholes
512 Maximum number of SACK holes per connection.
513 Defaults to 128.
514 .It Va sack.globalmaxholes
515 Maximum number of SACK holes per system, across all connections.
516 Defaults to 65536.
517 .It Va maxtcptw
518 When a TCP connection enters the
519 .Dv TIME_WAIT
520 state, its associated socket structure is freed, since it is of
521 negligible size and use, and a new structure is allocated to contain a
522 minimal amount of information necessary for sustaining a connection in
523 this state, called the compressed TCP TIME_WAIT state.
524 Since this structure is smaller than a socket structure, it can save
525 a significant amount of system memory.
526 The
527 .Va net.inet.tcp.maxtcptw
528 MIB variable controls the maximum number of these structures allocated.
529 By default, it is initialized to
530 .Va kern.ipc.maxsockets
531 / 5.
532 .It Va nolocaltimewait
533 Suppress creating of compressed TCP TIME_WAIT states for connections in
534 which both endpoints are local.
535 .It Va fast_finwait2_recycle
536 Recycle
537 .Tn TCP
538 .Dv FIN_WAIT_2
539 connections faster when the socket is marked as
540 .Dv SBS_CANTRCVMORE
541 (no user process has the socket open, data received on
542 the socket cannot be read).
543 The timeout used here is
544 .Va finwait2_timeout .
545 .It Va finwait2_timeout
546 Timeout to use for fast recycling of
547 .Tn TCP
548 .Dv FIN_WAIT_2
549 connections.
550 Defaults to 60 seconds.
551 .It Va ecn.enable
552 Enable support for TCP Explicit Congestion Notification (ECN).
553 ECN allows a TCP sender to reduce the transmission rate in order to
554 avoid packet drops.
555 Settings:
556 .Bl -tag -compact
557 .It 0
558 Disable ECN.
559 .It 1
560 Allow incoming connections to request ECN.
561 Outgoing connections will request ECN.
562 .It 2
563 Allow incoming connections to request ECN.
564 Outgoing connections will not request ECN.
565 .El
566 .It Va ecn.maxretries
567 Number of retries (SYN or SYN/ACK retransmits) before disabling ECN on a
568 specific connection.
569 This is needed to help with connection establishment
570 when a broken firewall is in the network path.
571 .It Va pmtud_blackhole_detection
572 Turn on automatic path MTU blackhole detection.
573 In case of retransmits OS will
574 lower the MSS to check if it's MTU problem.
575 If current MSS is greater than
576 configured value to try, it will be set to configured value, otherwise,
577 MSS will be set to default values
578 .Po Va net.inet.tcp.mssdflt
579 and
580 .Va net.inet.tcp.v6mssdflt
581 .Pc .
582 .It Va pmtud_blackhole_mss
583 MSS to try for IPv4 if PMTU blackhole detection is turned on.
584 .It Va v6pmtud_blackhole_mss
585 MSS to try for IPv6 if PMTU blackhole detection is turned on.
586 .It Va pmtud_blackhole_activated
587 Number of times configured values were used in an attempt to downshift.
588 .It Va pmtud_blackhole_activated_min_mss
589 Number of times default MSS was used in an attempt to downshift.
590 .It Va pmtud_blackhole_failed
591 Number of connections for which retransmits continued even after MSS
592 downshift.
593 .It Va functions_available
594 List of available TCP function blocks (TCP stacks).
595 .It Va functions_default
596 The default TCP function block (TCP stack).
597 .It Va insecure_rst
598 Use criteria defined in RFC793 instead of RFC5961 for accepting RST segments.
599 Default is false.
600 .It Va insecure_syn
601 Use criteria defined in RFC793 instead of RFC5961 for accepting SYN segments.
602 Default is false.
603 .El
604 .Sh ERRORS
605 A socket operation may fail with one of the following errors returned:
606 .Bl -tag -width Er
607 .It Bq Er EISCONN
608 when trying to establish a connection on a socket which
609 already has one;
610 .It Bq Er ENOBUFS
611 when the system runs out of memory for
612 an internal data structure;
613 .It Bq Er ETIMEDOUT
614 when a connection was dropped
615 due to excessive retransmissions;
616 .It Bq Er ECONNRESET
617 when the remote peer
618 forces the connection to be closed;
619 .It Bq Er ECONNREFUSED
620 when the remote
621 peer actively refuses connection establishment (usually because
622 no process is listening to the port);
623 .It Bq Er EADDRINUSE
624 when an attempt
625 is made to create a socket with a port which has already been
626 allocated;
627 .It Bq Er EADDRNOTAVAIL
628 when an attempt is made to create a
629 socket with a network address for which no network interface
630 exists;
631 .It Bq Er EAFNOSUPPORT
632 when an attempt is made to bind or connect a socket to a multicast
633 address.
634 .It Bq Er EINVAL
635 when trying to change TCP function blocks at an invalid point in the session;
636 .It Bq Er ENOENT
637 when trying to use a TCP function block that is not available;
638 .El
639 .Sh SEE ALSO
640 .Xr getsockopt 2 ,
641 .Xr socket 2 ,
642 .Xr sysctl 3 ,
643 .Xr blackhole 4 ,
644 .Xr inet 4 ,
645 .Xr intro 4 ,
646 .Xr ip 4 ,
647 .Xr mod_cc 4 ,
648 .Xr siftr 4 ,
649 .Xr syncache 4 ,
650 .Xr setkey 8
651 .Rs
652 .%A "V. Jacobson"
653 .%A "R. Braden"
654 .%A "D. Borman"
655 .%T "TCP Extensions for High Performance"
656 .%O "RFC 1323"
657 .Re
658 .Rs
659 .%A "A. Heffernan"
660 .%T "Protection of BGP Sessions via the TCP MD5 Signature Option"
661 .%O "RFC 2385"
662 .Re
663 .Rs
664 .%A "K. Ramakrishnan"
665 .%A "S. Floyd"
666 .%A "D. Black"
667 .%T "The Addition of Explicit Congestion Notification (ECN) to IP"
668 .%O "RFC 3168"
669 .Re
670 .Sh HISTORY
671 The
672 .Tn TCP
673 protocol appeared in
674 .Bx 4.2 .
675 The RFC 1323 extensions for window scaling and timestamps were added
676 in
677 .Bx 4.4 .
678 The
679 .Dv TCP_INFO
680 option was introduced in
681 .Tn Linux 2.6
682 and is
683 .Em subject to change .