AUTHORS: add Matteo Croce
[netsniff-ng.git] / netsniff-ng.8
blobc937978b9898d76b956fa4b0c30d033256bd3ba3
1 .\" netsniff-ng - the packet sniffing beast
2 .\" Copyright 2013 Daniel Borkmann.
3 .\" Subject to the GPL, version 2.
4 .TH NETSNIFF-NG 8 "03 March 2013" "Linux" "netsniff-ng toolkit"
5 .SH NAME
6 netsniff-ng \- the packet sniffing beast
7 .PP
8 .SH SYNOPSIS
9 .PP
10 \fBnetsniff-ng\fP { [\fIoptions\fP] [\fIfilter-expression\fP] }
11 .PP
12 .SH DESCRIPTION
13 .PP
14 netsniff-ng is a fast, minimal tool to analyze network packets, capture
15 pcap files, replay pcap files, and redirect traffic between interfaces
16 with the help of zero-copy packet(7) sockets. netsniff-ng uses both Linux
17 specific RX_RING and TX_RING interfaces to perform zero-copy. This is to avoid
18 copy and system call overhead between kernel and user address space. When we
19 started working on netsniff-ng, the pcap(3) library did not use this
20 zero-copy facility.
21 .PP
22 netsniff-ng is Linux specific, meaning there is no support for other
23 operating systems. Therefore we can keep the code footprint quite minimal and to
24 the point. Linux packet(7) sockets and its RX_RING and TX_RING interfaces
25 bypass the normal packet processing path through the networking stack.
26 This is the fastest capturing or transmission performance one can get from user
27 space out of the box, without having to load unsupported or non-mainline
28 third-party kernel modules. We explicitly refuse to build netsniff-ng on top of
29 ntop/PF_RING. Not because we do not like it (we do find it interesting), but
30 because of the fact that it is not part of the mainline kernel. Therefore, the
31 ntop project has to maintain and sync out-of-tree drivers to adapt them to their
32 DNA. Eventually, we went for untainted Linux kernel, since its code has a higher
33 rate of review, maintenance, security and bug fixes.
34 .PP
35 netsniff-ng also supports early packet filtering in the kernel. It has support
36 for low-level and high-level packet filters that are translated into Berkeley
37 Packet Filter instructions.
38 .PP
39 netsniff-ng can capture pcap files in several different pcap formats that
40 are interoperable with other tools. The following pcap I/O methods are supported
41 for efficient to-disc capturing: scatter-gather,
42 .BR mmap (2),
43 .BR read (2),
44 and
45 .BR write (2).
46 netsniff-ng is also able to rotate pcap files based on data size or time
47 intervals, thus, making it a useful backend tool for subsequent traffic
48 analysis.
49 .PP
50 netsniff-ng itself also supports analysis, replaying, and dumping of raw 802.11
51 frames. For online or offline analysis, netsniff-ng has a built-in packet
52 dissector for the current 802.3 (Ethernet), 802.11* (WLAN), ARP, MPLS, 802.1Q
53 (VLAN), 802.1QinQ, LLDP, IPv4, IPv6, ICMPv4, ICMPv6, IGMP, TCP and UDP,
54 including GeoIP location analysis. Since netsniff-ng does not establish any
55 state or perform reassembly during packet dissection, its memory footprint is quite
56 low, thus, making netsniff-ng quite efficient for offline analysis of large
57 pcap files as well.
58 .PP
59 Note that netsniff-ng is currently not multithreaded. However, this does not
60 prevent you from starting multiple netsniff-ng instances that are pinned to
61 different, non-overlapping CPUs and f.e. have different BPF filters attached.
62 Likely that at some point in time your harddisc might become a bottleneck
63 assuming you do not rotate such pcaps in ram (and from there periodically
64 scheduled move to slower medias). You can then use
65 .BR mergecap (1)
66 to transform all pcap files into a single large pcap file. Thus, netsniff-ng
67 then works multithreaded eventually.
68 .PP
69 netsniff-ng can also be used to debug netlink traffic.
70 .PP
71 .SH OPTIONS
72 .TP
73 .B -i <dev|pcap|->, -d <dev|pcap|->, --in <dev|pcap|->, --dev <dev|pcap|->
74 Defines an input device. This can either be a networking device, a pcap file
75 or stdin (\[lq]\-\[rq]). In case of a pcap file, the pcap type (\fB\-D\fP
76 option) is determined automatically by the pcap file magic. In case of stdin,
77 it is assumed that the input stream is a pcap file. If the pcap link type is
78 Netlink and pcap type is default format (usec or nsec), then each packet will
79 be wrapped with pcap cooked header [2].
80 .TP
81 .B -o <dev|pcap|dir|cfg|->, --out <dev|pcap|dir|cfg|->
82 Defines the output device. This can either be a networking device, a pcap file,
83 a folder, a
84 .BR trafgen (8)
85 configuration file or stdout (\[lq]-\[rq]). If the output device is a pcap or
86 .BR trafgen (8)
87 configuration file, it may include a time format as defined by
88 .BR strfime (3).
89 If used in conjunction with the \fB-F\fP option, each rotated file will have a
90 unique time stamp. In the case of a pcap file that should not have the default
91 pcap type (0xa1b2c3d4), the additional option \fB\-T\fP must be provided. If a
92 directory is given, then, instead of a single pcap file, multiple pcap files are
93 generated with rotation based on maximum file size or a given interval
94 (\fB\-F\fP option). Optionally, sending the SIGHUP signal to the netsniff-ng
95 process causes a premature rotation of the file. A trafgen configuration file
96 can currently only be specified if the input device is a pcap file. To specify a
97 pcap file as the output device, the file name must have \[lq].pcap\[rq] as its
98 extension. If stdout is given as a device, then a trafgen configuration will be
99 written to stdout if the input device is a pcap file, or a pcap file if the
100 input device is a networking device. If the input device is a Netlink monitor
101 device and pcap type is default (usec or nsec) then each packet will be wrapped
102 with pcap cooked header [2] to keep Netlink family number (Kuznetzov's and
103 netsniff-ng pcap types already contain family number in protocol number field).
105 .B -C <id>, --fanout-group <id>
106 If multiple netsniff-ng instances are being started that all have the same packet
107 fanout group id, then the ingress network traffic being captured is being
108 distributed/load-balanced among these group participants. This gives a much better
109 scaling than running multiple netsniff-ng processes without a fanout group parameter
110 in parallel, but only with a BPF filter attached as a packet would otherwise need
111 to be delivered to all such capturing processes, instead of only once to such a
112 fanout member. Naturally, each fanout member can have its own BPF filters attached.
114 .B -K <hash|lb|cpu|rnd|roll|qm>, --fanout-type <hash|lb|cpu|rnd|roll|qm>
115 This parameter specifies the fanout discipline, in other words, how the captured
116 network traffic is dispatched to the fanout group members. Options are to distribute
117 traffic by the packet hash (\[lq]hash\[rq]), in a round-robin manner (\[lq]lb\[rq]),
118 by CPU the packet arrived on (\[lq]cpu\[rq]), by random (\[lq]rnd\[rq]), by rolling
119 over sockets (\[lq]roll\[rq]) which means if one socket's queue is full, we move on
120 to the next one, or by NIC hardware queue mapping (\[lq]qm\[rq]).
122 .B -L <defrag|roll>, --fanout-opts <defrag|roll>
123 Defines some auxiliary fanout options to be used in addition to a given fanout type.
124 These options apply to any fanout type. In case of \[lq]defrag\[rq], the kernel is
125 being told to defragment packets before delivering to user space, and \[lq]roll\[rq]
126 provides the same roll-over option as the \[lq]roll\[rq] fanout type, so that on any
127 different fanout type being used (e.g. \[lq]qm\[rq]) the socket may temporarily roll
128 over to the next fanout group member in case the original one's queue is full.
130 .B -f, --filter <bpf-file|-|expr>
131 Specifies to not dump all traffic, but to filter the network packet haystack.
132 As a filter, either a
133 .BR bpfc (8)
134 compiled file/stdin can be passed as a parameter or a
135 .BR tcpdump (1)-like
136 filter expression in quotes. For details regarding the bpf-file have a look at
137 .BR bpfc (8),
138 for details regarding a
139 .BR tcpdump (1)-like
140 filter have a look at section \[lq]filter example\[rq] or at
141 .BR pcap-filter (7).
142 A filter expression may also be passed to netsniff-ng without option \fB-f\fP in
143 case there is no subsequent option following after the command-line filter
144 expression.
146 .B -t, --type <type>
147 This defines some sort of filtering mechanisms in terms of addressing. Possible
148 values for type are \[lq]host\[rq] (to us), \[lq]broadcast\[rq] (to all), \[lq]multicast\[rq] (to
149 group), \[lq]others\[rq] (promiscuous mode) or \[lq]outgoing\[rq] (from us).
151 .B -F, --interval <size|time>
152 If the output device is a folder, with \[lq]\-F\[rq], it is possible to define the pcap
153 file rotation interval either in terms of size or time. Thus, when the interval
154 limit has been reached, a new pcap file will be started. As size parameter, the
155 following values are accepted \[lq]<num>KiB/MiB/GiB\[rq]; As time parameter,
156 it can be \[lq]<num>s/sec/min/hrs\[rq].
158 .B -J, --jumbo-support
159 By default, in pcap replay or redirect mode, netsniff-ng's ring buffer frames
160 are a fixed size of 2048 bytes. This means that if you are expecting jumbo
161 frames or even super jumbo frames to pass through your network, then you need
162 to enable support for that by using this option. However, this has the
163 disadvantage of performance degradation and a bigger memory footprint for the
164 ring buffer. Note that this doesn't affect (pcap) capturing mode, since tpacket
165 in version 3 is used!
167 .B -R, --rfraw
168 In case the input or output networking device is a wireless device, it is
169 possible with netsniff-ng to turn this into monitor mode and create a mon<X>
170 device that netsniff-ng will be listening on instead of wlan<X>, for instance.
171 This enables netsniff-ng to analyze, dump, or even replay raw 802.11 frames.
173 .B -n <0|uint>, --num <0|uint>
174 Process a number of packets and then exit. If the number of packets is 0, then
175 this is equivalent to infinite packets resp. processing until interrupted.
176 Otherwise, a number given as an unsigned integer will limit processing.
178 .B -P <name>, --prefix <name>
179 When dumping pcap files into a folder, a file name prefix can be defined with
180 this option. If not otherwise specified, the default prefix is \[lq]dump\-\[rq]
181 followed by a Unix timestamp. Use \[lq]\-\-prefex ""\[rq] to set filename as
182 seconds since the Unix Epoch e.g. 1369179203.pcap
184 .B -T <pcap-magic>, --magic <pcap-magic>
185 Specify a pcap type for storage. Different pcap types with their various meta
186 data capabilities are shown with option \fB\-D\fP. If not otherwise
187 specified, the pcap-magic 0xa1b2c3d4, also known as a standard tcpdump-capable
188 pcap format, is used. Pcap files with swapped endianness are also supported.
190 .B -D, --dump-pcap-types
191 Dump all available pcap types with their capabilities and magic numbers that
192 can be used with option \[lq]\-T\[rq] to stdout and exit.
194 .B -B, --dump-bpf
195 If a Berkeley Packet Filter is given, for example via option \[lq]\-f\[rq], then
196 dump the BPF disassembly to stdout during ring setup. This only serves for informative
197 or verification purposes.
199 .B -r, --rand
200 If the input and output device are both networking devices, then this option will
201 randomize packet order in the output ring buffer.
203 .B -M, --no-promisc
204 The networking interface will not be put into promiscuous mode. By default,
205 promiscuous mode is turned on.
207 .B -N, --no-hwtimestamp
208 Disable taking hardware time stamps for RX packets. By default, if the network
209 device supports hardware time stamping, the hardware time stamps will be used
210 when writing packets to pcap files. This option disables this behavior and
211 forces (kernel based) software time stamps to be used, even if hardware time
212 stamps are available.
214 .B -A, --no-sock-mem
215 On startup and shutdown, netsniff-ng tries to increase socket read and
216 write buffers if appropriate. This option will prevent netsniff-ng from doing
219 .B -m, --mmap
221 .BR mmap (2)
222 as pcap file I/O. This is the default when replaying pcap files.
224 .B -G, --sg
225 Use scatter-gather as pcap file I/O. This is the default when capturing
226 pcap files.
228 .B -c, --clrw
229 Use slower
230 .BR read (2)
232 .BR write (2)
233 I/O. This is not the default case anywhere, but in
234 some situations it could be preferred as it has a lower latency on write-back
235 to disc.
237 .B -S <size>, --ring-size <size>
238 Manually define the RX_RING resp. TX_RING size in \[lq]<num>KiB/MiB/GiB\[rq]. By
239 default, the size is determined based on the network connectivity rate.
241 .B -k <uint>, --kernel-pull <uint>
242 Manually define the interval in micro-seconds where the kernel should be triggered
243 to batch process the ring buffer frames. By default, it is every 10us, but it can
244 manually be prolonged, for instance.
246 .B -b <cpu>, --bind-cpu <cpu>
247 Pin netsniff-ng to a specific CPU and also pin resp. migrate the NIC's IRQ
248 CPU affinity to this CPU. This option should be preferred in combination with
249 \fB\-s\fP in case a middle to high packet rate is expected.
251 .B -u <uid>, --user <uid> resp. -g <gid>, --group <gid>
252 After ring setup drop privileges to a non-root user/group combination.
254 .B -H, --prio-high
255 Set this process as a high priority process in order to achieve a higher
256 scheduling rate resp. CPU time. This is however not the default setting, since
257 it could lead to starvation of other processes, for example low priority kernel
258 threads.
260 .B -Q, --notouch-irq
261 Do not reassign the NIC's IRQ CPU affinity settings.
263 .B -s, --silent
264 Do not enter the packet dissector at all and do not print any packet information
265 to the terminal. Just shut up and be silent. This option should be preferred in
266 combination with pcap recording or replay, since it will not flood your terminal
267 which causes a significant performance degradation.
269 .B -q, --less
270 Print a less verbose one-line information for each packet to the terminal.
272 .B -X, --hex
273 Only dump packets in hex format to the terminal.
275 .B -l, --ascii
276 Only display ASCII printable characters.
278 .B -U, --update
279 If geographical IP location is used, the built-in database update
280 mechanism will be invoked to get Maxmind's latest database. To configure
281 search locations for databases, the file /etc/netsniff-ng/geoip.conf contains
282 possible addresses. Thus, to save bandwidth or for mirroring of Maxmind's
283 databases (to bypass their traffic limit policy), different hosts or IP
284 addresses can be placed into geoip.conf, separated by a newline.
286 .B -w, --cooked
287 Replace each frame link header with Linux "cooked" header [3] which keeps info
288 about link type and protocol. It allows to dump and dissect frames captured
289 from different link types when -i "any" was specified, for example.
291 .B -V, --verbose
292 Be more verbose during startup i.e. show detailed ring setup information.
294 .B -v, --version
295 Show version information and exit.
297 .B -h, --help
298 Show user help and exit.
300 .SH USAGE EXAMPLE
302 .B netsniff-ng
303 The most simple command is to just run \[lq]netsniff-ng\[rq]. This will start
304 listening on all available networking devices in promiscuous mode and dump
305 the packet dissector output to the terminal. No files will be recorded.
307 .B netsniff-ng --in eth0 --out dump.pcap -s -T 0xa1e2cb12 -b 0 tcp or udp
308 Capture TCP or UDP traffic from the networking device eth0 into the pcap file
309 named dump.pcap, which has netsniff-ng specific pcap extensions (see
310 \[lq]netsniff-ng \-D\[rq] for capabilities). Also, do not print the content to
311 the terminal and pin the process and NIC IRQ affinity to CPU 0. The pcap write
312 method is scatter-gather I/O.
314 .B netsniff-ng --in wlan0 --rfraw --out dump.pcap --silent --bind-cpu 0
315 Put the wlan0 device into monitoring mode and capture all raw 802.11 frames
316 into the file dump.pcap. Do not dissect and print the content to the terminal
317 and pin the process and NIC IRQ affinity to CPU 0. The pcap write method is
318 scatter-gather I/O.
320 .B netsniff-ng --in dump.pcap --mmap --out eth0 -k1000 --silent --bind-cpu 0
321 Replay the pcap file dump.pcap which is read through
322 .BR mmap (2)
323 I/O and send the packets out via the eth0 networking device. Do not dissect and
324 print the content to the terminal and pin the process and NIC IRQ affinity to
325 CPU 0.  Also, trigger the kernel every 1000us to traverse the TX_RING instead of
326 every 10us. Note that the pcap magic type is detected automatically from the
327 pcap file header.
329 .B netsniff-ng --in eth0 --out eth1 --silent --bind-cpu 0 --type host -r
330 Redirect network traffic from the networking device eth0 to eth1 for traffic
331 that is destined for our host, thus ignore broadcast, multicast and promiscuous
332 traffic. Randomize the order of packets for the outgoing device and do not
333 print any packet contents to the terminal. Also, pin the process and NIC IRQ
334 affinity to CPU 0.
336 .B netsniff-ng --in team0 --out /opt/probe/ -s -m --interval 100MiB -b 0
337 Capture on an aggregated team0 networking device and dump packets into multiple
338 pcap files that are split into 100MiB each. Use
339 .BR mmap (2)
340 I/O as a pcap write method, support for super jumbo frames is built-in (does not
341 need to be configured here), and do not print the captured data to the terminal.
342 Pin netsniff-ng and NIC IRQ affinity to CPU 0. The default pcap magic type is
343 0xa1b2c3d4 (tcpdump-capable pcap).
345 .B netsniff-ng --in vlan0 --out dump.pcap -c -u `id -u bob` -g `id -g bob`
346 Capture network traffic on device vlan0 into a pcap file called dump.pcap
347 by using normal
348 .BR read (2),
349 .BR write (2)
350 I/O for the pcap file (slower but less latency). Also, after setting up the
351 RX_RING for capture, drop privileges from root to the user and group
352 \[lq]bob\[rq]. Invoke the packet dissector and print packet contents to the
353 terminal for further analysis.
355 .B netsniff-ng --in any --filter http.bpf -B --ascii -V
356 Capture from all available networking interfaces and install a low-level
357 filter that was previously compiled by
358 .BR bpfc (8)
359 into http.bpf in order to filter HTTP traffic. Super jumbo frame support is
360 automatically enabled and only print human readable packet data to the terminal,
361 and also be more verbose during setup phase. Moreover, dump a BPF disassembly of
362 http.bpf.
364 .B netsniff-ng --in dump.pcap --out dump.cfg --silent
365 Convert the pcap file dump.pcap into a
366 .BR trafgen (8)
367 configuration file dump.cfg. Do not print pcap contents to the terminal.
369 .B netsniff-ng -i dump.pcap -f beacon.bpf -o -
370 Convert the pcap file dump.pcap into a
371 .BR trafgen (8)
372 configuration file and write it to stdout. However, do not dump all of its
373 content, but only the one that passes the low-level filter for raw 802.11 from
374 beacon.bpf. The BPF engine here is invoked in user space inside of netsniff-ng,
375 so Linux extensions are not available.
377 .B cat foo.pcap | netsniff-ng -i - -o -
378 Read a pcap file from stdin and convert it into a
379 .BR trafgen (8)
380 configuration
381 file to stdout.
383 .B netsniff-ng -i nlmon0 -o dump.pcap -s
384 Capture netlink traffic to a pcap file. This command needs a netlink monitoring
385 device to be set up beforehand using the follwing commands using
386 .BR ip (1)
387 from the iproute2 utility collection:
389   modprobe nlmon
390   ip link add type nlmon
391   ip link set nlmon0 up
393 To tear down the \fBnlmon0\fP device, use the following commands:
395   ip link set nlmon0 down
396   ip link del dev nlmon0
397   rmmod nlmon
399 .B netsniff-ng --fanout-group 1 --fanout-type cpu --fanout-opts defrag --bind-cpu 0 --notouch-irq --silent --in em1 --out /var/cap/cpu0/ --interval 120sec
400 Start two netsniff-ng fanout instances. Both are assigned into the same fanout
401 group membership and traffic is splitted among them by incoming cpu. Furthermore,
402 the kernel is supposed to defragment possible incoming fragments. First instance
403 is assigned to CPU 0 and the second one to CPU 1, IRQ bindings are not altered as
404 they might have been adapted to this scenario by the user a-priori, and traffic
405 is captured on interface em1, and written out in 120 second intervals as pcap
406 files into /var/cap/cpu0/. Tools like mergecap(1) will be able to merge the cpu0/1
407 split back together if needed.
409 .SH CONFIG FILES
411 Files under /etc/netsniff-ng/ can be modified to extend netsniff-ng's
412 functionality:
414     * oui.conf - OUI/MAC vendor database
415     * ether.conf - Ethernet type descriptions
416     * tcp.conf - TCP port/services map
417     * udp.conf - UDP port/services map
418     * geoip.conf - GeoIP database mirrors
420 .SH FILTER EXAMPLE
422 netsniff-ng supports both, low-level and high-level filters that are
423 attached to its
424 .BR packet (7)
425 socket. Low-level filters are described in the
426 .BR bpfc (8)
427 man page.
429 Low-level filters can be used with netsniff-ng in the following way:
431     1. bpfc foo > bar
432     2. netsniff-ng \-f bar
433     3. bpfc foo | netsniff-ng -i nlmon0 -f -
435 Here, foo is the bpfc program that will be translated into a netsniff-ng
436 readable \[lq]opcodes\[rq] file and passed to netsniff-ng through the \-f
437 option.
439 Similarly, high-level filter can be either passed through the \fB\-f\fP option,
440 e.g. \-f "tcp or udp" or at the end of all options without the \[lq]\-f\[rq].
442 The filter syntax is the same as in
443 .BR tcpdump (8),
444 which is described in the man page
445 .BR pcap-filter (7).
446 Just to quote some examples:
448 .B host sundown
449 To select all packets arriving at or departing from sundown.
451 .B host helios and (hot or ace)
452 To select traffic between helios and either hot or ace.
454 .B ip host ace and not helios
455 To select all IP packets between ace and any host except helios.
457 .B net ucb-ether
458 To select all traffic between local hosts and hosts at Berkeley.
460 .B gateway snup and (port ftp or ftp-data)
461 To select all FTP traffic through Internet gateway snup.
463 .B ip and not net localnet
464 To select traffic neither sourced from, nor destined for, local hosts. If you
465 have a gateway to another network, this traffic should never make it onto
466 your local network.
468 .B tcp[tcpflags] & (tcp-syn|tcp-fin) != 0 and not src and dst net localnet
469 To select the start and end packets (the SYN and FIN packets) of each TCP
470 conversation that involve a non-local host.
472 .B tcp port 80 and (((ip[2:2] - ((ip[0]&0xf)<<2)) - ((tcp[12]&0xf0)>>2)) != 0)
473 To select all IPv4 HTTP packets to and from port 80, that is to say, print only packets
474 that contain data, not, for example, SYN and FIN packets and ACK-only packets.
475 (IPv6 is left as an exercise for the reader.)
477 .B gateway snup and ip[2:2] > 576
478 To select IP packets longer than 576 bytes sent through gateway snup.
480 .B ether[0] & 1 = 0 and ip[16] >= 224
481 To select IP broadcast or multicast packets that were not sent via Ethernet
482 broadcast or multicast.
484 .B icmp[icmptype] != icmp-echo and icmp[icmptype] != icmp-echoreply
485 To select all ICMP packets that are not echo requests or replies
486 (that is to say, not "ping" packets).
488 .SH PCAP FORMATS:
490 netsniff-ng supports a couple of pcap formats, visible through ``netsniff-ng \-D'':
492 .B tcpdump-capable pcap (default)
493 Pcap magic number is encoded as 0xa1b2c3d4 resp. 0xd4c3b2a1. As packet meta data
494 this format contains the timeval in microseconds, the original packet length and
495 the captured packet length.
497 .B tcpdump-capable pcap with ns resolution
498 Pcap magic number is encoded as 0xa1b23c4d resp. 0x4d3cb2a1. As packet meta data
499 this format contains the timeval in nanoseconds, the original packet length and
500 the captured packet length.
502 .B Alexey Kuznetzov's pcap
503 Pcap magic number is encoded as 0xa1b2cd34 resp. 0x34cdb2a1. As packet meta data
504 this format contains the timeval in microseconds, the original packet length,
505 the captured packet length, the interface index (sll_ifindex), the packet's
506 protocol (sll_protocol), and the packet type (sll_pkttype).
508 .B netsniff-ng pcap
509 Pcap magic number is encoded as 0xa1e2cb12 resp. 0x12cbe2a1. As packet meta data
510 this format contains the timeval in nanoseconds, the original packet length,
511 the captured packet length, the timestamp hw/sw source, the interface index
512 (sll_ifindex), the packet's protocol (sll_protocol), the packet type (sll_pkttype)
513 and the hardware type (sll_hatype).
515 For further implementation details or format support in your application,
516 have a look at pcap_io.h in the netsniff-ng sources.
518 .SH NOTE
519 To avoid confusion, it should be noted that there is another network
520 analyzer with a similar name, called NetSniff, that is unrelated to
521 the netsniff-ng project.
523 For introducing bit errors, delays with random variation and more
524 while replaying pcaps, make use of
525 .BR tc (8)
526 with its disciplines such as netem.
528 netsniff-ng does only some basic, architecture generic tuning on
529 startup. If you are considering to do high performance capturing,
530 you need to carefully tune your machine, both hardware and software.
531 Simply letting netsniff-ng run without thinking about your underlying
532 system might not necessarily give you the desired performance. Note
533 that tuning your system is always a tradeoff and fine-grained
534 balancing act (throughput versus latency). You should know what
535 you are doing!
537 One recommendation for software-based tuning is
538 .BR tuned (8).
539 Besides that, there are many other things to consider. Just to throw you
540 a few things that you might want to look at: NAPI networking drivers,
541 tickless kernel, I/OAT DMA engine, Direct Cache Access, RAM-based
542 file systems, multi-queues, and many more things. Also, you might
543 want to read the kernel's Documentation/networking/scaling.txt file
544 regarding technologies such as RSS, RPS, RFS, aRFS and XPS. Also
545 check your ethtool(8) settings, for example regarding offloading or
546 Ethernet pause frames.
548 Moreover, to get a deeper understanding of netsniff-ng internals
549 and how it interacts with the Linux kernel, the kernel documentation
550 under Documentation/networking/{packet_mmap.txt, filter.txt,
551 multiqueue.txt} might be of interest.
553 How do you sniff in a switched environment? I rudely refer to dSniff's
554 documentation that says:
556 The easiest route is simply to impersonate the local gateway, stealing
557 client traffic en route to some remote destination. Of course, the traffic
558 must be forwarded by your attacking machine, either by enabling kernel IP
559 forwarding or with a userland program that accomplishes the same
560 (fragrouter \-B1).
562 Several people have reportedly destroyed connectivity on their LAN to the
563 outside world by ARP spoofing the gateway, and forgetting to enable IP
564 forwarding on the attacking machine. Do not do this. You have been warned.
566 A safer option than ARP spoofing would be to use a "port mirror" function
567 if your switch hardware supports it and if you have access to the switch.
569 If you do not need to dump all possible traffic, you have to consider
570 running netsniff-ng with a BPF filter for the ingress path. For that
571 purpose, read the
572 .BR bpfc (8)
573 man page.
575 Also, to aggregate multiple NICs that you want to capture on, you
576 should consider using team devices, further explained in libteam resp.
577 .BR teamd (8).
579 The following netsniff-ng pcap magic numbers are compatible with other
580 tools, at least tcpdump or Wireshark:
582     0xa1b2c3d4 (tcpdump-capable pcap)
583     0xa1b23c4d (tcpdump-capable pcap with ns resolution)
584     0xa1b2cd34 (Alexey Kuznetzov's pcap)
586 Pcap files with different meta data endianness are supported by netsniff-ng
587 as well.
589 .SH BUGS
591 When replaying pcap files, the timing information from the pcap packet
592 header is currently ignored.
594 Also, when replaying pcap files, demultiplexing traffic among multiple
595 networking interfaces does not work. Currently, it is only sent via the
596 interface that is given by the \-\-out parameter.
598 When performing traffic capture on the Ethernet interface, the pcap file
599 is created and packets are received but without a 802.1Q header. When one
600 uses tshark, all headers are visible, but netsniff-ng removes 802.1Q
601 headers. Is that normal behavior?
603 Yes and no. The way VLAN headers are handled in PF_PACKET sockets by the
604 kernel is somewhat \[lq]problematic\[rq] [1]. The problem in the Linux kernel
605 is that some drivers already handle VLANs, others do not. Those who handle it
606 can have different implementations, such as hardware acceleration and so on.
607 So in some cases the VLAN tag is even stripped before entering the protocol
608 stack, in some cases probably not. The bottom line is that a "hack" was
609 introduced in PF_PACKET so that a VLAN ID is visible in some helper data
610 structure that is accessible from the RX_RING.
612 Then it gets really messy in the user space to artificially put the VLAN
613 header back into the right place. Not to mention the resulting performance
614 implications on all of libpcap(3) tools since parts of the packet need to
615 be copied for reassembly via memmove(3).
617 A user reported the following, just to demonstrate this mess: some tests were
618 made with two machines, and it seems that results depend on the driver ...
620     AR8131:
621       ethtool \-k eth0 gives "rx-vlan-offload: on"
622       - wireshark gets the vlan header
623       - netsniff-ng doesn't get the vlan header
624       ethtool \-K eth0 rxvlan off
625       - wireshark gets a QinQ header even though no one sent QinQ
626       - netsniff-ng gets the vlan header
628     RTL8111/8168B:
629       ethtool \-k eth0 gives "rx-vlan-offload: on"
630       - wireshark gets the vlan header
631       - netsniff-ng doesn't get the vlan header
632       ethtool \-K eth0 rxvlan off
633       - wireshark gets the vlan header
634       - netsniff-ng doesn't get the vlan header
636 Even if we agreed on doing the same workaround as libpcap, we still will
637 not be able to see QinQ, for instance, due to the fact that only one VLAN tag
638 is stored in the kernel helper data structure. We think that there should be
639 a good consensus on the kernel space side about what gets transferred to
640 userland first.
642 Update (28.11.2012): the Linux kernel and also
643 .BR bpfc (8)
644 has built-in support for hardware accelerated VLAN filtering, even though tags
645 might not be visible in the payload itself as reported here. However, the
646 filtering for VLANs works reliable if your NIC supports it. See
647 .BR bpfc (8)
648 for an example.
650    [1] http://lkml.indiana.edu/hypermail/linux/kernel/0710.3/3816.html
651    [2] http://www.tcpdump.org/linktypes/LINKTYPE_NETLINK.html
652    [3] http://www.tcpdump.org/linktypes/LINKTYPE_LINUX_SLL.html
654 .SH LEGAL
655 netsniff-ng is licensed under the GNU GPL version 2.0.
657 .SH HISTORY
658 .B netsniff-ng
659 was originally written for the netsniff-ng toolkit by Daniel Borkmann. Bigger
660 contributions were made by Emmanuel Roullit, Markus Amend, Tobias Klauser and
661 Christoph Jaeger. It is currently maintained by Tobias Klauser
662 <tklauser@distanz.ch> and Daniel Borkmann <dborkma@tik.ee.ethz.ch>.
664 .SH SEE ALSO
665 .BR trafgen (8),
666 .BR mausezahn (8),
667 .BR ifpps (8),
668 .BR bpfc (8),
669 .BR flowtop (8),
670 .BR astraceroute (8),
671 .BR curvetun (8)
673 .SH AUTHOR
674 Manpage was written by Daniel Borkmann.
676 .SH COLOPHON
677 This page is part of the Linux netsniff-ng toolkit project. A description of the project,
678 and information about reporting bugs, can be found at http://netsniff-ng.org/.