source: lib/trace.c @ dd22d84

4.0.1-hotfixescachetimestampsdevelopdpdk-ndagetsilivegetfragoffhelplibtrace4ndag_formatpfringrc-4.0.1rc-4.0.2rc-4.0.3rc-4.0.4ringdecrementfixringperformanceringtimestampfixes
Last change on this file since dd22d84 was 91ebc50, checked in by Shane Alcock <salcock@…>, 16 years ago

config option support added + zlib compression level

  • Property mode set to 100644
File size: 34.9 KB
Line 
1/*
2 * This file is part of libtrace
3 *
4 * Copyright (c) 2004 The University of Waikato, Hamilton, New Zealand.
5 * Authors: Daniel Lawson
6 *          Perry Lorier
7 *         
8 * All rights reserved.
9 *
10 * This code has been developed by the University of Waikato WAND
11 * research group. For further information please see http://www.wand.net.nz/
12 *
13 * libtrace is free software; you can redistribute it and/or modify
14 * it under the terms of the GNU General Public License as published by
15 * the Free Software Foundation; either version 2 of the License, or
16 * (at your option) any later version.
17 *
18 * libtrace is distributed in the hope that it will be useful,
19 * but WITHOUT ANY WARRANTY; without even the implied warranty of
20 * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
21 * GNU General Public License for more details.
22 *
23 * You should have received a copy of the GNU General Public License
24 * along with libtrace; if not, write to the Free Software
25 * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
26 *
27 * $Id$
28 *
29 */
30
31
32/** @file
33 *
34 * @brief Trace file processing library
35 *
36 * @author Daniel Lawson
37 * @author Perry Lorier
38 *
39 * @internal
40 */
41#define _GNU_SOURCE
42#include "common.h"
43#include "config.h"
44#include <assert.h>
45#include <errno.h>
46#include <fcntl.h>
47#include <netdb.h>
48#include <stdio.h>
49#include <stdlib.h>
50#include <string.h>
51#include <sys/stat.h>
52#include <sys/types.h>
53
54#ifdef HAVE_LIMITS_H
55#  include <limits.h>
56#endif
57
58#ifdef HAVE_SYS_LIMITS_H
59#  include <sys/limits.h>
60#endif
61
62#include <sys/socket.h>
63#include <sys/un.h>
64#include <sys/mman.h>
65#include <unistd.h>
66
67#ifdef HAVE_NET_IF_ARP_H
68#  include <net/if_arp.h>
69#endif
70
71#ifdef HAVE_NET_IF_H
72#  include <net/if.h>
73#endif
74
75#ifdef HAVE_NETINET_IN_H
76#  include <netinet/in.h>
77#endif
78
79#ifdef HAVE_NET_ETHERNET_H
80#  include <net/ethernet.h>
81#endif
82
83#ifdef HAVE_NETINET_IF_ETHER_H
84#  include <netinet/if_ether.h>
85#endif
86
87#include <time.h>
88#include <sys/ioctl.h>
89
90#ifdef HAVE_INTTYPES_H
91#  include <inttypes.h>
92#else
93#  error "Can't find inttypes.h - this needs to be fixed"
94#endif
95
96#ifdef HAVE_STDDEF_H
97#  include <stddef.h>
98#else
99# error "Can't find stddef.h - do you define ptrdiff_t elsewhere?"
100#endif
101
102#include "libtrace.h"
103#include "fifo.h"
104#include "format.h"
105#include "parse_cmd.h"
106
107#if HAVE_PCAP_BPF_H
108#  include <pcap-bpf.h>
109#else
110#  ifdef HAVE_NET_BPF_H
111#    include <net/bpf.h>
112#  endif
113#endif
114
115#if HAVE_PCAP_H
116#  include <pcap.h>
117#  ifdef HAVE_PCAP_INT_H
118#    include <pcap-int.h>
119#  endif
120#endif
121
122#ifdef HAVE_ZLIB_H
123#  include <zlib.h>
124#endif
125
126
127#include "wag.h"
128
129#ifdef HAVE_DAG_API
130#  include "dagnew.h"
131#  include "dagapi.h"
132#else
133#  include "dagformat.h"
134#endif
135
136#include "format.h"
137//#include "format/format_list.h"
138#include <err.h>
139
140#define MAXOPTS 1024
141
142//typedef enum {SOCKET, TRACE, STDIN, DEVICE, INTERFACE, RT } source_t;
143
144//typedef enum {ERF, PCAP, PCAPINT, DAG, RTCLIENT, WAG, WAGINT } format_e_t;
145
146//typedef enum {RTSERVER, GZERF } output_t;
147#if HAVE_BPF
148/** A type encapsulating a bpf filter
149 * This type covers the compiled bpf filter, as well as the original filter
150 * string
151 *
152 */
153struct libtrace_filter_t {
154        struct bpf_insn *filter;
155        char * filterstring;
156};
157#endif
158
159struct format_t **format_list = 0;
160int format_size = 0;
161int nformats = 0;
162
163void register_format(struct format_t *f) {
164        fprintf(stderr,"Registering input format %s\n",f->name);
165        if (format_list == 0) {
166                format_size = 10;
167                format_list = malloc(sizeof(struct format_t *) * format_size);
168        } else if (format_size == nformats) {
169                format_size = format_size + 10;
170                format_list = realloc(format_list,
171                                sizeof(struct format_t *) * format_size);
172        }
173        format_list[nformats] = f;
174        nformats++;
175}
176
177
178#define RP_BUFSIZE 65536
179
180#define URI_PROTO_LINE 16
181static int init_trace(struct libtrace_t **libtrace, char *uri) {
182        char *scan = calloc(sizeof(char),URI_PROTO_LINE);
183        char *uridata = 0;                 
184        int i = 0;
185        struct stat buf;
186       
187        // parse the URI to determine what sort of event we are dealing with
188       
189        // want snippet before the : to get the uri base type.
190
191        if((uridata = strchr(uri,':')) == NULL) {
192                // badly formed URI - needs a :
193                return 0;
194        }
195
196        if ((*uridata - *uri) > URI_PROTO_LINE) {
197                // badly formed URI - uri type is too long
198                return 0;
199        }
200        strncpy(scan,uri, (uridata - uri));
201
202        (*libtrace)->tdelta = 0.0;
203
204
205        (*libtrace)->format = 0;
206        for (i = 0; i < nformats; i++) {
207                if (strlen(scan) == strlen(format_list[i]->name) &&
208                                !strncasecmp(scan,
209                                        format_list[i]->name,
210                                        strlen(scan))) {
211                                (*libtrace)->format=format_list[i];
212                                break;
213                                }
214        }
215        if ((*libtrace)->format == 0) {
216                fprintf(stderr,
217                        "libtrace has no support for this format (%s)\n",scan);
218                return 0;
219        }
220
221        // push uridata past the delimiter
222        uridata++;
223        (*libtrace)->conn_info.path = strdup(uridata);
224
225        // libtrace->format now contains the type of uri
226        // libtrace->uridata contains the appropriate data for this
227       
228        if ((*libtrace)->format->init_input) {
229                (*libtrace)->format->init_input( (*libtrace));
230        } else {
231                fprintf(stderr,
232                        "No init function for format %s\n",scan);
233                return 0;
234        }
235       
236
237        (*libtrace)->fifo = create_fifo(1048576);
238        assert( (*libtrace)->fifo);
239        //(*libtrace)->packet.buffer = 0;
240        //(*libtrace)->packet.size = 0;
241
242        return 1;
243}
244
245/** Initialises the data contained within the libtrace_out_t structure, based on the provided uri.
246 *
247 * @param libtrace      the libtrace_out_t structure to initialise
248 * @param uri           the uri defining the output type and destination
249 * @returns             1 if initialised successfully, 0 otherwise
250 *
251 * @author Shane Alcock
252 * */
253static int init_output(struct libtrace_out_t **libtrace, char *uri) {
254        char *scan = calloc(sizeof(char),URI_PROTO_LINE);
255        char *uridata = 0;
256        int i;
257       
258        // parse the URI to determine what sort of event we are dealing with
259
260        // want snippet before the : to get the uri base type.
261       
262        if((uridata = strchr(uri,':')) == NULL) {
263                // badly formed URI - needs a :
264                return 0;
265        }
266
267        if ((*uridata - *uri) > URI_PROTO_LINE) {
268                // badly formed URI - uri type is too long
269                return 0;
270        }
271       
272        strncpy(scan,uri, (uridata - uri));
273       
274        (*libtrace)->format = 0;
275        for (i = 0; i < nformats; i++) {
276                if (strlen(scan) == strlen(format_list[i]->name) &&
277                                !strncasecmp(scan,
278                                        format_list[i]->name,
279                                        strlen(scan))) {
280                                (*libtrace)->format=format_list[i];
281                                break;
282                                }
283        }
284        if ((*libtrace)->format == 0) {
285                fprintf(stderr,
286                        "libtrace has no support for this format (%s)\n",scan);
287                return 0;
288        }
289       
290        // push uridata past the delimiter
291        uridata++;
292        (*libtrace)->uridata = strdup(uridata);
293       
294       
295        // libtrace->format now contains the type of uri
296        // libtrace->uridata contains the appropriate data for this
297
298        if ((*libtrace)->format->init_output) {
299                (*libtrace)->format->init_output( (*libtrace));
300        } else {
301                fprintf(stderr,
302                        "No init_output function for format %s\n",scan);
303                return 0;
304        }
305
306       
307        (*libtrace)->fifo = create_fifo(1048576);
308        assert( (*libtrace)->fifo);
309        return 1;
310} 
311
312/** Create a trace file from a URI
313 *
314 * @returns opaque pointer to a libtrace_t
315 *
316 * Valid URI's are:
317 *  erf:/path/to/erf/file
318 *  erf:/path/to/erf/file.gz
319 *  erf:/path/to/rtclient/socket
320 *  erf:-                       (stdin)
321 *  pcapint:pcapinterface               (eg: pcapint:eth0)
322 *  pcap:/path/to/pcap/file
323 *  pcap:-
324 *  rtclient:hostname
325 *  rtclient:hostname:port
326 *  wag:-
327 *  wag:/path/to/wag/file
328 *  wag:/path/to/wag/file.gz
329 *  wag:/path/to/wag/socket
330 *  wagint:/dev/device
331 *
332 * URIs which have yet to be implemented are:
333 * dag:/dev/dagcard
334 * pcap:/path/to/pcap/socket
335 *
336 * If an error occured when attempting to open a trace, NULL is returned
337 * and an error is output to stdout.
338 */
339struct libtrace_t *trace_create(char *uri) {
340        struct libtrace_t *libtrace = malloc(sizeof(struct libtrace_t));
341
342        if(init_trace(&libtrace,uri) == 0) {
343                return 0;
344        }
345       
346        return libtrace;
347}
348
349/** Creates a libtrace_out_t structure and the socket / file through which output will be directed.
350 *
351 * @param uri   the uri string describing the output format and the destination
352 * @returns the newly created libtrace_out_t structure
353 *
354 * @author Shane Alcock
355 * */
356struct libtrace_out_t *trace_output_create(char *uri) {
357        struct libtrace_out_t *libtrace = malloc(sizeof(struct libtrace_out_t));
358       
359        if (init_output(&libtrace, uri) == 0)
360                return 0;
361
362        return libtrace;
363}
364
365int trace_output_config(struct libtrace_out_t *libtrace, char *options) {
366        char *opt_string = 0;
367        char *opt_argv[MAXOPTS];
368        int opt_argc = 0;
369       
370        assert(libtrace);
371       
372        if (!options) {
373                printf("No options specified\n");
374                return 0;
375        }
376       
377        asprintf(&opt_string, "%s %s", libtrace->format->name, options);
378        parse_cmd(opt_string, &opt_argc, opt_argv, MAXOPTS);
379       
380        if (libtrace->format->config_output)
381                return libtrace->format->config_output(libtrace, opt_argc, opt_argv);
382
383}
384
385/** Close a trace file, freeing up any resources it may have been using
386 *
387 */
388void trace_destroy(struct libtrace_t *libtrace) {
389        assert(libtrace);
390        libtrace->format->fin_input(libtrace);
391        // need to free things!
392        destroy_fifo(libtrace->fifo);
393        free(libtrace);
394}
395
396/** Close an output trace file, freeing up any resources it may have been using
397 *
398 * @param libtrace      the output trace file to be destroyed
399 *
400 * @author Shane Alcock
401 * */
402void trace_output_destroy(struct libtrace_out_t *libtrace) {
403        assert(libtrace);
404        libtrace->format->fin_output(libtrace);
405        destroy_fifo(libtrace->fifo);
406        free(libtrace);
407}
408
409/** Read one packet from the trace into buffer
410 *
411 * @param libtrace      the libtrace opaque pointer
412 * @param packet        the packet opaque pointer
413 * @returns false if it failed to read a packet
414 *
415 */
416int trace_read_packet(struct libtrace_t *libtrace, struct libtrace_packet_t *packet) {
417
418        if (!libtrace) {
419                fprintf(stderr,"Oi! You called trace_read_packet() with a NULL libtrace parameter!\n");
420        }
421        assert(libtrace);
422        assert(packet);
423     
424        /* Store the trace we are reading from into the packet opaque
425         * structure */
426        packet->trace = libtrace;
427
428        if (libtrace->format->read_packet) {
429                return libtrace->format->read_packet(libtrace,packet);
430        }
431}
432
433/** Writes a packet to the specified output
434 *
435 * @param libtrace      describes the output format, destination, etc.
436 * @param packet        the packet to be written out
437 * @returns the number of bytes written, -1 if write failed
438 *
439 * @author Shane Alcock
440 * */
441int trace_write_packet(struct libtrace_out_t *libtrace, struct libtrace_packet_t *packet) {
442        assert(libtrace);
443        assert(packet); 
444
445        if (libtrace->format->write_packet) {
446                return libtrace->format->write_packet(libtrace, packet);
447        }
448
449}
450
451/** get a pointer to the link layer
452 * @param packet        a pointer to a libtrace_packet structure
453 *
454 * @returns a pointer to the link layer, or NULL if there is no link layer
455 * you should call trace_get_link_type() to find out what type of link layer this is
456 */
457void *trace_get_link(const struct libtrace_packet_t *packet) {
458        const void *ethptr = 0;
459       
460        if (packet->trace->format->get_link) {
461                ethptr = packet->trace->format->get_link(packet);
462        }
463        return (void *)ethptr;
464}
465
466/** get a pointer to the IP header (if any)
467 * @param packet        a pointer to a libtrace_packet structure
468 *
469 * @returns a pointer to the IP header, or NULL if there is not an IP packet
470 */
471struct libtrace_ip *trace_get_ip(const struct libtrace_packet_t *packet) {
472        struct libtrace_ip *ipptr = 0;
473
474        switch(trace_get_link_type(packet)) {
475                case TRACE_TYPE_80211:
476                        { 
477                               
478                                struct ieee_802_11_header *wifi = trace_get_link(packet);       
479                                if (!wifi) {
480                                        ipptr = NULL;
481                                        break;
482                                }
483
484                                // Data packet?
485                                if (wifi->type != 2) {
486                                        ipptr = NULL;
487                                }
488                                else {
489                                        struct ieee_802_11_payload *eth = (void*)wifi->data;
490                                        if (eth->type != 0x0008) {
491                                                ipptr=NULL;
492                                        } else {
493                                                ipptr=(void*)eth->data;
494                                        }
495                                }
496                        }
497                        break;
498                case TRACE_TYPE_ETH:
499                        {
500                                struct ether_header *eth = 
501                                        trace_get_link(packet);
502                                if (!eth) {
503                                        ipptr = NULL;
504                                        break;
505                                }
506                                if (ntohs(eth->ether_type)!=0x0800) {
507                                        ipptr = NULL;
508                                }
509                                else {
510                                        ipptr = ((void *)eth) + 14;
511                                }
512                                break;
513                        }
514                case TRACE_TYPE_NONE:
515                        ipptr = trace_get_link(packet);
516                        break;
517                case TRACE_TYPE_LINUX_SLL:
518                        {
519                                struct trace_sll_header_t *sll;
520
521                                sll = trace_get_link(packet);
522                                if (!sll) {
523                                        ipptr = NULL;
524                                        break;
525                                }
526                                if (ntohs(sll->protocol)!=0x0800) {
527                                        ipptr = NULL;
528                                }
529                                else {
530                                        ipptr = ((void*)sll)+sizeof(*sll);
531                                }
532                        }
533                        break;
534                case TRACE_TYPE_PFLOG:
535                        {
536                                struct trace_pflog_header_t *pflog;
537                                pflog = trace_get_link(packet);
538                                if (!pflog) {
539                                        ipptr = NULL;
540                                        break;
541                                }
542                                if (pflog->af != AF_INET) {
543                                        ipptr = NULL;
544                                } else {
545                                        ipptr = ((void*)pflog)+sizeof(*pflog);
546                                }
547                        }
548                        break;
549                case TRACE_TYPE_ATM:
550                        {
551                                struct atm_rec *atm = 
552                                        trace_get_link(packet);
553                                // TODO: Find out what ATM does, and return
554                                //       NULL for non IP data
555                                //       Presumably it uses the normal stuff
556                                if (!atm) {
557                                        ipptr = NULL;
558                                        break;
559                                }
560                                ipptr =  (void*)&atm->pload;
561                                break;
562                        }
563                default:
564                        fprintf(stderr,"Don't understand link layer type %i in trace_get_ip()\n",
565                                trace_get_link_type(packet));
566                        ipptr=NULL;
567                        break;
568        }
569
570        return ipptr;
571}
572
573#define SW_IP_OFFMASK 0xff1f
574
575/** get a pointer to the TCP header (if any)
576 * @param packet        a pointer to a libtrace_packet structure
577 *
578 * @returns a pointer to the TCP header, or NULL if there is not a TCP packet
579 */
580struct libtrace_tcp *trace_get_tcp(const struct libtrace_packet_t *packet) {
581        struct libtrace_tcp *tcpptr = 0;
582        struct libtrace_ip *ipptr = 0;
583
584        if(!(ipptr = trace_get_ip(packet))) {
585                return 0;
586        }
587        if ((ipptr->ip_p == 6) && ((ipptr->ip_off & SW_IP_OFFMASK) == 0))  {
588                tcpptr = (struct libtrace_tcp *)((ptrdiff_t)ipptr + (ipptr->ip_hl * 4));
589        }
590        return tcpptr;
591}
592
593/** get a pointer to the TCP header (if any) given a pointer to the IP header
594 * @param ip            The IP header
595 * @param[out] skipped  An output variable of the number of bytes skipped
596 *
597 * @returns a pointer to the TCP header, or NULL if this is not a TCP packet
598 *
599 * Skipped can be NULL, in which case it will be ignored by the program.
600 */
601struct libtrace_tcp *get_tcp_from_ip(const struct libtrace_ip *ip, int *skipped)
602{
603#define SW_IP_OFFMASK 0xff1f
604        struct libtrace_tcp *tcpptr = 0;
605
606        if ((ip->ip_p == 6) && ((ip->ip_off & SW_IP_OFFMASK) == 0))  {
607                tcpptr = (struct libtrace_tcp *)((ptrdiff_t)ip+ (ip->ip_hl * 4));
608        }
609
610        if (skipped)
611                *skipped=(ip->ip_hl*4);
612
613        return tcpptr;
614}
615
616/** get a pointer to the UDP header (if any)
617 * @param packet        a pointer to a libtrace_packet structure
618 *
619 * @returns a pointer to the UDP header, or NULL if this is not a UDP packet
620 */
621struct libtrace_udp *trace_get_udp(const struct libtrace_packet_t *packet) {
622        struct libtrace_udp *udpptr = 0;
623        struct libtrace_ip *ipptr = 0;
624       
625        if(!(ipptr = trace_get_ip(packet))) {
626                return 0;
627        }
628        if ((ipptr->ip_p == 17) && ((ipptr->ip_off & SW_IP_OFFMASK) == 0)) {
629                udpptr = (struct libtrace_udp *)((ptrdiff_t)ipptr + (ipptr->ip_hl * 4));
630        }
631
632        return udpptr;
633}
634
635/** get a pointer to the UDP header (if any) given a pointer to the IP header
636 * @param ip            The IP header
637 * @param[out] skipped  An output variable of the number of bytes skipped
638 *
639 * @returns a pointer to the UDP header, or NULL if this is not a UDP packet
640 *
641 * Skipped can be NULL, in which case it will be ignored by the program.
642 */
643struct libtrace_udp *get_udp_from_ip(const struct libtrace_ip *ip, int *skipped)
644{
645        struct libtrace_udp *udpptr = 0;
646
647        if ((ip->ip_p == 6) && ((ip->ip_off & SW_IP_OFFMASK) == 0))  {
648                udpptr = (struct libtrace_udp *)((ptrdiff_t)ip+ (ip->ip_hl * 4));
649        }
650
651        if (skipped)
652                *skipped=(ip->ip_hl*4);
653
654        return udpptr;
655}
656
657
658/** get a pointer to the ICMP header (if any)
659 * @param packet        a pointer to a libtrace_packet structure
660 *
661 * @returns a pointer to the ICMP header, or NULL if this is not a ICMP packet
662 */
663struct libtrace_icmp *trace_get_icmp(const struct libtrace_packet_t *packet) {
664        struct libtrace_icmp *icmpptr = 0;
665        struct libtrace_ip *ipptr = 0;
666       
667        if(!(ipptr = trace_get_ip(packet))) {
668                return 0;
669        }
670        if ((ipptr->ip_p == 1)&& ((ipptr->ip_off & SW_IP_OFFMASK) == 0 )){
671                icmpptr = (struct libtrace_icmp *)((ptrdiff_t)ipptr + (ipptr->ip_hl * 4));
672        }
673        return icmpptr;
674}
675
676/** get a pointer to the ICMP header (if any) given a pointer to the IP header
677 * @param ip            The IP header
678 * @param[out] skipped  An output variable of the number of bytes skipped
679 *
680 * @returns a pointer to the ICMP header, or NULL if this is not a ICMP packet
681 *
682 * Skipped can be NULL, in which case it will be ignored by the program.
683 */
684struct libtrace_icmp *get_icmp_from_ip(struct libtrace_ip *ip, int *skipped)
685{
686        struct libtrace_icmp *icmpptr = 0;
687
688        if ((ip->ip_p == 6) && ((ip->ip_off & SW_IP_OFFMASK) == 0))  {
689                icmpptr = (struct libtrace_icmp *)((ptrdiff_t)ip+ (ip->ip_hl * 4));
690        }
691
692        if (skipped)
693                *skipped=(ip->ip_hl*4);
694
695        return icmpptr;
696}
697/** parse an ip or tcp option
698 * @param[in,out] ptr   the pointer to the current option
699 * @param[in,out] len   the length of the remaining buffer
700 * @param[out] type     the type of the option
701 * @param[out] optlen   the length of the option
702 * @param[out] data     the data of the option
703 *
704 * @returns bool true if there is another option (and the fields are filled in)
705 *               or false if this was the last option.
706 *
707 * This updates ptr to point to the next option after this one, and updates
708 * len to be the number of bytes remaining in the options area.  Type is updated
709 * to be the code of this option, and data points to the data of this option,
710 * with optlen saying how many bytes there are.
711 *
712 * @note Beware of fragmented packets.
713 * @author Perry Lorier
714 */
715int trace_get_next_option(unsigned char **ptr,int *len,
716                        unsigned char *type,
717                        unsigned char *optlen,
718                        unsigned char **data)
719{
720        if (*len<=0)
721                return 0;
722        *type=**ptr;
723        switch(*type) {
724                case 0: /* End of options */
725                        return 0;
726                case 1: /* Pad */
727                        (*ptr)++;
728                        (*len)--;
729                        return 1;
730                default:
731                        *optlen = *(*ptr+1);
732                        if (*optlen<2)
733                                return 0; // I have no idea wtf is going on
734                                          // with these packets
735                        (*len)-=*optlen;
736                        (*data)=(*ptr+2);
737                        (*ptr)+=*optlen;
738                        if (*len<0)
739                                return 0;
740                        return 1;
741        }
742        assert(0);
743}
744
745
746/** Get the current time in DAG time format
747 * @param packet        a pointer to a libtrace_packet structure
748 * @returns a 64 bit timestamp in DAG ERF format (upper 32 bits are the seconds
749 * past 1970-01-01, the lower 32bits are partial seconds)
750 * @author Daniel Lawson
751 */ 
752uint64_t trace_get_erf_timestamp(const struct libtrace_packet_t *packet) {
753        uint64_t timestamp = 0;
754        struct timeval ts;
755
756        if (packet->trace->format->get_erf_timestamp) {
757                timestamp = packet->trace->format->get_erf_timestamp(packet);
758        } else if (packet->trace->format->get_timeval) {
759                ts = packet->trace->format->get_timeval(packet);
760                timestamp = ((((uint64_t)ts.tv_sec) << 32) + \
761                                (((uint64_t)ts.tv_usec * UINT_MAX)/1000000));
762        } 
763        return timestamp;
764}
765
766/** Get the current time in struct timeval
767 * @param packet        a pointer to a libtrace_packet structure
768 *
769 * @returns time that this packet was seen in a struct timeval
770 * @author Daniel Lawson
771 * @author Perry Lorier
772 */ 
773struct timeval trace_get_timeval(const struct libtrace_packet_t *packet) {
774        struct timeval tv;
775        uint64_t ts = 0;
776
777        if (packet->trace->format->get_timeval) {
778                tv = packet->trace->format->get_timeval(packet);
779        } else if (packet->trace->format->get_erf_timestamp) {
780                ts = packet->trace->format->get_erf_timestamp(packet);
781#if __BYTE_ORDER == __BIG_ENDIAN
782                tv.tv_sec = ts & 0xFFFFFFFF;
783#elif __BYTE_ORDER == __LITTLE_ENDIAN
784                tv.tv_sec = ts >> 32;
785#else
786#error "What on earth are you running this on?"
787#endif
788                ts = (1000000 * (ts & 0xffffffffULL));
789                ts += (ts & 0x80000000ULL) << 1;
790                tv.tv_usec = ts >> 32;
791                if (tv.tv_usec >= 1000000) {
792                        tv.tv_usec -= 1000000;
793                        tv.tv_sec += 1;
794                }
795        }
796
797        return tv;
798}
799
800/** Get the current time in floating point seconds
801 * @param packet        a pointer to a libtrace_packet structure
802 * @returns time that this packet was seen in 64bit floating point seconds
803 * @author Perry Lorier
804 */ 
805double trace_get_seconds(const struct libtrace_packet_t *packet) {
806        double seconds;
807        uint64_t ts;
808       
809        if (packet->trace->format->get_seconds) {
810                seconds = packet->trace->format->get_seconds(packet);
811        } else if (packet->trace->format->get_erf_timestamp) {
812                ts = packet->trace->format->get_erf_timestamp(packet);
813                seconds =  (ts>>32) + ((ts & UINT_MAX)*1.0 / UINT_MAX);
814        } 
815        return seconds;
816}
817
818/** Get the size of the packet in the trace
819 * @param packet the packet opaque pointer
820 * @returns the size of the packet in the trace
821 * @author Perry Lorier
822 * @note Due to this being a header capture, or anonymisation, this may not
823 * be the same size as the original packet.  See trace_get_wire_length() for the
824 * original size of the packet.
825 * @note This can (and often is) different for different packets in a trace!
826 * @par
827 *  This is sometimes called the "snaplen".
828 */ 
829int trace_get_capture_length(const struct libtrace_packet_t *packet) {
830
831        if (packet->trace->format->get_capture_length) {
832                return packet->trace->format->get_capture_length(packet);
833        }
834        return -1;
835}
836       
837/** Get the size of the packet as it was seen on the wire.
838 * @param packet        a pointer to a libtrace_packet structure
839 *
840 * @returns the size of the packet as it was on the wire.
841 * @author Perry Lorier
842 * @author Daniel Lawson
843 * @note Due to the trace being a header capture, or anonymisation this may
844 * not be the same as the Capture Len.
845 */ 
846int trace_get_wire_length(const struct libtrace_packet_t *packet){
847        if (packet->trace->format->get_wire_length) {
848                return packet->trace->format->get_wire_length(packet);
849        }
850        return -1;
851
852}
853
854/** Get the type of the link layer
855 * @param packet        a pointer to a libtrace_packet structure
856 * @returns libtrace_linktype_t
857 * @author Perry Lorier
858 * @author Daniel Lawson
859 */
860libtrace_linktype_t trace_get_link_type(const struct libtrace_packet_t *packet ) {
861        if (packet->trace->format->get_link_type) {
862                return packet->trace->format->get_link_type(packet);
863        }
864        return -1;
865}
866
867/** Get the source MAC addres
868 * @param packet        a pointer to a libtrace_packet structure
869 * @returns a pointer to the source mac, (or NULL if there is no source MAC)
870 * @author Perry Lorier
871 */
872uint8_t *trace_get_source_mac(const struct libtrace_packet_t *packet) {
873        void *link = trace_get_link(packet);
874        struct ieee_802_11_header *wifi = link;
875        struct ether_header *ethptr = link;
876        if (!link)
877                return NULL;
878        switch (trace_get_link_type(packet)) {
879                case TRACE_TYPE_80211:
880                        return (uint8_t*)&wifi->mac2;
881                case TRACE_TYPE_ETH:
882                        return (uint8_t*)&ethptr->ether_shost;
883                default:
884                        fprintf(stderr,"Not implemented\n");
885                        assert(0);
886        }
887}
888
889/** Get the destination MAC addres
890 * @param packet a libtrace_packet pointer
891 * @returns a pointer to the destination mac, (or NULL if there is no
892 * destination MAC)
893 * @author Perry Lorier
894 */
895uint8_t *trace_get_destination_mac(const struct libtrace_packet_t *packet) {
896        void *link = trace_get_link(packet);
897        struct ieee_802_11_header *wifi = link;
898        struct ether_header *ethptr = link;
899        if (!link)
900                return NULL;
901        switch (trace_get_link_type(packet)) {
902                case TRACE_TYPE_80211:
903                        return (uint8_t*)&wifi->mac1;
904                case TRACE_TYPE_ETH:
905                        return (uint8_t*)&ethptr->ether_dhost;
906                default:
907                        fprintf(stderr,"Not implemented\n");
908                        assert(0);
909        }
910}
911
912
913/** process a libtrace event
914 * @param trace the libtrace opaque pointer
915 * @param packet the libtrace_packet opaque pointer
916 * @returns
917 *  TRACE_EVENT_IOWAIT  Waiting on I/O on fd
918 *  TRACE_EVENT_SLEEP   Next event in seconds
919 *  TRACE_EVENT_PACKET  Packet arrived in buffer with size size
920 *  TRACE_EVENT_TERMINATE Trace terminated (perhaps with an error condition)
921 * FIXME currently keeps a copy of the packet inside the trace pointer,
922 * which in turn is stored inside the new packet object...
923 * @author Perry Lorier
924 */
925struct libtrace_eventobj_t trace_event(struct libtrace_t *trace, 
926                struct libtrace_packet_t *packet) {
927        struct libtrace_eventobj_t event;
928
929        if (!trace) {
930                fprintf(stderr,"You called trace_event() with a NULL trace object!\n");
931        }
932        assert(trace);
933        assert(packet);
934
935        /* Store the trace we are reading from into the packet opaque
936         * structure */
937        packet->trace = trace;
938
939        /* Is there a packet ready? */
940        switch (trace->sourcetype) {
941#if HAVE_PCAP
942                case INTERFACE:
943                        {
944                                int data;
945                                event.fd = pcap_fileno(trace->input.pcap);
946                                if(ioctl(event.fd,FIONREAD,&data)==-1){
947                                        perror("ioctl(FIONREAD)");
948                                }
949                                if (data>0) {
950                                        event.size = trace_read_packet(trace,packet);
951                                        event.type = TRACE_EVENT_PACKET;
952                                        return event;
953                                }
954                                event.type = TRACE_EVENT_IOWAIT;
955                                return event;
956                        }
957#endif
958                case SOCKET:
959                case DEVICE:
960                case RT:
961                        {
962                                int data;
963                                event.fd = trace->input.fd;
964                                if(ioctl(event.fd,FIONREAD,&data)==-1){
965                                        perror("ioctl(FIONREAD)");
966                                }
967                                if (data>0) {
968                                        event.size = trace_read_packet(trace,packet);
969                                        event.type = TRACE_EVENT_PACKET;
970                                        return event;
971                                }
972                                event.type = TRACE_EVENT_IOWAIT;
973                                return event;
974                        }
975                case STDIN:
976                case TRACE:
977                        {
978                                double ts;
979                                double now;
980                                struct timeval stv;
981                                /* "Prime" the pump */
982                                if (!trace->packet.buffer) {
983                                        trace->packet.buffer = malloc(4096);
984                                        trace->packet.size=
985                                                trace_read_packet(trace,packet);
986                                        event.size = trace->packet.size;
987                                        if (trace->packet.size > 0 ) {
988                                                memcpy(trace->packet.buffer,packet->buffer,trace->packet.size);
989                                        } else {
990                                                // return here, the test for event.size will sort out the error
991                                                event.type = TRACE_EVENT_PACKET;
992                                                return event;
993                                        }
994                                }
995
996                                ts=trace_get_seconds(packet);
997                                if (trace->tdelta!=0) {
998                                        // Get the adjusted current time
999                                        gettimeofday(&stv, NULL);
1000                                        now = stv.tv_sec + ((double)stv.tv_usec / 1000000.0);
1001                                        now -= trace->tdelta; // adjust for trace delta
1002                                       
1003                                       
1004                                        // if the trace timestamp is still in the future,
1005                                        // return a SLEEP event, otherwise fire the packet
1006                                        if (ts > now) {
1007                                                event.seconds = ts - trace->trace_last_ts;
1008                                                event.type = TRACE_EVENT_SLEEP;
1009                                                return event;
1010                                        }
1011                                } else {
1012                                        gettimeofday(&stv, NULL);
1013                                        // work out the difference between the start of trace replay,
1014                                        // and the first packet in the trace
1015                                        trace->tdelta = stv.tv_sec + ((double)stv.tv_usec / 1000000.0);
1016                                        trace->tdelta -= ts;
1017
1018                                }
1019                               
1020                                        // This is the first packet, so just fire away.
1021                                packet->size = trace->packet.size;
1022                                memcpy(packet->buffer,trace->packet.buffer,trace->packet.size);
1023
1024                                free(trace->packet.buffer);
1025                                trace->packet.buffer = 0;
1026                                event.type = TRACE_EVENT_PACKET;
1027                               
1028                                trace->trace_last_ts = ts;
1029
1030                                return event;
1031                        }
1032                default:
1033                        assert(0);
1034        }
1035        assert(0);
1036}
1037
1038/** setup a BPF filter
1039 * @param filterstring a char * containing the bpf filter string
1040 * @returns opaque pointer pointer to a libtrace_filter_t object
1041 * @author Daniel Lawson
1042 */
1043struct libtrace_filter_t *trace_bpf_setfilter(const char *filterstring) {
1044#if HAVE_BPF
1045        struct libtrace_filter_t *filter = malloc(sizeof(struct libtrace_filter_t));
1046        filter->filterstring = strdup(filterstring);
1047        filter->filter = 0;
1048        return filter;
1049#else
1050        fprintf(stderr,"This version of libtrace does not have bpf filter support\n");
1051        return 0;
1052#endif
1053}
1054
1055/** apply a BPF filter
1056 * @param filter the filter opaque pointer
1057 * @param packet the packet opaque pointer
1058 * @returns 0 if the filter fails, 1 if it succeeds
1059 * @author Daniel Lawson
1060 */
1061int trace_bpf_filter(struct libtrace_filter_t *filter,
1062                        const struct libtrace_packet_t *packet) {
1063#if HAVE_BPF
1064        void *linkptr = 0;
1065        int clen = 0;
1066        assert(filter);
1067        assert(packet);
1068        linkptr = trace_get_link(packet);
1069        if (!linkptr) {
1070                return 0;
1071        }
1072       
1073        clen = trace_get_capture_length(packet);
1074       
1075
1076        if (filter->filterstring && ! filter->filter) {
1077                pcap_t *pcap;
1078                struct bpf_program bpfprog;
1079
1080                switch (trace_get_link_type(packet)) {
1081                        case TRACE_TYPE_ETH:
1082                                pcap = (pcap_t *)pcap_open_dead(DLT_EN10MB, 1500);
1083                                break;
1084#ifdef DLT_LINUX_SLL
1085                        case TRACE_TYPE_LINUX_SLL:
1086                                pcap = (pcap_t *)pcap_open_dead(DLT_LINUX_SLL, 1500);
1087                                break;
1088#endif
1089#ifdef DLT_PFLOG
1090                        case TRACE_TYPE_PFLOG:
1091                                pcap = (pcap_t *)pcap_open_dead(DLT_PFLOG, 1500);
1092                                break;
1093#endif
1094                        default:
1095                                printf("only works for ETH and LINUX_SLL (ppp) at the moment\n");
1096                                assert(0);
1097                }               
1098
1099                // build filter
1100                if (pcap_compile( pcap, &bpfprog, filter->filterstring, 1, 0)) {
1101                        printf("bpf compilation error: %s: %s\n", 
1102                                pcap_geterr(pcap),filter->filterstring);
1103                        assert(0);
1104                }
1105                pcap_close(pcap);
1106                filter->filter = bpfprog.bf_insns;     
1107        }
1108
1109        assert(filter->filter);
1110        return bpf_filter(filter->filter, linkptr, clen, clen);
1111#else
1112        fprintf(stderr,"This version of libtrace does not have bpf filter support\n");
1113        return 0;
1114#endif
1115}
1116
1117/** Set the direction flag, if it has one
1118 * @param packet the packet opaque pointer
1119 * @param direction the new direction (0,1,2,3)
1120 * @returns a signed value containing the direction flag, or -1 if this is not supported
1121 * @author Daniel Lawson
1122 */
1123int8_t trace_set_direction(struct libtrace_packet_t *packet, int8_t direction) {
1124        assert(packet);
1125        if (packet->trace->format->set_direction) {
1126                return packet->trace->format->set_direction(packet,direction);
1127        }
1128        return -1;
1129}
1130
1131/** Get the direction flag, if it has one
1132 * @param packet a pointer to a libtrace_packet structure
1133 * @returns a signed value containing the direction flag, or -1 if this is not supported
1134 * The direction is defined as 0 for packets originating locally (ie, outbound)
1135 * and 1 for packets originating remotely (ie, inbound).
1136 * Other values are possible, which might be overloaded to mean special things
1137 * for a special trace.
1138 * @author Daniel Lawson
1139 */
1140int8_t trace_get_direction(const struct libtrace_packet_t *packet) {
1141        assert(packet);
1142        if (packet->trace->format->get_direction) {
1143                return packet->trace->format->get_direction(packet);
1144        }
1145        return -1;
1146}
1147
1148struct ports_t {
1149        uint16_t src;
1150        uint16_t dst;
1151};
1152
1153/* Return the client port
1154 */
1155uint16_t trace_get_source_port(const struct libtrace_packet_t *packet)
1156{
1157        struct libtrace_ip *ip = trace_get_ip(packet);
1158        struct ports_t *port;
1159        if (6 != ip->ip_p
1160          && 17 != ip->ip_p)
1161                return 0;
1162        if (0 != (ip->ip_off & SW_IP_OFFMASK))
1163                return 0;
1164
1165        port = (struct ports_t *)((ptrdiff_t)ip + (ip->ip_hl * 4));
1166
1167        return htons(port->src);
1168}
1169
1170/* Same as get_source_port except use the destination port */
1171uint16_t trace_get_destination_port(const struct libtrace_packet_t *packet)
1172{
1173        struct libtrace_ip *ip = trace_get_ip(packet);
1174        struct ports_t *port;
1175
1176        if (6 != ip->ip_p
1177          && 17 != ip->ip_p)
1178                return 0;
1179
1180        if (0 != (ip->ip_off & SW_IP_OFFMASK))
1181                return 0;
1182
1183        port = (struct ports_t *)((ptrdiff_t)ip + (ip->ip_hl * 4));
1184
1185        return htons(port->dst);
1186}
1187
1188#define ROOT_SERVER(x) ((x) < 512)
1189#define ROOT_CLIENT(x) ((512 <= (x)) && ((x) < 1024))
1190#define NONROOT_SERVER(x) ((x) >= 5000)
1191#define NONROOT_CLIENT(x) ((1024 <= (x)) && ((x) < 5000))
1192#define DYNAMIC(x) ((49152 < (x)) && ((x) < 65535))
1193#define SERVER(x) ROOT_SERVER(x) || NONROOT_SERVER(x)
1194#define CLIENT(x) ROOT_CLIENT(x) || NONROOT_CLIENT(x)
1195
1196/* Attempt to deduce the 'server' port
1197 * @param protocol the IP protocol (eg, 6 or 17 for TCP or UDP)
1198 * @param source the TCP or UDP source port
1199 * @param dest the TCP or UDP destination port
1200 * @returns a hint as to which port is the server port
1201 * @author Daniel Lawson
1202 */
1203int8_t trace_get_server_port(uint8_t protocol, uint16_t source, uint16_t dest) {
1204        /*
1205         * * If the ports are equal, return DEST
1206         * * Check for well-known ports in the given protocol
1207         * * Root server ports: 0 - 511
1208         * * Root client ports: 512 - 1023
1209         * * non-root client ports: 1024 - 4999
1210         * * non-root server ports: 5000+
1211         * * Check for static ranges: 1024 - 49151
1212         * * Check for dynamic ranges: 49152 - 65535
1213         * * flip a coin.
1214         */
1215
1216        uint16_t server, client;
1217
1218        /* equal */
1219        if (source == client)
1220                return USE_DEST;
1221
1222        /* root server port, 0 - 511 */
1223        if (ROOT_SERVER(source) && ROOT_SERVER(dest)) {
1224                if (source < dest)
1225                        return USE_SOURCE;
1226                return USE_DEST;
1227        }
1228
1229        if (ROOT_SERVER(source) && !ROOT_SERVER(dest))
1230                return USE_SOURCE;
1231        if (!ROOT_SERVER(source) && ROOT_SERVER(dest))
1232                return USE_DEST;
1233
1234        /* non-root server */
1235        if (NONROOT_SERVER(source) && NONROOT_SERVER(dest)) {
1236                if (source < dest)
1237                        return USE_SOURCE;
1238                return USE_DEST;
1239        }
1240        if (NONROOT_SERVER(source) && !NONROOT_SERVER(dest))
1241                return USE_SOURCE;
1242        if (!NONROOT_SERVER(source) && NONROOT_SERVER(dest))
1243                return USE_DEST;
1244
1245        /* root client */
1246        if (ROOT_CLIENT(source) && ROOT_CLIENT(dest)) {
1247                if (source < dest)
1248                        return USE_SOURCE;
1249                return USE_DEST;
1250        }
1251        if (ROOT_CLIENT(source) && !ROOT_CLIENT(dest)) {
1252                /* prefer root-client over nonroot-client */
1253                if (NONROOT_CLIENT(dest))
1254                        return USE_SOURCE;
1255                return USE_DEST;
1256        }
1257        if (!ROOT_CLIENT(source) && ROOT_CLIENT(dest)) {
1258                /* prefer root-client over nonroot-client */
1259                if (NONROOT_CLIENT(source))
1260                        return USE_DEST;
1261                return USE_SOURCE;
1262        }
1263       
1264        /* nonroot client */
1265        if (NONROOT_CLIENT(source) && NONROOT_CLIENT(dest)) {
1266                if (source < dest) 
1267                        return USE_SOURCE;
1268                return USE_DEST;
1269        }
1270        if (NONROOT_CLIENT(source) && !NONROOT_CLIENT(dest))
1271                return USE_DEST;
1272        if (!NONROOT_CLIENT(source) && NONROOT_CLIENT(dest))
1273                return USE_SOURCE;
1274
1275        /* dynamic range */
1276        if (DYNAMIC(source) && DYNAMIC(dest))
1277                if (source < dest)
1278                        return USE_SOURCE;
1279                return USE_DEST;
1280        if (DYNAMIC(source) && !DYNAMIC(dest))
1281                return USE_DEST;
1282        if (!DYNAMIC(source) && DYNAMIC(dest))
1283                return USE_SOURCE;
1284        /*
1285        if (SERVER(source) && CLIENT(dest))
1286                return USE_SOURCE;
1287       
1288        if (SERVER(dest) && CLIENT(source))
1289                return USE_DEST;
1290        if (ROOT_SERVER(source) && !ROOT_SERVER(dest))
1291                return USE_SOURCE;
1292        if (ROOT_SERVER(dest) && !ROOT_SERVER(source))
1293                return USE_DEST;
1294        */
1295        // failing that test...
1296        if (source < dest) {
1297                return USE_SOURCE;
1298        } 
1299        return USE_DEST;
1300       
1301}
1302
1303/** Truncate the packet at the suggested length
1304 * @param packet        the packet opaque pointer
1305 * @param size          the new length of the packet
1306 * @returns the new length of the packet, or the original length of the
1307 * packet if unchanged
1308 * NOTE: len refers to the network-level payload of the packet, and not
1309 * any capture headers included as well. For example, to truncate a packet
1310 * after the IP header, set scan to sizeof(ethernet_header) + sizeof(ip_header)
1311 * @author Daniel Lawson
1312 */
1313size_t trace_set_capture_length(struct libtrace_packet_t *packet, size_t size) {
1314        assert(packet);
1315
1316        if (size > packet->size) {
1317                // can't make a packet larger
1318                return packet->size;
1319        }
1320        if (packet->trace->format->truncate_packet) {
1321                return packet->trace->format->truncate_packet(packet,size);
1322        }
1323        return -1;
1324}
1325
Note: See TracBrowser for help on using the repository browser.