Diff for /libaitio/src/bpf.c between versions 1.1.2.15 and 1.1.2.18

version 1.1.2.15, 2013/06/26 12:30:17 version 1.1.2.18, 2013/06/26 15:31:17
Line 154  io_etherOpen(const char *csIface, int flags, int whdr, Line 154  io_etherOpen(const char *csIface, int flags, int whdr,
                         close(eth);                          close(eth);
                         return -1;                          return -1;
                 }                  }
                if (ioctl(eth, BIOCSETZBUF, (struct bpf_zbuf*) *zcbuf) == -1) {                if (ioctl(eth, BIOCSETZBUF, *zcbuf) == -1) {
                         LOGERR;                          LOGERR;
                         io_etherClose(eth, zcbuf);                          io_etherClose(eth, zcbuf);
                         return -1;                          return -1;
Line 219  io_etherSend(int eth, const void *buf, size_t buflen) Line 219  io_etherSend(int eth, const void *buf, size_t buflen)
   
 #ifdef __FreeBSD__  #ifdef __FreeBSD__
 static inline void  static inline void
ackZCbuf(struct bpf_zbuf_header * __restrict bzh)ackZCbuf(struct bpf_zbuf_header *bzh)
 {  {
         atomic_store_rel_int(&bzh->bzh_user_gen, bzh->bzh_kernel_gen);          atomic_store_rel_int(&bzh->bzh_user_gen, bzh->bzh_kernel_gen);
 }  }
   
 static inline int  static inline int
chkZCbuf(struct bpf_zbuf_header * __restrict bzh)chkZCbuf(struct bpf_zbuf_header *bzh)
 {  {
         /* return true if userspace owns buffer, and false otherwise. */          /* return true if userspace owns buffer, and false otherwise. */
         return (bzh->bzh_user_gen != atomic_load_acq_int(&bzh->bzh_kernel_gen));          return (bzh->bzh_user_gen != atomic_load_acq_int(&bzh->bzh_kernel_gen));
 }  }
   
 static inline ssize_t  static inline ssize_t
nextZCbuf(void ** __restrict zcache, struct bpf_zbuf * __restrict zbufnextZCbuf(int eth, void ** __restrict zcache, struct bpf_zbuf * __restrict zbuf)
                const void * __restrict buf) 
 {  {
        ssize_t rlen = -1;        ssize_t rlen = 0;
         struct bpf_zbuf_header *bzh;          struct bpf_zbuf_header *bzh;
   
         if (!*zcache || *zcache == zbuf->bz_bufb) {          if (!*zcache || *zcache == zbuf->bz_bufb) {
                 bzh = (struct bpf_zbuf_header *) zbuf->bz_bufa;                  bzh = (struct bpf_zbuf_header *) zbuf->bz_bufa;
                 if (chkZCbuf(bzh)) {                  if (chkZCbuf(bzh)) {
                         rlen = atomic_load_acq_int(&bzh->bzh_kernel_len);  
                         *zcache = zbuf->bz_bufa;                          *zcache = zbuf->bz_bufa;
                        if (buf)                        rlen = atomic_load_acq_int(&bzh->bzh_kernel_len);
                                buf = ((caddr_t) *zcache) + sizeof(struct bpf_zbuf_header);                }
                        ackZCbuf(bzh); 
                } else 
                        io_SetErr(EAGAIN, "kernel owns the buffer A"); 
         } else if (*zcache == zbuf->bz_bufa) {          } else if (*zcache == zbuf->bz_bufa) {
                 bzh = (struct bpf_zbuf_header *) zbuf->bz_bufb;                  bzh = (struct bpf_zbuf_header *) zbuf->bz_bufb;
                 if (chkZCbuf(bzh)) {                  if (chkZCbuf(bzh)) {
                         rlen = atomic_load_acq_int(&bzh->bzh_kernel_len);  
                         *zcache = zbuf->bz_bufb;                          *zcache = zbuf->bz_bufb;
                        if (buf)                        rlen = atomic_load_acq_int(&bzh->bzh_kernel_len);
                                buf = ((caddr_t) *zcache) + sizeof(struct bpf_zbuf_header);                }
                        ackZCbuf(bzh); 
                } else 
                        io_SetErr(EAGAIN, "kernel owns the buffer B"); 
         }          }
   
         return rlen;          return rlen;
Line 278  io_etherRecv(int eth, void * __restrict buf, size_t bu Line 269  io_etherRecv(int eth, void * __restrict buf, size_t bu
 {  {
         ssize_t rlen = 0;          ssize_t rlen = 0;
         void *zcache = NULL;          void *zcache = NULL;
   #ifdef __FreeBSD__
           struct bpf_zbuf bz;
           struct bpf_zbuf_header *bzh;
   #else
           if (zcbuf) {
                   io_SetErr(ENOTSUP, "bpf zero copy buffer mode is not supported");
                   return -1;
           }
   #endif
   
         if (!buf || !buflen) {          if (!buf || !buflen) {
                 io_SetErr(EINVAL, "invalid arguments");                  io_SetErr(EINVAL, "invalid arguments");
Line 290  io_etherRecv(int eth, void * __restrict buf, size_t bu Line 290  io_etherRecv(int eth, void * __restrict buf, size_t bu
                         LOGERR;                          LOGERR;
         } else {          } else {
 #ifdef __FreeBSD__  #ifdef __FreeBSD__
                rlen = nextZCbuf(&zcache, (struct bpf_zbuf*) zcbuf, buf);                do {
                         rlen = nextZCbuf(eth, &zcache, (struct bpf_zbuf*) zcbuf);
                         if (rlen > 0) {
                                 bzh = (struct bpf_zbuf_header*) zcache;
                                 memcpy(buf, zcache + sizeof(struct bpf_zbuf_header), 
                                                 MIN(buflen, rlen));
                         }
                         if (!rlen && !ioctl(eth, BIOCROTZBUF, &bz))
                                 continue;
                 } while (0);
 #else  #else
                   rlen = -1;
                 io_SetErr(ENOTSUP, "bpf zero copy buffer mode is not supported");                  io_SetErr(ENOTSUP, "bpf zero copy buffer mode is not supported");
 #endif  #endif
         }          }

Removed from v.1.1.2.15  
changed lines
  Added in v.1.1.2.18


FreeBSD-CVSweb <freebsd-cvsweb@FreeBSD.org>