Whamcloud - gitweb
LU-12678 lnet: Fix some out-of-date comments.
[fs/lustre-release.git] / lnet / klnds / socklnd / socklnd.h
index 3c3c20a..abd733b 100644 (file)
@@ -108,6 +108,7 @@ struct ksock_sched {
 #define KSOCK_THREAD_SID(id)           ((id) & ((1UL << KSOCK_CPT_SHIFT) - 1))
 
 struct ksock_interface {                       /* in-use interface */
+       int             ksni_index;             /* Linux interface index */
        __u32           ksni_ipaddr;            /* interface's IP address */
        __u32           ksni_netmask;           /* interface's network mask */
        int             ksni_nroutes;           /* # routes using (active) */
@@ -234,15 +235,14 @@ struct ksock_nal_data {
 #define SOCKNAL_INIT_DATA       1
 #define SOCKNAL_INIT_ALL        2
 
-/* A packet just assembled for transmission is represented by 1 or more
- * struct kvec fragments (the first frag contains the portals header),
- * followed by 0 or more lnet_kiov_t fragments.
+/* A packet just assembled for transmission is represented by 1
+ * struct iovec fragment - the portals header -  followed by 0
+ * or more struct bio_vec fragments.
  *
  * On the receive side, initially 1 struct kvec fragment is posted for
  * receive (the header).  Once the header has been received, the payload is
- * received into either struct kvec or lnet_kiov_t fragments, depending on
- * what the header matched or whether the message needs forwarding. */
-
+ * received into struct bio_vec fragments.
+ */
 struct ksock_conn;                             /* forward ref */
 struct ksock_route;                            /* forward ref */
 struct ksock_proto;                            /* forward ref */
@@ -254,39 +254,29 @@ struct ksock_tx {                 /* transmit packet */
        int            tx_nob;         /* # packet bytes */
        int            tx_resid;       /* residual bytes */
        int            tx_niov;        /* # packet kvec frags */
-       struct kvec  *tx_iov;         /* packet kvec frags */
         int            tx_nkiov;       /* # packet page frags */
         unsigned short tx_zc_aborted;  /* aborted ZC request */
         unsigned short tx_zc_capable:1; /* payload is large enough for ZC */
         unsigned short tx_zc_checked:1; /* Have I checked if I should ZC? */
         unsigned short tx_nonblk:1;    /* it's a non-blocking ACK */
-        lnet_kiov_t   *tx_kiov;        /* packet page frags */
-       struct ksock_conn *tx_conn;        /* owning conn */
-       struct lnet_msg   *tx_lnetmsg;  /* lnet message for lnet_finalize() */
-       time64_t           tx_deadline; /* when (in secs) tx times out */
-       struct ksock_msg   tx_msg;         /* socklnd message buffer */
-        int            tx_desc_size;   /* size of this descriptor */
+       struct bio_vec *tx_kiov;        /* packet page frags */
+       struct ksock_conn *tx_conn;     /* owning conn */
+       struct lnet_msg *tx_lnetmsg;    /* lnet message for lnet_finalize() */
+       time64_t        tx_deadline;    /* when (in secs) tx times out */
+       struct ksock_msg tx_msg;        /* socklnd message buffer */
+       int             tx_desc_size;   /* size of this descriptor */
        enum lnet_msg_hstatus tx_hstatus; /* health status of tx */
-        union {
-                struct {
-                       struct kvec iov;        /* virt hdr */
-                       lnet_kiov_t kiov[0];    /* paged payload */
-                }                  paged;
-                struct {
-                       struct kvec iov[1];     /* virt hdr + payload */
-                }                  virt;
-        }                       tx_frags;
+       struct kvec     tx_hdr;         /* virt hdr */
+       struct bio_vec  tx_payload[0];  /* paged payload */
 };
 
-#define KSOCK_NOOP_TX_SIZE  ((int)offsetof(struct ksock_tx, tx_frags.paged.kiov[0]))
-
-/* network zero copy callback descriptor embedded in struct ksock_tx */
+#define KSOCK_NOOP_TX_SIZE  ((int)offsetof(struct ksock_tx, tx_payload[0]))
 
 /* space for the rx frag descriptors; we either read a single contiguous
  * header, or up to LNET_MAX_IOV frags of payload of either type. */
 union ksock_rxiovspace {
        struct kvec     iov[LNET_MAX_IOV];
-       lnet_kiov_t     kiov[LNET_MAX_IOV];
+       struct bio_vec  kiov[LNET_MAX_IOV];
 };
 
 #define SOCKNAL_RX_KSM_HEADER   1               /* reading ksock message header */
@@ -329,10 +319,11 @@ struct ksock_conn {
         int                   ksnc_rx_nob_wanted; /* bytes actually wanted */
        int                   ksnc_rx_niov;     /* # kvec frags */
        struct kvec          *ksnc_rx_iov;      /* the kvec frags */
-        int                   ksnc_rx_nkiov;    /* # page frags */
-        lnet_kiov_t          *ksnc_rx_kiov;     /* the page frags */
+       int                   ksnc_rx_nkiov;    /* # page frags */
+       struct bio_vec       *ksnc_rx_kiov;     /* the page frags */
        union ksock_rxiovspace  ksnc_rx_iov_space;/* space for frag descriptors */
-        __u32                 ksnc_rx_csum;     /* partial checksum for incoming data */
+       __u32                 ksnc_rx_csum;     /* partial checksum for incoming
+                                                * data */
        struct lnet_msg      *ksnc_lnet_msg;    /* rx lnet_finalize arg*/
        struct ksock_msg        ksnc_msg;       /* incoming message buffer:
                                                 * V2.x message takes the
@@ -363,21 +354,23 @@ struct ksock_conn {
 };
 
 struct ksock_route {
-       struct list_head   ksnr_list;           /* chain on peer_ni route list */
-       struct list_head   ksnr_connd_list;     /* chain on ksnr_connd_routes */
-       struct ksock_peer_ni *ksnr_peer;        /* owning peer_ni */
-       atomic_t           ksnr_refcount;       /* # users */
-       time64_t           ksnr_timeout;        /* when (in secs) reconnection can happen next */
-       time64_t           ksnr_retry_interval; /* how long between retries */
-        __u32                 ksnr_myipaddr;    /* my IP */
-        __u32                 ksnr_ipaddr;      /* IP address to connect to */
-        int                   ksnr_port;        /* port to connect to */
-        unsigned int          ksnr_scheduled:1; /* scheduled for attention */
-        unsigned int          ksnr_connecting:1;/* connection establishment in progress */
-        unsigned int          ksnr_connected:4; /* connections established by type */
-        unsigned int          ksnr_deleted:1;   /* been removed from peer_ni? */
-        unsigned int          ksnr_share_count; /* created explicitly? */
-        int                   ksnr_conn_count;  /* # conns established by this route */
+       struct list_head        ksnr_list;      /* chain on peer_ni route list*/
+       struct list_head        ksnr_connd_list;/* chain on ksnr_connd_routes */
+       struct ksock_peer_ni   *ksnr_peer;      /* owning peer_ni */
+       atomic_t                ksnr_refcount;  /* # users */
+       time64_t                ksnr_timeout;   /* when (in secs) reconnection
+                                                * can happen next
+                                                */
+       time64_t                ksnr_retry_interval;/* secs between retries */
+       int                     ksnr_myiface;   /* interface index */
+       __u32                   ksnr_ipaddr;    /* IP address to connect to */
+       int                     ksnr_port;      /* port to connect to */
+       unsigned int            ksnr_scheduled:1;/* scheduled for attention */
+       unsigned int            ksnr_connecting:1;/* connection in progress */
+       unsigned int            ksnr_connected:4;/* connections by type */
+       unsigned int            ksnr_deleted:1; /* been removed from peer_ni? */
+       unsigned int            ksnr_share_count;/* created explicitly? */
+       int                     ksnr_conn_count;/* # conns for this route */
 };
 
 #define SOCKNAL_KEEPALIVE_PING          1       /* cookie for keepalive ping */
@@ -465,12 +458,12 @@ static inline __u32 ksocknal_csum(__u32 crc, unsigned char const *p, size_t len)
 static inline int
 ksocknal_route_mask(void)
 {
-        if (!*ksocknal_tunables.ksnd_typed_conns)
-                return (1 << SOCKLND_CONN_ANY);
+       if (!*ksocknal_tunables.ksnd_typed_conns)
+               return BIT(SOCKLND_CONN_ANY);
 
-        return ((1 << SOCKLND_CONN_CONTROL) |
-                (1 << SOCKLND_CONN_BULK_IN) |
-                (1 << SOCKLND_CONN_BULK_OUT));
+       return (BIT(SOCKLND_CONN_CONTROL) |
+               BIT(SOCKLND_CONN_BULK_IN) |
+               BIT(SOCKLND_CONN_BULK_OUT));
 }
 
 static inline void
@@ -571,13 +564,20 @@ ksocknal_peer_decref(struct ksock_peer_ni *peer_ni)
                ksocknal_destroy_peer(peer_ni);
 }
 
+static inline int ksocknal_timeout(void)
+{
+       return *ksocknal_tunables.ksnd_timeout ?
+               *ksocknal_tunables.ksnd_timeout :
+               lnet_get_lnd_timeout();
+}
+
 int ksocknal_startup(struct lnet_ni *ni);
 void ksocknal_shutdown(struct lnet_ni *ni);
 int ksocknal_ctl(struct lnet_ni *ni, unsigned int cmd, void *arg);
 int ksocknal_send(struct lnet_ni *ni, void *private, struct lnet_msg *lntmsg);
 int ksocknal_recv(struct lnet_ni *ni, void *private, struct lnet_msg *lntmsg,
                  int delayed, unsigned int niov,
-                 struct kvec *iov, lnet_kiov_t *kiov,
+                 struct bio_vec *kiov,
                   unsigned int offset, unsigned int mlen, unsigned int rlen);
 int ksocknal_accept(struct lnet_ni *ni, struct socket *sock);
 
@@ -637,7 +637,7 @@ extern void ksocknal_lib_reset_callback(struct socket *sock,
 extern void ksocknal_lib_push_conn(struct ksock_conn *conn);
 extern int ksocknal_lib_get_conn_addrs(struct ksock_conn *conn);
 extern int ksocknal_lib_setup_sock(struct socket *so);
-extern int ksocknal_lib_send_iov(struct ksock_conn *conn, struct ksock_tx *tx,
+extern int ksocknal_lib_send_hdr(struct ksock_conn *conn, struct ksock_tx *tx,
                                 struct kvec *scratch_iov);
 extern int ksocknal_lib_send_kiov(struct ksock_conn *conn, struct ksock_tx *tx,
                                  struct kvec *scratch_iov);