Improved error messages with SCIF related calls.

Add instructions for installation without root privilege.

Add instructions for cluster deployment.

Allow changing the SCIF port id via the envar DAPL_MCM_PORT_ID so that
the proxy service can be started by a regular user.

Make the default config file consistent with the initialization code.

Prevent dereferencing a NULL pointer.

Add a readme file for the MCM provider.

Add "buffer_segment_size" to the configuration file.

Bug fix: scif_unregister returns -ENODEV becasue the length is not page aligned.

There is a race condition between dapl_rbuf_add() dapl_rbuf_remove() when
the ring buffer is empty or full. This could lead to incorrect item be
dequeued and correct item be discarded.

A temporary workaround is provided to ensure the pending event queue work
correctly. Without this fix dapl_evd_dequeue() could return the wrong event
and causes various application errors (hanging, assertion failures. etc).

Ultimately the ring buffer mechanism needs to the fixed.

Add environment variable DAPL_MCM_ALWAYS_PROXY to allow proxying non-MIC
initiated connections. Good for debugging.

Handle the (unlikely) corner case that the last sge has length 0.

Minor code cleanup.

Recount the actual pending WRs from time to time.

Don't waste the 64 byte in the proxy buffer between segments.

Bug fix: the calculation of 'total_offset' could be wrong if a segmented sge is not the last one.

Prevent poll_cnt from becoming negative, which could lead to huge delay.

Don't flood the log with messages about deferred WR posting.

Proxy large writes in segments.

Replace scif_writeto with scif_readfrom, preparing for segmentation support.

Make both address and size 64 bytes aligned when calling scif_writeto().

Port numbers need to be unique within each physical IB device (md),
otherwise connection requests between multiple clients of the same
proxy server can be matched incorrectly.

Correct many mismatches between the log messages and the actual operations.

Correct the MR size calculation when registering with SCIF.

MPXYD: only post an incoming write WR when there is no pending WR on the QP,
otherwise there might be ordering issues.

Fix the (nil) "wr_id" output of posted pending work request.

Bug fix: connection error with "unexpected DAPL event 0x4003" when more then one client exists.

Correct the range of valid ops in mix_op_str().

Fix conenction setup deadlock with more than one client connecting to MPXYD.

Add wr_end field for entry count and hd/tl adjustments

MPI now works pingpong. Still not stress testing well.
Some hang conditions need debugged

dtest update for unaligned/aligned data option, unaligned by default

set -a for page alignment.

return EINVAL for anything other than sends or writes.

rdma write working both directions. MIC to XEON, XEON to MIC.

updated memory registration to adjust for SCIF page alignment

add progress thread processing of delayed WR's

rdma writes working

rdma write support coded, compiled not tested

Sends/receives working, Xeon to MIC

update debug message

MCM development

updated for  QP, CM services

add mcm

update makefile, dat.conf

add extension.h update mpxyd.c

add mcm.c and mix.c, MIC indirect CM code and MIC indirect eXchange messager

update for chkconfig

update makefile

update spec file

makefile update

update Makefile move daplmpxy to mpxyd.init.in

update makefile

add mpxyd.conf

update makefile for mpdxyd.conf

update makefile

update makefile

add mpxyd.c

fix makefile

fix makefile

fix makefile

configure changes.

update configure.in

Change names to mpxy

pxd.c

pxd.c

pxd.c

makefile

update pxd.c

makefile

makefile.am

add svc/pxm.c for deamon

makefile.am

Makefile.am

configure.in

update configure.in

add daplpdx.init.in

update for daplpxd daemon

add libdaplopcm.map

fix makefile.am

fix makefile.am

add pcm files

fix configure.in

Add configuration files for new Proxy RDMA/SCIF Provider

This proxy RDMA provider is a interbus service within a platform
to enable offloading of RDMA writes from a small core (MIC) to
large core resource. Data sourced on a MIC that is
destined for remote nodes on the fabric will be transfered
to large core via SCIF and than to remote node.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

common: allow qp modify in init state

Allow consumer to modify attributes via dat_ep_modify
in init state.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

common: check for valid states during ep posting

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

dat.conf: keep list of providers in order for backward compatibility

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

ucm: record and silently drop a duplicate reject CM message

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

windows: new version of getlocalipaddr not portable

revert to the original getaddrinfo method for windows

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

dapltest: DFLT_QLEN is defined in multiple tests

add #ifdef checking in transaction test.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

Release 2.0.35

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

config/build: remove post/postun hacking used to modify dat.conf

Return to the tried and true method of managing configuration
files via %config directive and remove ugly sed editing methods.
The dat.conf includes both v1 and v2 device entries to insure
backward compatibility. Add doc/dat.conf

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

config: clean up help option displays with ext-type options

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

windows: Provide auto-detect between RoCE and Infiniband for Windows.

For RoCE, enable transport global ID use.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

ucm: update UD cm provider to support new CM stat and error counters

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

scm: update socket cm provider to support new CM stat and error counters

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

commom: add cm, link, and diag event counters in IB extended builds

Add additional event monitoring capabilities during runtime to help
isolate issues during scaling in lieu of logging/printing warning
messages. Counters have been added to provider CM services and counters
have been added and mapped to sysfs ib_cm, device port and device
diag counters. ibdev_path is used for device sysfs counters.

uDAPL CM events are tracked on a per IA instance via internal
provider counters. The ib_cm, link, and diag events are tracked on a
per platform basis via sysfs. For these running counters a start
and stop function is provided for sampling and mapping to DAPL
64 bit counters. All counters, along with new start and stop functions,
are provided via dat_ib_extensions.h. New IB extension version is 2.0.7

New DCNT_IA_xx counters include 40 cm, 9 link, and 9 diag types.

To enable new counters (default build is disabled):
./configure --enable-counters

New bitmappings have been added to DAPL_DBG_TYPE environment
variable to automatically start/stop counters and log
errors if counters are enabled. The following will control
CM, LINK, and DIAG respectively:

   DAPL_DBG_TYPE_CM_ERRS = 0x080000,
   DAPL_DBG_TYPE_LINK_ERRS = 0x100000,
   DAPL_DBG_TYPE_DIAG_ERRS = 0x400000,

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

scm: use ioctl SIOCIFCONF to get complete list of configured netdev interfaces

replace usage of getaddrinfo since is doesnt actually return bound addresses
and can return the loopback address in some configurations. Some
systems may not have eth0 configured so you cannot assume eth0 as a non-loopback
default netdev.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

ucm: UD send failures at scale, ucm_send ERR: get_smsg(hd=149,tl=150)

Full sendq should retry polling completions instead of failing.
When sendq is full and all requests are pending the get send message
code should retry polling for completions and not return error on first
empty CQ attempt. Give HCA a chance to complete some batched requests.
Also, clean up the send message error logging.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

scm: fix retry count on connection pending timeout

Retry count not being decremented on connection TIMEOUT.
Also, cleanup log messages on CONN and REP pending and
add local port to output.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

ucm: cleanup debug message, ntohl on p_size is incorrect

private data size is a short, change to ntohs on log message

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

cma, scm, ucm: allow EP (QP) creation without EVD (CQ)

Provide ability to create a EP/QP with no EVD/CQ on either the
request or receive queue. The current implementation allows on
receive queue but not request queue. Not all ofa devices support
a null CQ so if necessary create a dummy CQ at the time of
QP creation. Also, if no CQ is specified set appropriate QP
max wr/sge attributes to zero.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

common: add DAPL_DBG_TYPE_CM_STATS (0x40000) to debug log options

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>

common: dapls_ep_flush_cq will segfault when no CQ is attached to EP

add check for NULL request/receive EVD (cq) before flushing.

Signed-off-by: Arlin Davis <arlin.r.davis@intel.com>