<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Aptos;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        font-size:12.0pt;
        font-family:"Aptos",sans-serif;
        mso-ligatures:standardcontextual;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Aptos",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="#467886" vlink="#96607D" style="word-wrap:break-word">
<div class="WordSection1">
<p class="MsoNormal">Hi,<o:p></o:p></p>
<p class="MsoNormal">My goal is to test DPDK applications running on the same server as a primary process and secondary process.<o:p></o:p></p>
<p class="MsoNormal">When I execute two dpdk-simple-mp processes, one as primary and other as secondary, I see them both startup with no issues.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"># ./dpdk-simple_mp -c 0x2 -n 4 --legacy-mem --proc-type primary --
<o:p></o:p></p>
<p class="MsoNormal"># ./dpdk-simple_mp -c 0x8 -n 4 --legacy-mem --proc-type secondary --
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Now when I test our DPDK application (as primary) and same dpdk-simple-mp (as secondary) I get error “EAL: Cannot initialize tailq: RTE_FIB).<o:p></o:p></p>
<p class="MsoNormal">         EAL args: MyApp, -l 25,26,27,28 -n 4 –socket-mem=2048, --legacy-mem –no-telemetry –proc_type=primary<o:p></o:p></p>
<p class="MsoNormal">          <o:p></o:p></p>
<p class="MsoNormal">         # ./dpdk-simple_mp -l 24 -n 4 --legacy-mem --proc-type secondary --<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">When I use gdb I see that t->head is 0x0 in eal_common_tailqs.c Line 148.<o:p></o:p></p>
<p class="MsoNormal">(gdb) p *t<o:p></o:p></p>
<p class="MsoNormal">$40 = {head = 0x0, next = {tqe_next = 0x1c68c40 <rte_fib6_tailq>, tqe_prev = 0x1c67108 <rte_swx_ctl_pipeline_tailq+8>},<o:p></o:p></p>
<p class="MsoNormal">  name = "RTE_FIB", '\000' <repeats 24 times>}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I created 2 - 1G hugepages per CPU socket for each test case listed above.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[root@localhost ~]# /opt/dpdk/dpdk-hugepages.py -s<o:p></o:p></p>
<p class="MsoNormal">Node Pages Size Total<o:p></o:p></p>
<p class="MsoNormal">0    2     1Gb    2Gb<o:p></o:p></p>
<p class="MsoNormal">1    2     1Gb    2Gb<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">The dpdk-simple_mp execution output is shown below:<o:p></o:p></p>
<p class="MsoNormal">[root@localhost ~]# ./dpdk-simple_mp -l 24 -n 4 --legacy-mem --huge-dir /dev/mnt/huge --proc-type secondary --<o:p></o:p></p>
<p class="MsoNormal">EAL: Detected CPU lcores: 128<o:p></o:p></p>
<p class="MsoNormal">EAL: Detected NUMA nodes: 2<o:p></o:p></p>
<p class="MsoNormal">EAL: Static memory layout is selected, amount of reserved memory can be adjusted with -m or --socket-mem<o:p></o:p></p>
<p class="MsoNormal">EAL: Detected static linkage of DPDK<o:p></o:p></p>
<p class="MsoNormal">EAL: Multi-process socket /var/run/dpdk/rte/mp_socket_18349_8160ff395b1<o:p></o:p></p>
<p class="MsoNormal">EAL: Selected IOVA mode 'PA'<o:p></o:p></p>
<p class="MsoNormal">EAL: WARNING: Address Space Layout Randomization (ASLR) is enabled in the kernel.<o:p></o:p></p>
<p class="MsoNormal">EAL:    This may cause issues with mapping memory into secondary processes<o:p></o:p></p>
<p class="MsoNormal">EAL: Cannot initialize tailq: RTE_FIB<o:p></o:p></p>
<p class="MsoNormal">Tailq 0: qname:<RTE_DIST_BURST>, tqh_first:(nil), tqh_last:0x100004490<o:p></o:p></p>
<p class="MsoNormal">Tailq 1: qname:<RTE_DISTRIBUTOR>, tqh_first:(nil), tqh_last:0x1000044c0<o:p></o:p></p>
<p class="MsoNormal">Tailq 2: qname:<RTE_REORDER>, tqh_first:(nil), tqh_last:0x1000044f0<o:p></o:p></p>
<p class="MsoNormal">Tailq 3: qname:<RTE_IPSEC_SAD>, tqh_first:(nil), tqh_last:0x100004520<o:p></o:p></p>
<p class="MsoNormal">Tailq 4: qname:<RTE_SWX_IPSEC>, tqh_first:(nil), tqh_last:0x100004550<o:p></o:p></p>
<p class="MsoNormal">Tailq 5: qname:<RTE_SWX_PIPELINE>, tqh_first:(nil), tqh_last:0x100004580<o:p></o:p></p>
<p class="MsoNormal">Tailq 6: qname:<RTE_SWX_CTL_PIPELINE>, tqh_first:(nil), tqh_last:0x1000045b0<o:p></o:p></p>
<p class="MsoNormal">Tailq 7: qname:<RTE_HASH>, tqh_first:0x1bfd9f140, tqh_last:0x1bf6f4240<o:p></o:p></p>
<p class="MsoNormal">Tailq 8: qname:<RTE_FBK_HASH>, tqh_first:(nil), tqh_last:0x100004610<o:p></o:p></p>
<p class="MsoNormal">Tailq 9: qname:<RTE_THASH>, tqh_first:(nil), tqh_last:0x100004640<o:p></o:p></p>
<p class="MsoNormal">Tailq 10: qname:<RTE_LPM>, tqh_first:(nil), tqh_last:0x100004670<o:p></o:p></p>
<p class="MsoNormal">Tailq 11: qname:<RTE_LPM6>, tqh_first:(nil), tqh_last:0x1000046a0<o:p></o:p></p>
<p class="MsoNormal">Tailq 12: qname:<RTE_ACL>, tqh_first:(nil), tqh_last:0x1000046d0<o:p></o:p></p>
<p class="MsoNormal">Tailq 13: qname:<RTE_MEMPOOL>, tqh_first:0x1bf282000, tqh_last:0x1bf282000<o:p></o:p></p>
<p class="MsoNormal">Tailq 14: qname:<RTE_RING>, tqh_first:0x1bfdc79c0, tqh_last:0x14f261ac0<o:p></o:p></p>
<p class="MsoNormal">Tailq 15: qname:<RTE_MBUF_DYNFIELD>, tqh_first:0x14f871680, tqh_last:0x14f870cc0<o:p></o:p></p>
<p class="MsoNormal">Tailq 16: qname:<RTE_MBUF_DYNFLAG>, tqh_first:0x14f871080, tqh_last:0x14f871080<o:p></o:p></p>
<p class="MsoNormal">Tailq 17: qname:<UIO_RESOURCE_LIST>, tqh_first:0x1bfffce00, tqh_last:0x1bf939e40<o:p></o:p></p>
<p class="MsoNormal">Tailq 18: qname:<VFIO_RESOURCE_LIST>, tqh_first:(nil), tqh_last:0x1000047f0<o:p></o:p></p>
<p class="MsoNormal">Tailq 19: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 20: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 21: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 22: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 23: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 24: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 25: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 26: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 27: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 28: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 29: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 30: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">Tailq 31: qname:<>, tqh_first:(nil), tqh_last:(nil)<o:p></o:p></p>
<p class="MsoNormal">EAL: Cannot init tail queues for objects<o:p></o:p></p>
<p class="MsoNormal">EAL: Error - exiting with code: 1<o:p></o:p></p>
<p class="MsoNormal">Cannot init EAL<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">How do I resolve this issue?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Thanks,<o:p></o:p></p>
<p class="MsoNormal">Ed<o:p></o:p></p>
</div>
</body>
</html>