Bug 2090389

Summary: netplugin failed but error parsing its diagnostic message
Product: OpenShift Container Platform Reporter: Dennis Periquet <dperique>
Component: NetworkingAssignee: Douglas Smith <dosmith>
Networking sub component: multus QA Contact: Weibin Liang <weliang>
Status: CLOSED DUPLICATE Docs Contact:
Severity: unspecified    
Priority: unspecified    
Version: 4.11   
Target Milestone: ---   
Target Release: ---   
Hardware: Unspecified   
OS: Unspecified   
Whiteboard:
Fixed In Version: Doc Type: If docs needed, set a value
Doc Text:
Story Points: ---
Clone Of: Environment:
Last Closed: 2022-05-31 13:58:37 UTC Type: Bug
Regression: --- Mount Type: ---
Documentation: --- CRM:
Verified Versions: Category: ---
oVirt Team: --- RHEL 7.3 requirements from Atomic Host:
Cloudforms Team: --- Target Upstream Version:
Embargoed:

Description Dennis Periquet 2022-05-25 16:15:59 UTC
Description of problem:

Related to https://bugzilla.redhat.com/show_bug.cgi?id=2081069, we see a new symptom (e.g., sample job https://prow.ci.openshift.org/view/gs/origin-ci-test/logs/periodic-ci-openshift-release-master-nightly-4.11-e2e-aws-upgrade/1529373268140625920):

ns/openshift-kube-apiserver pod/revision-pruner-6-ip-10-0-189-82.us-west-2.compute.internal node/ip-10-0-189-82.us-west-2.compute.internal - 355.08 seconds after deletion - reason/FailedCreatePodSandBox Failed to create pod sandbox: rpc error: code = Unknown desc = failed to create pod network sandbox k8s_revision-pruner-6-ip-10-0-189-82.us-west-2.compute.internal_openshift-kube-apiserver_7c4355bd-69bb-4fe9-8e09-859259cd7aa1_0(4f54968650290a2e6de012aac8679d6ce9c9cc1d9eedd02559660c06ecc5e7f7): error adding pod openshift-kube-apiserver_revision-pruner-6-ip-10-0-189-82.us-west-2.compute.internal to CNI network "multus-cni-network": plugin type="multus" name="multus-cni-network" failed (add): netplugin failed but error parsing its diagnostic message "\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00\x00": invalid character '\x00' looking for beginning of value

Version-Release number of selected component (if applicable): 4.11

How reproducible:

Seems intermittent but you can see various jobs that exhibit the symptom using https://search.ci.openshift.org/?search=netplugin+failed+but+error+parsing+its+diagnostic+message&maxAge=48h&context=1&type=junit&name=periodic-ci-openshift-release-master-nightly-4.11-e2e-aws-upgrade&excludeName=ovn&maxMatches=5&maxBytes=20971520&groupBy=job

Steps to Reproduce:
1.
2.
3.

Actual results:

Diagnostic message with a lot of null values.

Expected results:

A well formed diagnostic message.

Additional info:

Using this query, I found other jobs that had the symptom: https://search.ci.openshift.org/?search=invalid+character+%27%5C%5Cx00%27+looking+for+beginning+of+value&maxAge=48h&context=1&type=bug%2Bjunit&name=&excludeName=&maxMatches=5&maxBytes=20971520&groupBy=job

Comment 1 Douglas Smith 2022-05-26 14:51:20 UTC
Looks like interesting result related to: https://bugzilla.redhat.com/show_bug.cgi?id=2073452

This looks like garbage is coming back from the CNI plugin, in this case, Multus.