<div dir="ltr"><div>Hi Marcus,</div><div><br></div><div>these errors shouldn't prevent the bricks from starting. Isn't there any other error or warning ?</div><div><br></div><div>Regards,</div><div><br></div><div>Xavi<br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Feb 17, 2023 at 3:06 PM Marcus Pedersén <<a href="mailto:marcus.pedersen@slu.se">marcus.pedersen@slu.se</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hi all,<br>
I started an upgrade to gluster 11.0 from 10.3 on one of my clusters.<br>
OS: Debian bullseye<br>
<br>
Volume Name: gds-common<br>
Type: Replicate<br>
Volume ID: 42c9fa00-2d57-4a58-b5ae-c98c349cfcb6<br>
Status: Started<br>
Snapshot Count: 0<br>
Number of Bricks: 1 x (2 + 1) = 3<br>
Transport-type: tcp<br>
Bricks:<br>
Brick1: urd-gds-031:/urd-gds/gds-common<br>
Brick2: urd-gds-032:/urd-gds/gds-common<br>
Brick3: urd-gds-030:/urd-gds/gds-common (arbiter)<br>
Options Reconfigured:<br>
cluster.granular-entry-heal: on<br>
storage.fips-mode-rchecksum: on<br>
transport.address-family: inet<br>
nfs.disable: on<br>
performance.client-io-threads: off<br>
<br>
I started with the arbiter node, stopped all of gluster<br>
upgraded to 11.0 and all went fine.<br>
After upgrade I was able to see the other nodes and<br>
all nodes were connected.<br>
After a reboot on the arbiter nothing works the way it should.<br>
Both brick1 and brick2 has connection but no connection<br>
with the arbiter.<br>
On the arbiter glusterd has started and is listening on port 24007,<br>
the problem seems to be glusterfsd, it never starts!<br>
<br>
If I run: gluster volume status<br>
<br>
Status of volume: gds-common<br>
Gluster process                             TCP Port  RDMA Port  Online  Pid<br>
------------------------------------------------------------------------------<br>
Brick urd-gds-030:/urd-gds/gds-common       N/A       N/A        N       N/A<br>
Self-heal Daemon on localhost               N/A       N/A        N       N/A<br>
<br>
Task Status of Volume gds-common<br>
------------------------------------------------------------------------------<br>
There are no active volume tasks<br>
<br>
<br>
In glusterd.log I find the following errors (arbiter node):<br>
[2023-02-17 12:30:40.519585 +0000] E [gf-io-uring.c:404:gf_io_uring_setup] 0-io: [MSGID:101240] Function call failed <{function=io_uring_setup()}, {error=12 (Cannot allocate memory)}><br>
[2023-02-17 12:30:40.678031 +0000] E [MSGID: 106061] [glusterd.c:597:glusterd_crt_georep_folders] 0-glusterd: Dict get failed [{Key=log-group}, {errno=2}, {error=No such file or directory}]<br>
<br>
In brick/urd-gds-gds-common.log I find the following error:<br>
[2023-02-17 12:30:43.550753 +0000] E [gf-io-uring.c:404:gf_io_uring_setup] 0-io: [MSGID:101240] Function call failed <{function=io_uring_setup()}, {error=12 (Cannot allocate memory)}><br>
<br>
I enclose both logfiles.<br>
<br>
How do I resolve this issue??<br>
<br>
Many thanks in advance!!<br>
<br>
Marcus<br>
---<br>
När du skickar e-post till SLU så innebär detta att SLU behandlar dina personuppgifter. För att läsa mer om hur detta går till, klicka här <<a href="https://www.slu.se/om-slu/kontakta-slu/personuppgifter/" rel="noreferrer" target="_blank">https://www.slu.se/om-slu/kontakta-slu/personuppgifter/</a>><br>
E-mailing SLU will result in SLU processing your personal data. For more information on how this is done, click here <<a href="https://www.slu.se/en/about-slu/contact-slu/personal-data/" rel="noreferrer" target="_blank">https://www.slu.se/en/about-slu/contact-slu/personal-data/</a>><br>
________<br>
<br>
<br>
<br>
Community Meeting Calendar:<br>
<br>
Schedule -<br>
Every 2nd and 4th Tuesday at 14:30 IST / 09:00 UTC<br>
Bridge: <a href="https://meet.google.com/cpu-eiue-hvk" rel="noreferrer" target="_blank">https://meet.google.com/cpu-eiue-hvk</a><br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br>
<a href="https://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">https://lists.gluster.org/mailman/listinfo/gluster-users</a><br>
</blockquote></div>