rcu-tasks: Handle sparse cpu_possible_mask in rcu_tasks_invoke_cbs()
authorPaul E. McKenney <paulmck@kernel.org>
Fri, 8 Apr 2022 16:21:50 +0000 (09:21 -0700)
committerPaul E. McKenney <paulmck@kernel.org>
Tue, 12 Apr 2022 00:06:43 +0000 (17:06 -0700)
commitab2756ea6b74987849b44ad0e33c3cfec159033b
tree166ae0bb6674eb0ea22272bdc591e36d5f8470fe
parent07d95c34e8125a7bf833a94bc3c9d51992d92c45
rcu-tasks: Handle sparse cpu_possible_mask in rcu_tasks_invoke_cbs()

If the cpu_possible_mask is sparse (for example, if bits are set only for
CPUs 0, 4, 8, ...), then rcu_tasks_invoke_cbs() will access per-CPU data
for a CPU not in cpu_possible_mask.  It makes these accesses while doing
a workqueue-based binary search for non-empty callback lists.  Although
this search must pass through CPUs not represented in cpu_possible_mask,
it has no need to check the callback list for such CPUs.

This commit therefore changes the rcu_tasks_invoke_cbs() function's
binary search so as to only check callback lists for CPUs present in
cpu_possible_mask.

Reported-by: Eric Dumazet <edumazet@google.com>
Signed-off-by: Paul E. McKenney <paulmck@kernel.org>
kernel/rcu/tasks.h