如何使用 neon 内在函数优化直方图统计？

Question

我想用neon优化直方图统计代码intrinsics.But我没有succeed.Here是c代码：

#define NUM (7*1024*1024)
uint8 src_data[NUM];
uint32 histogram_result[256] = {0};
for (int i = 0; i < NUM; i++)
{
    histogram_result[src_data[i]]++;
}

Historam 统计更像是序列 processing.It 很难用 neon 优化 intrinsics.Does 有人知道如何优化吗？提前致谢。

Answer 1

您不能直接对存储进行矢量化处理，但可以对它们进行流水线处理，并且可以在 32 位平台上对地址计算进行矢量化处理（在较小程度上在 64 位平台上进行）。

您要做的第一件事（实际上并不需要 NEON 才能受益）是展开直方图数组，以便您可以同时处理更多数据：

#define NUM (7*1024*1024)
uint8 src_data[NUM];
uint32 histogram_result[256][4] = {{0}};
for (int i = 0; i < NUM; i += 4)
{
    uint32_t *p0 = &histogram_result[src_data[i + 0]][0];
    uint32_t *p1 = &histogram_result[src_data[i + 1]][1];
    uint32_t *p2 = &histogram_result[src_data[i + 2]][2];
    uint32_t *p3 = &histogram_result[src_data[i + 3]][3];
    uint32_t c0 = *p0;
    uint32_t c1 = *p1;
    uint32_t c2 = *p2;
    uint32_t c3 = *p3;
    *p0 = c0 + 1;
    *p1 = c1 + 1;
    *p2 = c2 + 1;
    *p3 = c3 + 1;
}

for (int i = 0; i < 256; i++)
{
    packed_result[i] = histogram_result[i][0]
                     + histogram_result[i][1]
                     + histogram_result[i][2]
                     + histogram_result[i][3];
}

请注意，p0 到 p3 永远不能指向同一个地址，因此重新排序它们的读写就可以了。

由此您可以使用内在函数将 p0 的计算矢量化为 p3，并且您可以矢量化最终循环。

首先按原样进行测试（因为我没有！）。然后您可以尝试将数组结构化为 result[4][256] 而不是 result[256][4]，或者使用更小或更大的展开因子。

对此应用一些 NEON 内在函数：

uint32 histogram_result[256 * 4] = {0};
static const uint16_t offsets[] = { 0x000, 0x001, 0x002, 0x003,
                                    0x000, 0x001, 0x002, 0x003 };
uint16x8_t voffs = vld1q_u16(offsets);
for (int i = 0; i < NUM; i += 8) {
    uint8x8_t p = vld1_u8(&src_data[i]);
    uint16x8_t p16 = vshll_n_u8(p, 16);
    p16 = vaddq_u16(p16, voffs);
    uint32_t c0 = histogram_result[vget_lane_u16(p16, 0)];
    uint32_t c1 = histogram_result[vget_lane_u16(p16, 1)];
    uint32_t c2 = histogram_result[vget_lane_u16(p16, 2)];
    uint32_t c3 = histogram_result[vget_lane_u16(p16, 3)];
    histogram_result[vget_lane_u16(p16, 0)] = c0 + 1;
    c0 = histogram_result[vget_lane_u16(p16, 4)];
    histogram_result[vget_lane_u16(p16, 1)] = c1 + 1;
    c1 = histogram_result[vget_lane_u16(p16, 5)];
    histogram_result[vget_lane_u16(p16, 2)] = c2 + 1;
    c2 = histogram_result[vget_lane_u16(p16, 6)];
    histogram_result[vget_lane_u16(p16, 3)] = c3 + 1;
    c3 = histogram_result[vget_lane_u16(p16, 7)];
    histogram_result[vget_lane_u16(p16, 4)] = c0 + 1;
    histogram_result[vget_lane_u16(p16, 5)] = c1 + 1;
    histogram_result[vget_lane_u16(p16, 6)] = c2 + 1;
    histogram_result[vget_lane_u16(p16, 7)] = c3 + 1;
}

随着直方图数组展开 x8 而不是 x4，您可能想要使用八个标量累加器而不是四个，但您必须记住这意味着八个计数寄存器和八个地址寄存器，这比 32 位寄存器多ARM 有（因为你不能使用 SP 和 PC）。

不幸的是，地址计算在 NEON 内在函数手中，我认为编译器无法安全地推断它如何能够重新排序读取和写入，因此您必须显式地重新排序它们并希望你做得最好了。

如何使用 neon 内在函数优化直方图统计？

How to optimize histogram statistics with neon intrinsics?

intrinsics

neon