无法使用 MPI_Send 和 MPI_Recv 发送 std::vector

Question

我正在尝试使用 MPI 发送和接收函数发送 std:vector，但我没有到达任何地方。我收到类似

的错误

Fatal error in MPI_Recv: Invalid buffer pointer, error stack:
MPI_Recv(186): MPI_Recv(buf=(nil), count=2, MPI_INT, src=0, tag=0, MPI_COMM_WORLD, status=0x7fff9e5e0c80) failed
MPI_Recv(124): Null buffer pointer

我尝试了多种组合

A) 就像用来发送数组的..

 std::vector<uint32_t> m_image_data2; // definition of  m_image_data2
     m_image_data2.push_back(1);
     m_image_data2.push_back(2);
     m_image_data2.push_back(3);
     m_image_data2.push_back(4);
     m_image_data2.push_back(5);

MPI_Send( &m_image_data2[0], 2, MPI_INT, 1, 0, MPI_COMM_WORLD);
MPI_Send( &m_image_data2[2], 2, MPI_INT, 1, 0, MPI_COMM_WORLD);

MPI_Recv( &m_image_data2[0], 2, MPI_INT, 0, 0, MPI_COMM_WORLD, &status );

B) 无[]

MPI_Send( &m_image_data2, 2, MPI_INT, 1, 0, MPI_COMM_WORLD);
MPI_Send( &m_image_data2 + 2, 2, MPI_INT, 1, 0, MPI_COMM_WORLD);

MPI_Recv( &m_image_data2, 2, MPI_INT, 0, 0, MPI_COMM_WORLD, &status );

C) 使用向量方法如 at()..

MPI_Send( &m_image_data2.at(0), 2, MPI_INT, 1, 0, MPI_COMM_WORLD);
MPI_Send( &m_image_data2.at(2), 2, MPI_INT, 1, 0, MPI_COMM_WORLD);

MPI_Recv( &m_image_data2.at(0), 2, MPI_INT, 0, 0, MPI_COMM_WORLD, &status );

我正在考虑在主节点将向量转换为 int[]，然后在工作节点将其转换回向量，但这会产生不必要的开销。

有人知道怎么解决吗？

Answer 1

没有更完整的示例，我不知道发生了什么，但您似乎不匹配发送和接收（或者您没有正确初始化接收向量）。

像下面这样的东西就足够了：

std::vector<uint32_t> m_image_data2;

if (rank==0) {
  m_image_data2.push_back(1);
  m_image_data2.push_back(2);
  m_image_data2.push_back(3);
  m_image_data2.push_back(4);
  m_image_data2.push_back(5);
  // send 5 ints at once
  MPI_Send( &m_image_data2[0], 5, MPI_INT, 1, 0, MPI_COMM_WORLD);
}
else {
  // make space for 5 ints
  m_image_data2.resize(5);
  // receive 5 ints
  MPI_Recv(&m_image_data2[0], 5, MPI_INT, 0, 0, MPI_COMM_WORLD, &status);
}

Answer 2

考虑 Boost::MPI，它明确支持例如std::vector 至 Boost::Serialization。

当然，Boost::MPI并不支持所有的MPI 3.0，而是支持MPI 1.3（也许是MPI 2.2的一个子集，但绝对不是RMA），所以它不是一个完美的解决方案。但是，如果你只使用 MPI-1 中介绍的 MPI 的公共特性，那么应该没问题。

无法使用 MPI_Send 和 MPI_Recv 发送 std::vector

cannot send std::vector using MPI_Send and MPI_Recv

c++

vector

parallel-processing

mpi

hpc