我有一个项目,涉及3D数组(arma::Cube<cx_double>
)上的许多置换。特别地,所需的排列是切片之间的列互换。在Matlab中,这可以通过permute(cube,[1,3,2])
有效地计算,而在Python中,可以通过numpy.transpose(cube,axis=[0,2,1])
有效地计算。
不幸的是, Armadillo 本身没有permute
函数。我尝试了不同的方法,但是与Matlab相比,所有方法都相当慢。 我想知道在Armadillo 中置换(相当大)多维数据集的更快方法是什么。使用gprof
对代码进行性能分析,大部分时间都花在了我下面尝试过的permute函数中,而在Matlab中,对于同一个移植项目,大部分时间都花在了SVD或QR矩阵分解上(重塑和置换非常快)在matlab中)。
我想了解在Armadillo中进行排列的最快方法,以及为什么某些方法比其他方法更好。
选项1:原始排列(最快的选项)(是否有更快的方法?)
输入多维数据集到输出多维数据集的逐元素分配。
template <typename T>
static Cube<T> permute (Cube<T>& cube){
uword D1=cube.n_rows;
uword D2=cube.n_cols;
uword D3=cube.n_slices;
Cube<T> output(D1,D3,D2);
for (uword s = 0; s < D3; ++s){
for (uword c = 0; c < D2; ++c){
for (uword r = 0; r < D1; ++r){
output.at(r, s, c) = cube.at(r, c, s);
// output[ D1*D3*c + D1*s+ r ] = cube[ D1*D2*s + D1*c + r ];
}
}
}
return output;
}
选项2:填充切片(非常慢)
通过非连续的
subcube
View 填充输出多维数据集的切片。template <typename T>
static Cube<T> permute (Cube<T>& cube_in){
uword D1 = cube_in.n_rows;
uword D2 = cube_in.n_cols;
uword D3 = cube_in.n_slices;
Cube<T> output;
output.zeros(D1, D3, D2);
for (uword c=0; c<D2; ++c) {
output.slice(c) = cube_in.subcube( span(0,D1-1),span(c),span(0,D3-1) );
}
return output;
}
选项3:转置图层(比Raw排列慢,但具有可比性)
我们可以遍历输入多维数据集的各层(固定行)并进行转置。
template <typename T>
static Cube<T> permute (Cube<T>& cube_in){
// in a cube, permute {1,3,2} (permute slices by columns)
uword D1 = cube_in.n_rows;
uword D2 = cube_in.n_cols;
uword D3 = cube_in.n_slices;
if(D3 > D2){
cube_in.resize(D1,D3,D3);
} else if (D2 > D3) {
cube_in.resize(D1,D2,D2);
}
for (uword r=0; r<D1; ++r) {
static cmat layer = cmat(cube_in.rows(r,r));
inplace_strans(layer);
cube_in.rows(r,r)=layer;
}
cube_in.resize(D1,D3,D2);
return cube_in;
}
选项4:查询表
通过读取 vector 中的indes来获得非连续访问。
template <typename T>
arma::Cube<T> permuteCS (arma::Cube<T> cube_in){
// in a cube, permute {1,3,2} (permute slices by columns)
uword D1 = cube_in.n_rows;
uword D2 = cube_in.n_cols;
uword D3 = cube_in.n_slices;
cx_vec onedcube = cube_in.elem(gen_trans_idx(cube_in));
return arma::Cube<T>(onedcube.memptr(), D1, D3, D2, true ) ;
}
其中
gen_trans_idx
是用于生成置换后的多维数据集的indes的函数:template <typename T>
uvec gen_trans_idx(Cube<T>& cube){
uword D1 = cube.n_rows;
uword D2 = cube.n_cols;
uword D3 = cube.n_slices;
uvec perm132(D1*D2*D3);
uword ii = 0;
for (int c = 0; c < D2; ++c){
for (int s = 0; s < D3; ++s){
for (int r = 0; r < D1; ++r){
perm132.at(ii) = sub2ind(size(cube), r, c, s);
ii=ii+1;
}}}
return perm132;
}
理想情况下,如果预先确定多维数据集的尺寸,则可以预先计算这些查找表。
选项5 (原位转置)非常慢,有效存储
// Option: In-place transpose
template <typename T>
arma::Cube<T> permuteCS (arma::Cube<T> cube_in, uvec permlist ){
T* Qpoint = cube_in.memptr(); // pointer to first element of cube_in
uvec updateidx = find(permlist - arma::linspace<uvec>(0,cube_in.n_elem-1,cube_in.n_elem)); // index of elements that change position in memory
uvec skiplist(updateidx.n_elem,fill::zeros);
uword rr = 0; // aux index for updatelix
for(uword jj=0;jj<updateidx.n_elem;++jj){
if(any(updateidx[jj] == skiplist)){ // if element jj has already been updated
// do nothing
} else {
uword scope = updateidx[jj];
T target = *(Qpoint+permlist[scope]); // store the value of the target element
while(any(scope==skiplist)-1){ // while wareyou has not been updated
T local = *(Qpoint+scope); // store local value
*(Qpoint+scope) = target;
skiplist[rr]=scope;
++rr;
uvec wareyou = find(permlist==scope); // find where the local value will appear
scope = wareyou[0];
target = local;
}
}
}
cube_in.reshape(cube_in.n_rows,cube_in.n_slices,cube_in.n_cols);
return cub
e_in;
}
最佳答案
此代码是我对memcpy
hack的评论的补充。另外,不要忘记尝试添加const reference
以防止复制对象。
template <typename T>
static Cube<T> permute(const Cube<T> &cube){
const uword D1 = cube.n_rows;
const uword D2 = cube.n_cols;
const uword D3 = cube.n_slices;
const uword D1_mul_D3 = D1 * D3;
const Cube<T> output(D1, D3, D2);
const T * from = cube.memptr();
T *to = output.memptr();
for (uword s = 0; s < D3; ++s){
T *to_tmp = to + D1 * s;
for (uword c = 0; c < D2; ++c){
memcpy(to_tmp, from, D1 * sizeof(*from));
from += D1;
to_tmp += D1_mul_D3;
}
}
return output;
}
关于c++ - Armadillo(C++)中的快速数组置换(广义张量转置),我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/51842301/