|
|
EDA365欢迎您登录！
您需要 登录 才可以下载或查看，没有帐号？注册
x
0 i" n# k4 e8 h' A* w1 umatlab在计算大数据内存以及大矩阵运算时，单核运算显然无法满足高速的运算需求。其实matlab提供多核运算的解决方案，这里先介绍最简单的两种& w0 F/ ]1 F) L7 }
% L+ H4 |1 w, j% h8 p7 E: N- E①paRFor) c D( o) K8 x9 C$ z7 z
②distributed# I( u' f& H2 [6 T7 f0 w) L
8 |3 g" A2 Y/ F! m) z) w; W
parfor- f l* a1 A. L# v' `5 S
for循环一般最为耗时，解决方法就是采用parfor代替for，parfor可以自动将循环任务分配到多个核中，现在matlab的命令行窗口运行parpool(4)查看是否可以并行计算，没有报错则并行已打开。parfor运行时就会有多个matlab进程在计算。计算效率明显提升。5 d/ J S$ N8 T) D3 h( @
6 d6 P/ }1 h8 ^1 e
未使用parfor的代码：3 q2 n* l+ A1 F4 N! `, Q) ?3 b% o
- S! E" {( ^" C. [$ `2 Q
- answer = 0;
- for i=1:1000000
- answer = answer + i;
- end
+ U* A$ W+ Q. ]3 u/ [' f! ~
- Q; q/ b1 d! k( \* q+ w7 N5 `
时间： X% G+ @2 P0 S# c
7 V) F3 H0 K2 s4 s' o! O& {
% j7 v5 W- p5 n1 H4 Y9 v" y
* L, p7 K" @& {0 T$ G0 R Y使用parfor的代码：
X% f/ l) x" s; n
# w% q$ o' p8 s: H- answer = 0;
- parfor i=1:1000000
- answer = answer + i;
- end
- ], E+ X/ \- b N
1 k K- i4 R) X1 z$ V
. v" o. F* b) I) A+ K. I3 h7 }5 t$ v" x
时间：
N; @# [( Q! p! z6 S# W8 \0 I- g% M: z& g p" z
& Q! K; Q1 U! d0 I* ]$ g/ M, Y9 |& W( G( o# ^8 _, e+ t' l( |
显然加了parfor语句速度更快！3 |) K" O6 @& G7 h4 _
1 O% a+ g' c; _' V注意：* q3 }8 t3 ^: \0 {) }
% C: e) I8 C# X) K* I9 T+ e- r7 S' Z. X①parfor循环中不能使用迭代或者关联性的赋值语句，因为多个核计算时无法交换数据。- l! q- c% n; }: s
②parfor只支持一层循环，所以下面这种写法是非并行的，并且可能会出错。
. ]0 Q/ O, [( D③在程序运行之前MATLAB会提示你哪些地方不能用parfor（红色波浪线显示）; U$ ^1 R! a" L" k
+ `, y- k4 A; s O( xdistributed2 i6 P$ _% w6 d, @# j" c
对于大矩阵的存储问题以及计算的问题，除了自己分块外，可以使用matlab自带的内存分配解决方法，但需要确保你的电脑内存足够多，计算效率就会大幅提高。不然会有内存溢出的问题。! @* F; N& q5 ?8 Q/ _& x
具体方式是 G* d' @, A" B9 ~2 \. z2 z: K% H
+ J* R: j4 t7 t2 y, `
- tic;
- X = randn(10000)；
- x_dis = distributed(X);
- clear(X);
- whos
- a = svd(x_dis);
- a_out = gather(a);%distrituted数据类型变为double
- toc;5 x6 K/ ?* b" f) f
5 ^, \2 y/ G" x
3 B& L. ]2 Q' W7 u! N* c
之后可以采用x_dis代替X进行计算即可。gather函数的作用是把distributed数据类型变为double。8 w/ A+ \7 W3 y
5 ?# O$ ^1 Q" ^
此外，matlab的大多数工具箱都开始支持并行计算，所以如果该问题可以用自带工具箱解决的可以使用工具箱自带的并行计算方法。
- T' G9 T: }! @/ J% c q, Amatlab的Parallel Computing Toolbox工具箱就支持并行。 |
|
/1 
发表于 2020-9-24 15:21
收藏
淘帖
支持！
反对！