io 密集型用多线程,cpu 密集型用多进程,怎么区分是什么型?
处理大影像,单进程内存占用 3g 多,cpu10%左右,想批处理,算什么型?
处理大影像,单进程内存占用 3g 多,cpu10%左右,想批处理,算什么型?
|
maichaelNov 29, 2019
1
不就看你是计算多还是 IO 多么。你这种一般算是 IO 密集型。
|
|
ruandaoNov 29, 2019
2
web 大多没什么计算,比较偏向 IO
|
|
unixenoNov 29, 2019 via Android
3
大量网络,文件操作就是 io 密集型
大量纯计算就是 CPU 密集型 |
|
wuwukai007Nov 29, 2019 via Android
4
用 pysnooper 分析下下耗时的分布,
|
|
andylsrNov 29, 2019
5
处理影像应该算计算密集吧
|
|
waterlawNov 29, 2019 via Android
6
cpu 密集型:cpu 占用越接近 100%, 耗费多个核或多台机器
io: 网络占用,文件 io 多 |
|
waterlawNov 29, 2019 via Android
7
图片处理应该计算密集型, 有 io 的话也可能有 io 密集型, 因此可以考虑 多进程 + 多线程
|
|
zhoucan007Nov 29, 2019
8
图像处理是两个都占了,对读写和计算都要求比较高。非要强行对比的话,可以这么理解,是要足够大的内存(读写速度)还是足够大的算力?算力可能更重要吧。
|
|
tt67wqNov 29, 2019
9
htop 看看不就知道了
|
|
imn1Nov 29, 2019
10
你这个要具体分析一下,cpu10%不一定就不是计算密集,如果数据缓存加大,cpu 大幅飙升的话,很可能是 cpu 密集
最好查一下瓶颈在哪 |
|
shuaili19870320Nov 30, 2019
11
这两个概念是可以同时存在的,又不互斥。
大视频渲染有可能是多段同时计算同时写入吧,前面那个说的对,可能两个都沾了。 |