并行计算是指在同一时刻执行多个计算任务，以提高计算效率和性能。这与串行计算相对，串行计算是按顺序一个接一个地执行计算任务。并行计算的主要目的是通过同时处理多个任务来减少总体计算时间，从而提高系统的整体性能。
并行计算可以在多个层面和领域中应用，包括硬件层面、软件层面和应用层面。
这篇文章将简要介绍如何通过任务划分、减少同步开销和内存优化等手段，克服阿姆达尔定律的限制，实现程序的高效并行计算。
SoC 不断增加处理核心，但它们不太可能得到充分利用，因为真正的瓶颈没有得到解决。
Imagination Technologies 副总裁兼中国区总经理刘国军展望2022以及未来……
异构计算是指将CPU、GPU、FPGA、DSP等不同架构的运算单元整合到一起进行并行计算。
并行计算可以划分成时间并行和空间并行。时间并行即流水线技术，空间并行使用多个处理器执行并发计算，当前研究的主要是空间的并行问题。
并行计算或称平行计算是相对于串行计算来说的。并行计算（Parallel Computing）是指同时使用多种计算资源解决计算问题的过程。为执行并行计算，计算资源应包括一台配有多处理机（并行处理）的计算机、一个与网络相连的计算机专有编号，或者两者结合使用。并行计算的主要目的是快速解决大型且复杂的计算问题。