Я використовую python на ubuntu для аналізу тексту. Незважаючи на важкий обсяг роботи, програма виконує використання процесора, як показано на системному моніторі, постійно дорівнює 12%.
Я змінив пріоритет програми з Normalна, Very Highале це не мало ефекту.
Що обмежує кількість використання процесора, яку може отримати моя програма python, і як я можу це змінити, щоб програма могла використовувати більшу потужність процесора?
Відповіді:
Я припускаю, що у вас є процесор з 8 віртуальними ядрами (напевно, чотирьохядерний з гіпер-нарізкою)? Це означає, що один повністю завантажений процесорний потік / віртуальне ядро дорівнює 12,5% загального навантаження.
Інтерпретатор Python - це програма, яка за замовчуванням працює лише як один єдиний процес, тому не може скористатися більш ніж одним віртуальним ядром. Навіть якщо код, який ви запускаєте з ним, використовує багатопотоковість, він все одно використовуватиме лише один потік / віртуальне ядро CPU через GIL (глобальний замок інтерпретатора) .
Тільки якщо у вашій програмі Python використовується багатопроцесорний процес , який насправді запускає кілька екземплярів інтерпретатора Python і дозволяє їм виконувати завдання справді паралельно, ви можете скористатися кількома віртуальними ядрами / потоками процесора. (Як зазначив @SargeBorsch у своєму коментарі, існують також деякі просунуті способи досягти цього без багатопроцесорної обробки, але це зазвичай не те, що ви швидко пишете самі.)
Jythonабо IronPython, які не мають GIL.
Інша можливість, менш вірогідна в цьому випадку, полягає в тому, що програма пов'язана з диском, тобто вона читає і записує з / з диска, який повільно, і процесор чекає диска.
iotopвідстежувати програми, пов'язані з iowait