Температуру нужно замерять под нагрузкой, толку от замеров в простое нет.

Чем нагружать?
3DMark - самый простой и "лёгкий" тест грузит проц и видеокарту.
ОССТ - более тяжёлый тест есть несколько режимов работы:
1. CPU: ОССТ - рекомендую использовать следующие настройки:

Это даёт средне-высокую нагрузку на процессор, этого вполне хватит чтобы понять есть перегрев или нет...
2. CPU: LinPack - настройки по умолчанию, грузит процессор по максимуму по сути "поджаривает" его, если процессор не в разгоне то этот тест гонять не обязательно.
3. GPU: 3D - выставляем разрешение вашего монитора + галочка FullScreen, тест очень серьёзно греет видеокарту если с картой проблемы можно её угробить.
4. Power Supply - очень тяжёлый тест по сути LinPack+GPU 3D если есть проблемы с железом можно легко угробить ПК, использовать только если уверен в своём железе и\или оно под гарантией

*ОССТ после прохождения или остановки теста создаёт графики с температурами (по умолчанию в папки Мои документы\ОССТ\дата).

FurMark - очень тяжёлый тест видеокарты, если есть проблемы с видеокартой можно легко её угробить, использовать только если уверен в своём железе и\или оно под гарантией...

AIDA64 - по сути микс из кучи полезного тут и информация про железо и тесты, как бенчи так и на стабильность, нас интересует - Сервис - Тест стабильности системы:

Данный тест хорошо подходит для тестирования системы в целом и для тестирования ноутбуков, так как даёт менее мощную нагрузку чем OCCT.

Чем замерять?
Для мониторинга температур можно использовать несколько программ:
AIDA64 - отображает значения CPU\GPU\HDD и т.д.
HWMonitor - отображает значения CPU\GPU\HDD и т.д.
CoreTemp - отображает температуру ядер процессора.
GPU-Z - отображает температуру видеокарты:
Вкладка Sensors два клика медленно по всем значением, чтобы зафиксировать макс значения, выглядеть должно примерно так:

То есть над значениями появляется надпись MAX...

*в версии 5.8 появился графический тест чтобы зайти в него - нажмите на иконку "?" справа от поля с типом интерфейса шины. Тест грузит видеокарту средне примерно как игра, то есть если есть явный перегрев его будет видно, а вероятность спалить карту минимальная. Довольно удобно тест и мониторинг температур в 1 простенькой программе.

Внимание! программы мониторинга запускать строго до запуска тестов, а не когда тест уже пройден.

Какие значения температур лучше не превышать?
Всё зависит от конкретных моделей процессора и видеокарты, общие рекомендации для современных процессоров и видеокарт выглядят примерно так:
Процессоры Intel - не рекомендуется превышать 72,5гр на крышке (то есть примерно 80гр по ядрам)
Процессоры AMD - не рекомендуется превышать 62гр (то есть примерно 70гр по ядрам)
Видеокарта - хотя производитель и озвучил цифру порядка 106гр, эксплуатация в таком режиме обычно довольно быстро убивает видеокарту, поэтому на мой взгляд макс температура видео не должна превышать 90гр при стресстестах, и не желательно превышать 70-80гр при играх или другой частой нагрузки на карту.
HDD - не рекомендуется превышать 40гр, SSD порядка 50-60гр.
Это общие рекомендации скорее всего комплектующие будут работать и при более высоких температурах, но не известно как долго и как работать, так что следовать им или нет дело каждого...