Хочу попробовать разогнать до 4х ядер. Посоветуйте пожалуйста, стоит ли это делать, и если да то, стоит ли улучшать охлаждение и какова вероятность неудачи.
Попытаться разлочить 4 ядро и L3кеш стоит без вариантов. Даже, если и пользоваться сейчас 4 ядрами не станете, будете знать возможности имеющегося железа.
Кулер ваш хоть и не ахти, но отвод до 95вт заявлен, что проверить способность процессора к разлочке не помешает; и так как для разгона даже трёх ядер он толком не годен, при смене будете точнее предполагать на какой теплоотвод нацеливаться. Касательно предпочтительности 4-х ядер относительно 3-х, то для игр и приложений 4 ядро в большинстве случаев даёт прямо пропорциональный прирост, так как многопоточность используется сейчас почти везде; но имейте в виду, что х3 3,7-3,8ГГц будет быстрее х4 3,3ГГц.

Сейчас, чтобы исключить вероятность перегрева перед анлоком в биосе вручную занизьте множители и выставьте такие напряжения:
CPU x10 (2ГГц) 1.3v / CPU-NB x8 (1.6GHz) 1.2v / DRAM x5.33 (1066MHz) 1.5v после чего перезагрузитесь и активируйте анлок
Последующая перезагрузка скажет вам с 99,9%-й вероятностью способность разблокировки скрытого ядра и л3-кеша на имеющемся процессоре с имеющейся платой и имеющейся версией биоса. Напряжения для предложенных частот завышены, что исключит недостаточность вольтажа для разблокировки, не переходя порог температурных возможностей кулера. В случае удачной загрузки посмотрите что вам нарисует утилитка CPU-Z о разблокированном процессоре (количество ядер/л3-кеш). Ежели операционка запустится нормально, то погрузите чем-либо систему и посмотрите за температурой крышки проца (на температуру ядер не обращайте внимания, она и до разблокировки вас обманывала), если под тяжелой нагрузкой эта температура не будет уходить за 60 градусов, то перезагрузившись верните номинальные напряжения и частоты: для CPU-NB x10 1,1в-1,15в или автовольтаж, DRAM - x6.66 1.5в/Auto, а вот CPU оставьте до следующего рестарта системы, убедившись, что стабильность в порядке. После CPU проверьте на 2,6-2,8-3-3,2ГГц, если для 3+ ГГц и понадобится повысить вольтаж, то делать это без фанатизма добавляя по 0,025в, с повышением будет расти стабильность на более высокой частоте проца, но будет сильно возрастать нагрузка на кулер и питальник материнской, поэтому выше 1,4в пока не ставьте. А в будущем даже с толковым охладом и питанием не превышайте для ЦПУ 1,5в - на моей практике 2 платы от MSI на AM3 сгорели на длительных стрессовых нагрузках при выставлении CPU - 1,5в, 870A-G54 под х6 Phenom'ом, 870-G45 под х4 Атлоном.
И кстати модель БП вы не назвали, чтоб успокоить в стабильности питания системы по линии 12в