O FX 6300 costuma subir pra 3.8~4.2Ghz sem alterar voltagem.
Tudo depende da sorte de pegar um processador bom para overclock e também da placa mãe.
Apesar da sua placa mãe ser mais simples, provavelmente 4.0Ghz nele vai tranquilo.
Primeira coisa é ir na BIOS e desativar o Turbo Boost, feito isso suba o multiplicador até 4.0Ghz e saia salvando.
Ao chegar no Windows, se quiser, teste com um programa de stress de CPU tipo Prime 95. Se tiver tudo OK, inclusive as temperaturas, então beleza.
O ganho vai haver, mas depende do jogo e do fato se há gargalo. Quando se há gargalo o ganho geralmente é maior.
Placa Mãe: Asus M5A97 EVO AM3+
Processador: AMD FX 8320 @ 4.4Ghz Black Edition
Cooler: Cooler Master V6GT
Memória: 16GB DDR3 Kingston HyperX Fury 1866mhz
Vídeo: Nvidia GeForce GTX 770 EVGA SC 2GB GDDR5
Fonte: Sapphire Pure 625W Modular 80 Plus
SSD: SanDisk 128GB SATA III
HDD: Seagate Barracuda 1TB 7200 RPM SATA III
Monitor: LG IPS LED 23'
Sistema: Windows 10 Pro X64 Ver. 1607
Teclado: Cooler Master Devastator MB24
Mouse: Cooler Master Devastator MS2K
Som: Logitech 2.1 Z313
Gabinete: Thermaltake V5 Black Edition
IMAGEaHR0cDovL2kuaW1ndXIuY29tL09WQTFpRkEuanBn
Sandy Bridge e memórias DDR3 - Diferença em jogos || A Diferença que o Cache L3 Pode Fazer || Entendendo os Efeitos Presentes nos Games de Hoje || [Guia] Otimizações para SSD's [Windows 7/8/10]