Å innlede en setning med «men» eller «og»

På barneskolen lærte vi at man aldri skal begynne en setning med «og» eller «men». Men er dette egentlig en regel? Og hvor stammer den i så fall fra?