在我国刑罚只能由什么机关以成文法的方式制定

结论：在我国，刑法只能由国家最高权力机关以成文法的方式规定
解析：
在我国，刑法只能由国家最高权力机关以成文法的方式规定。
我国刑罚只能由刑法加以规定，除刑法以外，其他任何法律都无权规定刑罚体系。
而且，刑种按照由轻到重的顺序加以排列，人民法院必须依法按照这些刑罚方法及条件、幅度、方式来判处刑罚。
法律依据：
《中华人民共和国刑法》第三十二条
刑罚分为主刑和附加刑。