- มิสเตอร์ริเวต คาแวค ชาวอังกฤษตำแหน่งที่ปรึกษากระทรวงพระคลังมหาสมบัติใน พ.ศ.2441 ได้เสนอความเห็นให้แยกการสรรพากรออกจากกระทรวงพระคลังมหาสมบัติ ไปอยู่ในบังคับของกระทรวงมหาดไทย เพื่อมิให้เกิดการทุจริตฉ้อเงินและผลประโยชน์ของแผ่นดิน ซึ่งรัชกาลที่ 5 ทรงเห็นชอบด้วย ใน พ.ศ. 2442 จึงให้ยกกรมสรรพากรนอกมาขึ้นกระทรวงมหาดไทย แล้วทรงพระกรุณาโปรดเกล้าฯ แต่งตั้งให้มิสเตอร์ไยลส์ เป็นเจ้ากรมกรมสรรพากรนอก ส่วนมิสเตอร์เกรแฮมได้รับแต่งตั้งเป็นเจ้ากรมกรมสรรพากรใน ขึ้นอยู่กับกระทรวงนครบาล และมิสเตอร์คาแวคก็ได้รับแต่งตั้งเป็นอธิบดีกรมบาญชีกลาง (พ.ศ.2443-2445)

การทำงบประมาณแผ่นดิน

                     เพื่อให้การรับจ่ายเงินของแผ่นดินเป็นไปอย่างรัดกุมใน พ.ศ. 2439 พระบาทสมเด็จพระจุลจอมเกล้าเจ้าอยู่หัวโปรดฯ ให้มีการจัดทำงบประมาณแผ่นดินขึ้นเป็นครั้งแรก กระทรวงพระคลังมหาสมบัติเริ่มวางระเบียบการจัดงบประมาณรายจ่าย แล้วรวบรวมขึ้นทูลเกล้าฯ ถวายเพื่อขอพระราชทานพระบรมราชานุญาต และจะไม่มีการจ่ายเงินเกินงบประมาณโดยที่มิได้รับความเห็นชอบจากองค์พระมหากษัตริย์เสียก่อน นอกจากนี้ ยังวางระเบียบการควบคุมการใช้จ่ายเงินของกระทรวงและกรมต่างๆ ทั้งหมด การจัดงบประมาณอย่างคร่าวๆนี้ เป็นการกำหนดรายจ่ายมิให้เกินกำลังของเงินรายได้ เพื่อรักษาดุลยภาพและความมั่นคงของฐานะการคลังของประเทศ ใน พ.ศ. 2444 รัฐบาลสามารถจัดพิมพ์งบประมาณรายรับรายจ่ายแผ่นดินขึ้นเป็นครั้งแรก