Webアプリの監視コストは一般的においくらが適正ですか？

監視コストは要件やアプリケーション、使用しているAWSリソースなどによって異なるのでどの程度が適正なのかといったことを判断するのは難しいと思います。
一般的に使用されるようなEC2、RDS (他のサービスも探せばあるかもしれません) であればドキュメントに監視項目を決めるのに参考になるようなドキュメントがあったりします。
https://docs.aws.amazon.com/ja_jp/AWSEC2/latest/UserGuide/monitoring_best_practices.html
https://docs.aws.amazon.com/ja_jp/AmazonRDS/latest/UserGuide/MonitoringOverview.html