aws cost calculator

亞馬遜成本計算器

這是基於堪薩斯州的「亞馬遜成本比較」：https://gitlab.beocat.ksu.edu/Admin-Public/amazon-cost-comparison

請注意，沒有考慮 CPU 速度和/或超線程。 Corase 資源使用（CPU 數量、RAM、GPU）是全部考慮的因素。如果您有理由相信您的叢集和 AWS 之間存在一致的比例因子（例如，CPU 時脈速度的比率、超執行緒帶來的一致性能影響），您將需要相應地調整成本估算。

先決條件

• 蟒蛇3
• pip3 模組
  • pymysql
  • 設定工具
  • 車輪
  • 要求

請注意，這並沒有假設如何使 python3 及其模組可用。您可以自由使用虛擬環境、環境模組、主機安裝等。

所有 python 腳本都接受 CLI 參數。將-h標誌傳遞給它們以獲取每個腳本的可用參數清單。

入門

1. 首先執行00-prepare-mysql-onetime.sh 。這將提示輸入 mysql 使用者名稱和密碼以設定資料庫環境。您需要知道此步驟的 MYSQL 管理員密碼。
2. 接下來，使用fetch-aws-pricing.py導入目前的 AWS 價格。該腳本可以隨時運行以更新成本計算中使用的 AWS 定價資訊。若要顯示目前定價值，請執行print-aws-pricing-data.sh 。
3. 接下來，使用01-import-job-info.py將 slurm 作業資料匯入成本分析資料庫。必須執行此腳本才能將最近的作業匯入資料庫。
   • 如果您有大量作業歷史記錄，則此步驟可能需要相當長的時間才能運行。您可以透過限制搜尋作業的時間段來減少運行時間（例如，僅匯入最近 N 天的作業）。您可以使用--verbose標誌來取得進展過程中的狀態輸出。
4. 接下來，使用02-calculate-job-costs.py計算每個作業的資源需求和每個作業的成本。
   • 此步驟比作業導入步驟快得多，但對於大量作業可能仍需要很長時間。
5. 最後，使用03-calculate-total-aws-compute-cost.py計算累積 AWS 成本。

除了 AWS 計算成本之外，您還可以使用04-calculate-aws-storage-cost.py來獲得粗略的儲存成本估算。此腳本僅顯示多個檔案系統的各種儲存服務（EBS、S3、Glacier）的 AWS 儲存成本，包括目前使用的儲存數量以及檔案系統的最大容量。

有關 MySQL 資料庫表的資訊可以在 mysql-prereqs.txt 中找到。