使用遠端直接記憶體存取加速 Kubernetes 中 Knative 函式間的資料交換

Abstract

無伺服器架構的出現讓開發者不需要維護大量電腦組成的龐大叢集，依然可以在有需求時有可以無限自動擴展的無伺服器涵式來使用，且只需以毫秒為單位來付出這些涵式在執行時所使用資源的費用，因此許多研究嘗試打造使用大量的無伺服器涵式來平行執行的應用程式以減少執行時間。然而無伺服器架構雖然可以減少應用程式的計算時間，卻因為涵式之間的資料交換必須透過遠端資料庫而增加資料輸出與輸入的時間。 為了減少資料交換所需時間，我們提出一種使用遠端直接記憶體存取 (RDMA) 來加速存取遠端資料庫的方法。我們選擇的無伺服器平台是建構在 Kubernetes 上的 Knative 以避免受限於特定雲端廠商。我們的方法是基於 Apache Crail。 Apache Crail 是一個使用遠端直接記憶體存取的開源分散式資料庫，應用程式想要存取 Apache Crail 之前，必須先跟 Apache Crail 建立 Crail 客戶端與遠端直接記憶體存取 (RDMA) Queue Pair，這個過程非常花時間。然而因為無伺服器涵式是無狀態的，無伺服器涵式間不能共享 Crail 客戶端與遠端直接記憶體存取 (RDMA) Queue Pair，導致每一個涵式都必須創建 Crail 客戶端與遠端直接記憶體存取 (RDMA) Queue Pair，增加許多額外的執行時間。 為了解決上述問題，我們打造基於 Apache Crail 的 Kubernetes 永久性資料儲存卷 (PersistentVolume) 來讓不同無伺服器涵式共用 Crail 客戶端與遠端直接記憶體存取 (RDMA) Queue Pair 以節省重複創建與銷毀 Crail 客戶端與遠端直接記憶體存取 (RDMA) Queue Pair 的時間。