First commit
This commit is contained in:
commit
36c861bd27
|
@ -0,0 +1,10 @@
|
||||||
|
app {
|
||||||
|
url = "https://git.lapiole.org"
|
||||||
|
}
|
||||||
|
|
||||||
|
pack {
|
||||||
|
name = "common"
|
||||||
|
description = "common variables for Nomad Packs"
|
||||||
|
url = "https://git.lapiole.org/infra/nomad/packs/common"
|
||||||
|
version = "0.0.1"
|
||||||
|
}
|
|
@ -0,0 +1,9 @@
|
||||||
|
variable "vault_prefix" {
|
||||||
|
type = string
|
||||||
|
default = ""
|
||||||
|
}
|
||||||
|
|
||||||
|
variable "namespace" {
|
||||||
|
type = string
|
||||||
|
default = "default"
|
||||||
|
}
|
|
@ -0,0 +1,41 @@
|
||||||
|
driver: freenas-api-iscsi
|
||||||
|
|
||||||
|
instance_id:
|
||||||
|
|
||||||
|
httpConnection:
|
||||||
|
protocol: {{ env "TRUENAS_API_SCHEME" }}
|
||||||
|
host: {{ env "TRUENAS_API_HOST" }}
|
||||||
|
port: {{ env "TRUENAS_API_PORT" }}
|
||||||
|
apiKey: {{ with secret (printf "%skv/service/democratic-csi" (env "VAULT_PREFIX")) }}{{ .Data.data.truenas_api_key }}{{ end }}
|
||||||
|
allowInsecure: {{ env "TRUENAS_API_INSECURE" }}
|
||||||
|
apiVersion: 2
|
||||||
|
|
||||||
|
zfs:
|
||||||
|
datasetParentName: {{ env "ZFS_PARENT" }}
|
||||||
|
detachedSnapshotsDatasetParentName: {{ env "ZFS_SNAP_PARENT" }}
|
||||||
|
zvolCompression:
|
||||||
|
zvolDedup:
|
||||||
|
zvolEnableReservation: {{ env "ZFS_RESERVATION" }}
|
||||||
|
zvolBlocksize: {{ env "ZFS_BLOCKSIZE" }}
|
||||||
|
|
||||||
|
iscsi:
|
||||||
|
targetPortals:
|
||||||
|
{{ range $idx, $portal := (env "ISCSI_PORTALS" | split ",") }}
|
||||||
|
- {{ $portal }}{{ end }}
|
||||||
|
interface:
|
||||||
|
|
||||||
|
namePrefix: ""
|
||||||
|
nameSuffix: ""
|
||||||
|
|
||||||
|
targetGroups:
|
||||||
|
- targetGroupPortalGroup: 1
|
||||||
|
targetGroupInitiatorGroup: 1
|
||||||
|
targetGroupAuthType: None
|
||||||
|
targetGroupAuthGroup:
|
||||||
|
|
||||||
|
extentInsecureTpc: true
|
||||||
|
extentXenCompat: false
|
||||||
|
extentDisablePhysicalBlocksize: false
|
||||||
|
extentBlocksize: 512
|
||||||
|
extentRpm: "SSD"
|
||||||
|
extentAvailThreshold: 0
|
|
@ -0,0 +1,14 @@
|
||||||
|
app {
|
||||||
|
url = "https://github.com/democratic-csi/democratic-csi"
|
||||||
|
}
|
||||||
|
|
||||||
|
pack {
|
||||||
|
name = "democratic_csi_freenas_api"
|
||||||
|
description = "CSI plugin for Nomad to use storage (NFS and iSCSI) from FreeNAS / TrueNAS"
|
||||||
|
url = "https://git.lapiole.org/infra/nomad/packs/democfratic_csi_freenas_api"
|
||||||
|
version = "0.0.1"
|
||||||
|
}
|
||||||
|
|
||||||
|
dependency "common" {
|
||||||
|
source = "https://git.lapiole.org/infra/nomad/packs/common"
|
||||||
|
}
|
|
@ -0,0 +1,87 @@
|
||||||
|
job "democratic-csi-controller" {
|
||||||
|
datacenters = ["dc1"]
|
||||||
|
|
||||||
|
group "iscsi" {
|
||||||
|
task "iscsi-controller" {
|
||||||
|
driver = "docker"
|
||||||
|
|
||||||
|
config {
|
||||||
|
image = "danielberteaud/democratic-csi:latest"
|
||||||
|
|
||||||
|
args = [
|
||||||
|
"--csi-version=1.5.0",
|
||||||
|
"--csi-name=org.democratic-csi.iscsi",
|
||||||
|
"--driver-config-file=${NOMAD_SECRETS_DIR}/config.yml",
|
||||||
|
"--log-level=info",
|
||||||
|
"--csi-mode=controller",
|
||||||
|
"--server-socket=/csi/csi.sock",
|
||||||
|
]
|
||||||
|
|
||||||
|
network_mode = "host"
|
||||||
|
privileged = true
|
||||||
|
userns_mode = "host"
|
||||||
|
}
|
||||||
|
|
||||||
|
template {
|
||||||
|
data = <<-EOF
|
||||||
|
driver: freenas-api-iscsi
|
||||||
|
|
||||||
|
instance_id:
|
||||||
|
|
||||||
|
httpConnection:
|
||||||
|
protocol: {{ env "TRUENAS_API_SCHEME" }}
|
||||||
|
host: {{ env "TRUENAS_API_HOST" }}
|
||||||
|
port: {{ env "TRUENAS_API_PORT" }}
|
||||||
|
apiKey: {{ with secret (printf "%skv/service/democratic-csi" (env "VAULT_PREFIX")) }}{{ .Data.data.truenas_api_key }}{{ end }}
|
||||||
|
allowInsecure: {{ env "TRUENAS_API_INSECURE" }}
|
||||||
|
apiVersion: 2
|
||||||
|
|
||||||
|
zfs:
|
||||||
|
datasetParentName: {{ env "ZFS_PARENT" }}
|
||||||
|
detachedSnapshotsDatasetParentName: {{ env "ZFS_SNAP_PARENT" }}
|
||||||
|
zvolCompression:
|
||||||
|
zvolDedup:
|
||||||
|
zvolEnableReservation: {{ env "ZFS_RESERVATION" }}
|
||||||
|
zvolBlocksize: {{ env "ZFS_BLOCKSIZE" }}
|
||||||
|
|
||||||
|
iscsi:
|
||||||
|
targetPortals:
|
||||||
|
{{ range $idx, $portal := (env "ISCSI_PORTALS" | split ",") }}
|
||||||
|
- {{ $portal }}{{ end }}
|
||||||
|
interface:
|
||||||
|
|
||||||
|
namePrefix: ""
|
||||||
|
nameSuffix: ""
|
||||||
|
|
||||||
|
targetGroups:
|
||||||
|
- targetGroupPortalGroup: 1
|
||||||
|
targetGroupInitiatorGroup: 1
|
||||||
|
targetGroupAuthType: None
|
||||||
|
targetGroupAuthGroup:
|
||||||
|
|
||||||
|
extentInsecureTpc: true
|
||||||
|
extentXenCompat: false
|
||||||
|
extentDisablePhysicalBlocksize: false
|
||||||
|
extentBlocksize: 512
|
||||||
|
extentRpm: "SSD"
|
||||||
|
extentAvailThreshold: 0
|
||||||
|
|
||||||
|
EOF
|
||||||
|
|
||||||
|
destination = "${NOMAD_SECRETS_DIR}/config.yml"
|
||||||
|
}
|
||||||
|
|
||||||
|
csi_plugin {
|
||||||
|
# must match --csi-name arg
|
||||||
|
id = "org.democratic-csi.iscsi"
|
||||||
|
type = "controller"
|
||||||
|
mount_dir = "/csi"
|
||||||
|
}
|
||||||
|
|
||||||
|
resources {
|
||||||
|
cpu = 100
|
||||||
|
memory = 192
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
|
@ -0,0 +1,3 @@
|
||||||
|
path "kv/service/democratic-csi" {
|
||||||
|
capabilities = ["read"]
|
||||||
|
}
|
|
@ -0,0 +1,47 @@
|
||||||
|
job "democratic-csi-controller" {
|
||||||
|
datacenters = ["dc1"]
|
||||||
|
|
||||||
|
group "iscsi" {
|
||||||
|
|
||||||
|
task "iscsi-controller" {
|
||||||
|
|
||||||
|
driver = "docker"
|
||||||
|
|
||||||
|
config {
|
||||||
|
image = "[[ .democratic_csi_freenas_api.image ]]"
|
||||||
|
args = [
|
||||||
|
"--csi-version=1.5.0",
|
||||||
|
"--csi-name=org.democratic-csi.iscsi",
|
||||||
|
"--driver-config-file=${NOMAD_SECRETS_DIR}/config.yml",
|
||||||
|
"--log-level=info",
|
||||||
|
"--csi-mode=controller",
|
||||||
|
"--server-socket=/csi/csi.sock"
|
||||||
|
]
|
||||||
|
|
||||||
|
network_mode = "host"
|
||||||
|
privileged = true
|
||||||
|
userns_mode = "host"
|
||||||
|
}
|
||||||
|
|
||||||
|
template {
|
||||||
|
data =<<-EOF
|
||||||
|
[[ fileContents "files/iscsi/controller.yml.tpl" ]]
|
||||||
|
EOF
|
||||||
|
destination = "${NOMAD_SECRETS_DIR}/config.yml"
|
||||||
|
}
|
||||||
|
|
||||||
|
csi_plugin {
|
||||||
|
# must match --csi-name arg
|
||||||
|
id = "org.democratic-csi.iscsi"
|
||||||
|
type = "controller"
|
||||||
|
mount_dir = "/csi"
|
||||||
|
}
|
||||||
|
|
||||||
|
resources {
|
||||||
|
cpu = [[ .democratic_csi_freenas_api.resources.cpu ]]
|
||||||
|
memory = [[ .democratic_csi_freenas_api.resources.memory ]]
|
||||||
|
}
|
||||||
|
|
||||||
|
}
|
||||||
|
}
|
||||||
|
}
|
|
@ -0,0 +1,3 @@
|
||||||
|
path "[[ .democratic_csi_freenas_api.vault_prefix ]]kv/service/democratic-csi" {
|
||||||
|
capabilities = ["read"]
|
||||||
|
}
|
|
@ -0,0 +1,27 @@
|
||||||
|
variable "vault_prefix" {
|
||||||
|
type = string
|
||||||
|
default = ""
|
||||||
|
}
|
||||||
|
|
||||||
|
variable "namespace" {
|
||||||
|
type = string
|
||||||
|
default = "default"
|
||||||
|
}
|
||||||
|
|
||||||
|
variable "image" {
|
||||||
|
description = "Docker image to use"
|
||||||
|
type = string
|
||||||
|
default = "danielberteaud/democratic-csi:latest"
|
||||||
|
}
|
||||||
|
|
||||||
|
variable "resources" {
|
||||||
|
description = "Resources allocation for each instance"
|
||||||
|
type = object({
|
||||||
|
cpu = number
|
||||||
|
memory = number
|
||||||
|
})
|
||||||
|
default = {
|
||||||
|
cpu = 100
|
||||||
|
memory = 192
|
||||||
|
}
|
||||||
|
}
|
Loading…
Reference in New Issue