Generate and apply Talso configs

2023-08-29 00:33:17 +02:00 · 2023-08-29 00:33:17 +02:00 · 67da94650e
parent 971db7ef85
commit 67da94650e
13 changed files with 352 additions and 13 deletions
--- a/.config/ansible-lint.yml
+++ b/.config/ansible-lint.yml
@ -0,0 +1,27 @@
+---
+profile: production
+
+offline: false
+
+loop_var_prefix: ^(__|{role}_)
+task_name_prefix: "{stem} | "
+
+var_naming_pattern: ^[a-z_][a-z0-9_]*$
+
+enable_list:
+  - args
+  - empty-string-compare # opt-in
+  - no-log-password # opt-in
+  - no-same-owner # opt-in
+  - yaml
+
+skip_list:
+  - yaml[line-length]
+  - var-naming[no-role-prefix]
+  - loop-var-prefix[missing]
+
+# write_list:
+#   - none
+#   - yaml[empty-lines]
+#   - yaml[new-line-at-end-of-file]
+#   - yaml[comments]
--- a/.gitignore
+++ b/.gitignore
@ -2,3 +2,4 @@
 *.old
 /.idea
 /.ansible
+/configs/*/*.yaml
--- a/.yamllint
+++ b/.yamllint
@ -0,0 +1,4 @@
+---
+rules:
+  truthy:
+    allowed-values: ['yes', 'no', 'true', 'false']
--- a/ansible.cfg
+++ b/ansible.cfg
@ -5,7 +5,7 @@ remote_tmp = ~/.ansible/tmp
 vault_password_file = ./.ansible/vault_pass
 gathering = smart
 fact_caching = jsonfile
-# fact_caching_connection = ./.ansible/facts
+fact_caching_connection = ./.ansible/facts
 fact_caching_timeout = 86400
 interpreter_python = /usr/bin/python3
 host_key_checking = false
--- a/configs/deovero.k8s.snel.com/env.sh
+++ b/configs/deovero.k8s.snel.com/env.sh
@ -0,0 +1,13 @@
+# You can 'source' this file to set the context for kubectl:
+#   source ./env.sh
+
+if [ -n "${BASH_SOURCE+x}" ]; then
+  # Bash
+  SCRIPT_DIR="$( cd -- "$( dirname -- "${BASH_SOURCE[0]}" )" &> /dev/null && pwd )"
+else
+  # Zsh
+  SCRIPT_DIR=${0:a:h}
+fi
+export KUBECONFIG="${SCRIPT_DIR}/kubeconfig.yaml"
+export TALOSCONFIG="${SCRIPT_DIR}/talosconfig.yaml"
+unset SCRIPT_DIR
--- a/configs/deovero.k8s.snel.com/talos-secrets.yaml.enc
+++ b/configs/deovero.k8s.snel.com/talos-secrets.yaml.enc
@ -0,0 +1,247 @@
+$ANSIBLE_VAULT;1.1;AES256
+62626639623661303437336335653862326264633561626561653238663238346265333131393830
+6466616362323330323131656237376638363265633361650a643864326130346232353236333733
+30623764666561303938383662383163663938316635353364313438323561353639646633636335
+3335646332313132300a633335303936353838336335356161633632363266636430623433626238
+32333434616665373739376530363930643431653331306165333036343561313239613033643534
+37383164623331643131613639663364646637663965343363333165623932313761356533626231
+38623736653464326138656437353836363235623566333866383562383232393261643065643037
+35633237666234613431353766333733393533366133633230343035653864356434633938623564
+32343936323933303132353935303462343962653931313837643439623032343563383937303034
+37643465383834393464323066613764643565336530653661663635386334346139623561386232
+65393966313937323138333466363036333431663233343634646237656434396564353538616236
+61653461363637303033633665643163663832343766373738336662623034636339383739326635
+64373438396263346561643339616464666561366630363664613561343863303063313666356438
+34343937663361646338623064303230313365633639666335303536663931333733383865303162
+30383633386234343464633036383463326336336633343831336132343865396331316663663438
+64333439356566333030373538303463623432396361633264363432326432326366353537633463
+38333535303730393634623662396234383833393232396130333637353261653339376335356664
+62343938626662393630373436316462383564666566656538666638313739626631316137373730
+63386637363965346537626134613261666337633536346339346164626534646266303364666464
+38626235373831646335666238303933653731353534396465303637343431313739343035306463
+61376239646530366633373838366239353564373661373364656665333133373536336234306634
+66376435326661623932623839303136393831396436636162623039316136373031386637386431
+37383739323565363833323964323135346436646262343239623633396432313231393933653761
+31316536313261383661663032663837396139313531326661353264336561616133353538303535
+65343233323465663037343563303436643365316463653661353734666230303431383638386366
+65643639663161613230396533653633393637396164653433656466376661373637656538303561
+61623365633637336532636636303461623438653166646635623231363832363532323534633062
+35656464383933373061366663623037306530383163663531633334333431613639303134663334
+66316637653237316633633237323661366437613331336236613136396639303332653966353637
+64616464353737343733306438393536383862626332393339653362303031313538373663663736
+62323938373031323864396431643935613832656466383231396635383038613338656165346532
+31393665346366363565653066356137616336646432636633303430623738383937633661363164
+31623363353832353066626637623531316536313665623430356463383333613339323861626535
+32623432323737613935653332333438313938623430343037656435376231396239353231393763
+31393964393835383061346165623939363531353837373030396136373535623964363439356431
+65336362313161343165353830363237356338633531646361326639306566313235333832386138
+33376434303535643133306362323132383661396436623262653332626164633730306431396534
+38666631636365643338376530653762376666306232346362373437366564373238626438303634
+65623634316439346232336138613766356139303831306366316461633830323766356465353432
+61363833633361366538616635656364633361373264636633363239623434386138376361336164
+32363134613933393232353836616362303731363363656365346339316462306531616165623363
+37326636666239303634333931666130376437653230313364373331656433353766386633666165
+31386535326237626162353133356234303566326237666538663538666639373761656531653132
+65326531376163623732623163666439373264333961373233373065356334303130356238663339
+30313261306263666336363833363632613935333963323034623366393037373139346166653537
+36303838643462356537336361333936343433316338616566623432653865396665326235316130
+65366536663338383166336163303465333262346163306366646563363739653635616238346136
+35313839396330366564386562623563353565336232646436613832653231323233323565313564
+32333565613137323535363464646131653932353630336132346633623261373061643131333465
+33393738303437303535333166333833333233383063316164366263613936393664653262643738
+34386439623736643933363031326166623764346431363136343964313832623465333163656530
+30393061316163663363613236623833653931386330306565353664623264306337316261333161
+34656563396366343937323132646135613965306237356235366436306434373864336232376432
+63353732313436666664396261663531663232653834653338303062666431636333646439313230
+39376230363864613032313061656536333130366661363466313035303333313964333663336638
+37396138313265643263366235663839333736663264383137303531393462313238646565326432
+61323938356132623736376631353938376534346437653632363763303935656361353162326339
+64393966333437303434653861663832623334353362313639656231646437336330303861633664
+36393632633433316233306165343937636166623363343663303461646138393662626134663932
+63303633363734646433636664336564343639366164356566613333643866623532343666346534
+36353933326635633466653636356334346533323437623162336232333438313831383961366263
+31653839633164653434326439623136643864383464313765643965323764383936356634653236
+30303733626432353534336162656632383661393038636334393362333561656330366430336435
+61383939393361643666663430356534383661323731623136613632636337303665626435633039
+38636434376232336536356132306261656662383665313961386635373461396135323035623962
+34643361313561303562386232303639636336653336393633303063303961353535666635336531
+30633466613337376131626533623765363134386138613534346431353263303032613331313561
+65356235623466626534613637363739323838353532636339346339663034653162366230366363
+33393734663637386364386565653266313762363239636639663866653834356137336431383639
+38636532666533386566633931663664363333666161393362366261613661616630333339323935
+34646332363364383364613535383838376338313233333433353630393036623738306333346536
+32666236306135333835303662366130386639333830316339623662666635313036393539336164
+65313466386264313761313639366135633530356535353630393934323964333137363131383065
+30666531323061336261353137326630326661616438646530633963343831373535346665633535
+32623832353431656361383630616264393164326534353464303931383939366337626630663664
+38306435666465303531663136663031386663333433363939343831323733363262393030376465
+62333261653864393135373636343533366539633665363738666665373938313364313335663963
+33633963353466346636316331373936326364653334656434636263333562643434643436376663
+63343334396561646138386663363864306532316332613464663038656335333763626134303865
+31623036326638326630376363376638303765316431383539306238653765303132346539616335
+33376166333366343863653836396437613662653339643433373963616132383665333265383365
+63306365333033333061373462396463636463393564656261383061333133326638653330623464
+32303162336134323865333339393865373661663762343433356261333361366564656238383837
+63356463633435643165626337376531336334626432313237393934313538306132613830363737
+37333630626666383662323562303236396263396637383466303630383262393537663234373037
+36356433323636636334626165613465383162323533666434356166616233323836386163373331
+36383437326263306664666665363431346537343433323632353639643334393161323631353137
+64323930303964373035633762666431343564336662353564616235376436393938626635373266
+31366561663134366439663763363564376134396538616461306565353637343135396133653733
+64653932343462623361633865633938363366383966363737393631666163386333613132326139
+38323266363562306363313137303563643161666135316130343932666333336263623966356332
+63346436643636316334393433333761366135366432363337626263346531643030663737663536
+38333138656362363166363737353738366363616230373766623437316335346334383166633939
+34626561643637346263336461353664363433326339386662646664633835633061353930636261
+62303037323930633935336161633139356537333538383234303866303561353032643135383165
+38656438653139316265353064633539343131386534666334386533366339313138366630666333
+37343835326534353133353234633630303833336334626432323063333661313966663862383935
+63353166616662383532646564393934656566336538326436626266626639333934663931636662
+38303063383733653561303362303261656437326263633432336339613237313137313533633635
+30623037663636306466363935336530366630323035336335643535663531626538323534633965
+34616462336632356437346537653535373031613439663231326331613633633233396537346338
+30356666353137356633373361653566303536383563626564306166326363616162663034306637
+38306164613861623334353061386563393163616130343439303437616539396162636537386631
+34653739316163623263356531306139636466363138613632643839626131376366633663636431
+62646136666639343938613932636664666365616536656165636361396261653730373135316639
+65623138393761393965616236356332363333303831373833613930613933353861383835316338
+36643661666533636430313164313762393661343935393539613364366266613537356166323466
+33353962346438333065343834356132346361366666376235663166313835646263633439376664
+61666538653633653066633038386562626639633461353264373861623430373566323531383530
+38356364623738366362303035653437663830333736616462663933326661316633396431623564
+66643832633465643262616262636634363035343466663263653365656537643533346638353665
+36313138386532303232346136363739636461386666636464393839656162646137633139376330
+37623765363135646138313835353366376161313239376331343531373931653435636330343662
+38626432313933386464626364383066653265326565376564656564636533313635343965636535
+64313536636530366231356533623233353630346236333831626633366565613461343463306339
+63656464336163306238343333323162323864656336363565653935663064313962303863663264
+38323062373734303061383766303433616665626365313966363933303363626162656536313665
+30363864373131313962363661303362623731663465623634613539383564346630346236373237
+30646238633565353931633032306136316263323062323734656638393963326135663138336636
+63666331633731383063333232613563313465313231616665613831613737356137313637636236
+61643837323932393163663231353830623535366163376365633832636430376330393231386166
+31623033363031323861313839333836653364323339363439633839633234346338623035623632
+62376533353333323162336162633136626234363766646439336139656332383064653461643632
+65643838303138386530333466323233326539343430623631393032333035656333336134386565
+64616637393166376533383131313330613132396661393462626163333236633961616633636338
+39383865373063326565353462356665363466383433376535303135313661326437646139373639
+35323733623065643236323935333333623764343035326335336239666536333235663238356136
+62366230303566333736616266386466353366653130653436356631396663633131633965656130
+66386237643966313734663163313262653035383062313464633939333563616439623061303265
+37333765666164346662653735613065626131303064353630396461656537356635626236613065
+36393864646664636230666637663363386562356138343536373462613431383531633162646363
+37663238626437383562633566376439333934363131353466656331326635303264316666616564
+30623330373061363231346232656436613164663732313664373930393732323566336335363930
+36323266373664373237623336343232306330373964366539643363666436336662613636623264
+64393937346665343161383236326137343963633561613330393365623837626163313064356334
+35356266646637336336313463363337353064326634333161343532663238313462396436323463
+66373437343462653631633830323636666633333239363131383938616162613065336131353461
+30663336363230393465303133663638303434326233653461626661366432373831353139323438
+38653563313739363633373766656464313232626265663131356333386166303664313535326231
+31656436633863346435643338333732303534323338363630626235643333376131356631333433
+35376431326133353664623535333466396264653731653238623933646466333033396462363864
+64313531643130313633323062393339386231383339663934636631363665343634346132653263
+61396465323065643161616532656562663761343737333432306139623331356335333938376638
+63363930646263623839653763616361393261663032626230666363636136653638343634383463
+39333862656535316535366237633239323134303238616162623336633662353037633034323166
+32396562626336613732376237333233636633313335666137613062613963323537323166396530
+30626161623265663366633734643739383865653736373862623062376431646262623630613461
+62633030346664343866353332623530316437316633353932333438316461623934613236636135
+35353833643463386433323764653030623835383039323463306665323865383935653735386365
+61373662626334333036396235306330633731313639316533663463626436636335666234656563
+62616266633561643533353734646235393134653430653131343165333133353138643862343831
+36373334353235323337343235306537626437313239623130306532633064336138323761373037
+39346433653436663131303234333662623531303663336164383732356332353539626666316638
+64666131356330316364333730653737666238653833383561363262623433353164656435396231
+32353866626462653861646432376135663535646235323238343638613034393933363065646130
+63366130666532356632633761313336363637663162336365306264303830623932613038636134
+36343739333664323833396665326233356639646233396633623835393432636537376634616462
+61383239313631616532643766333966643064396434333666326639633635363430613838393064
+31363065373863343638613363386532643437633033613766636662323836653536303661303862
+62313735326434636163633635306533633739323830353164333837373963626430363961393631
+34313436343864376463366339393531303564316631363662323434383862633334373036316465
+34373363303131376438653938623436663465656533623763323432666265366537316531666237
+37306534303936313038323265656663316237633535636231346664343138653732623230323830
+34633361356336633463656464353437613035613663393263366238353139343634353832363964
+39336637333330363634356639306237633536363261323063313237373639613039323834313861
+36313966616266323839333231393739303061383335356233636539633864333031326533353835
+33366561393562303937653066303334333235396639326538653039653633623766636638353139
+38303465626139663434646531623130323634666638366261663436613739643536386362643535
+38616532363333326132323733373735316530303238393663366136376333303333323333356266
+37663163363362343130633438366230393462373539373963353661373963646230656532636430
+37663039363666323565616433623931663265613465303037363463346266323763383935393366
+35313163376635333964393938653866386164663232626138386239653032373234373339626238
+37313561376432616265653364316637346361323531323137653338316366303633373830623561
+35373362323161383266666137656336666233316662303866303364653233336239636534383733
+38323464636339363461373466383263303062323063303035623030343062613433383139363763
+38663537626630653832303232306335306132386333326630383061636533336338313237383764
+35626634346663313263313135306365373664373736323431663333373262666438306562373237
+35663061646335366139643633393931613532353465336332396133323264336366356239396132
+32373061313837326266353039313034316462636366646535636566656136343266346564396236
+65383461333837303839353231323265333734646361623364643833326630316535386638373463
+34643566313038316535653533646563373038643062323037623530303137363964633635376236
+37633131653136653636646235623034636535643134663431613863616637636162653637306366
+38623733363338346531393362313361363531656463333039663937303334363639663962656363
+38313864656334353966396539383064666166366266393737646662356264363939663361616532
+32373439346562383766306165626662613333303032356633636631356634633965353866393362
+63363131333765643330306437393135353662383765616665376162393435646163616234646238
+33643034373732616666346133353236383463646532633432623835356433363666623862306166
+34626332386333326532663665326366393931323931636134663634656335616333303261383133
+38366564376133376531633234323032303433313439636262666138346132306430666464346366
+35663164363733353538303865336463316263646637303634343064623237626664363533653535
+38643837303831396435633964363132343966646431303938303361393632346238666131353566
+63666561636538343263303463313333316239666235623665633265663238643430623939663632
+30323232363237616461336439623334363833656539353866646233356138316161653466346539
+63303137326438383364656639633134346366666462663136646235666336316137323865373139
+63366562656534316330303830323637613661383764363439633837306464656539316361353036
+35323039333735336231336434656232643863653331353830646331386464383164613162653662
+35383631373934653531663436386136313534663430313966306665316362633261383964633566
+33613736633564343239333238656139346562323333653164383362326432343739376237386163
+33396431626431363635346234616530336131343365616334656232663235333537376565653564
+39396164623232633563616536333465323165313964316362386431303334336264643339383133
+34663163303939363535366566613865313738303338353232373434616431626336613335633637
+62616166383463336638303961623337633238656663353137383164313037666334653363643662
+33353835393035623130303564636434396563613063336130646665633765373363653963346662
+31616137376434336437356136623565633235653865646234636138323039323437356235656164
+39643434306438316339613861623033353965393066383935623435336635353235653933633536
+62386539626434343162663861373866303931626436303735376334323563333466336439373032
+37373061373431663166393031326366336330353462333764313035636233303765666365353235
+34623039346231656261633930303165663233356365643730343763343139623932363864373466
+32303735333465323131643538616161633833663836303031393736656263353034666430383137
+39306438353861663430376136383730336565303264356232376537646431346364303766613837
+64313163636134663165383033333332346265343835666663376433383039316464646232383834
+32363662323338623664306633356363396236373935313135356236313433326431643262356366
+31666461336166333838313634366336376638326233396564656135336530313335333262353862
+36643263333033373561396463626338303861383333333834313866653639346238666537383561
+39393432633366666230326538353462386135363065633030383861653335643362306433613637
+39303731353330613337656437333439656538633161646666363437386536303631346131643733
+32313736303436353033323062646334636133343464333930613535653561363137666536353534
+39343239323231626663376137383733636464333163373238333535336464393732396363336564
+37646639613530393265313832303135316235623262656134383431643563303265613765383865
+64363162636461316336346636313434326437623661346639346532663339613064376538653539
+38653061346230666238313661393263633062306239646161626437653966353734663663316362
+61636431626264643433623733356464383864653735386433656532613635616465343334396364
+33353735616537633830383130333964323263326336656262326431373264356432326634613762
+33333930303464653536643430323736613837636262643066366234316134366333313639646336
+31666663323263383066626165313564653039646566363839326431303335336133306166626134
+30346237363462663731316231666465313037666463316133343766326463333966356530326232
+35636438636537653034653433393738326534326636616233383538663463356463323336356537
+35323337313935383338353632383339613838363933366537626565386639333462396262353536
+31316137366565373833613330633361323338656137303162643563623565356133323365303739
+62623462316539653264376663353265656563303933316366653663333466636565613330643463
+35643361333331386136616534313738616463336638646363373263393764303664623466373538
+34323535633964363262386266323337613730613338323734326566633763373638373066373761
+61653065663835313237393533653562623733306565343833343630303031626537616465363834
+37343461613739326664343037323034623565653263313834643838643930363837363831623362
+33623933336138336130373466643230373838636333343165366238396562663136623734393536
+62336566613165663063666464633532366536396366356432356534393236646238303631343465
+31356332623539383035366238316464653865336463623663613731376339393563366564366365
+32373732656238616537633634626361373036356661653134373561653133623437633062356236
+30306364306239643435363735356137336631393331663935613038653661363130623432643734
+39663733373539313337323439663730383337633863666636363139363431653031353337333639
+32306561613639653832316464373865343539656463303565646664323537316235303234616539
+62643732666136393532616634643162373035346630636435303632343239626639343165363066
+32623963373930316139356361393066356666316537313665396333313366616161366563373264
+38303134316339373262636532643537613136646464306339373430643239636437633466323934
+30626139396637333464356463303130656663346236646232626261623165343062316631643862
+3438653330623837333736306435636430373836663863323339
--- a/configs/talos/talos-patch-control.yaml
+++ b/configs/talos/talos-patch-control.yaml
@ -0,0 +1,6 @@
+machine:
+  nodeLabels:
+    # These are deprecated but make Rancher happy
+    node-role.kubernetes.io/control-plane: true
+    node-role.kubernetes.io/etcd: true
+    node-role.kubernetes.io/master: true
--- a/configs/talos/talos-patch-worker.yaml
+++ b/configs/talos/talos-patch-worker.yaml
@ -0,0 +1,6 @@
+machine:
+  nodeLabels:
+    openebs.io/data-plane: true
+    openebs.io/engine: mayastor
+  sysctls:
+    vm.nr_hugepages: "1024"
--- a/configs/talos/talos-patch.yaml
+++ b/configs/talos/talos-patch.yaml
@ -0,0 +1,20 @@
+machine:
+  kubelet:
+    registerWithFQDN: true
+    extraArgs:
+      rotate-server-certificates: true
+    extraMounts:
+      - destination: /var/storage
+        type: bind
+        source: /var/storage
+        options:
+          - bind
+          - rshared
+          - rw
+  install:
+    extensions:
+      - image: ghcr.io/siderolabs/iscsi-tools:v0.1.4
+cluster:
+  extraManifests:
+    - https://raw.githubusercontent.com/alex1989hu/kubelet-serving-cert-approver/main/deploy/standalone-install.yaml
+    - https://github.com/kubernetes-sigs/metrics-server/releases/latest/download/components.yaml
--- a/inventory/customer_deovero.yml
+++ b/inventory/customer_deovero.yml
@ -9,14 +9,18 @@ kubernetes:
        customer_deovero:
          vars:
            cluster_name: deovero.k8s.snel.com
-          hosts:
-            c1.deovero.k8s.snel.com:
-              ansible_remote: 185.62.56.239
-            c2.deovero.k8s.snel.com:
-              ansible_remote: 185.62.58.208
-            c3.deovero.k8s.snel.com:
-              ansible_remote: 185.62.56.102
-            w1.deovero.k8s.snel.com:
-              ansible_remote: 185.62.58.15
-            w2.deovero.k8s.snel.com:
-              ansible_remote: 185.62.56.96
+          children:
+            talos_control_nodes:
+              hosts:
+                c1.deovero.k8s.snel.com:
+                  ansible_remote: 185.62.56.239
+                c2.deovero.k8s.snel.com:
+                  ansible_remote: 185.62.58.208
+                c3.deovero.k8s.snel.com:
+                  ansible_remote: 185.62.56.102
+            talos_worker_nodes:
+              hosts:
+                w1.deovero.k8s.snel.com:
+                  ansible_remote: 185.62.58.15
+                w2.deovero.k8s.snel.com:
+                  ansible_remote: 185.62.56.96
--- a/inventory/group_vars/all.yml
+++ b/inventory/group_vars/all.yml
@ -1,4 +1,6 @@
 ---
+ansible_root_dir: "{{ inventory_dir | ansible.builtin.dirname }}"
+ansible_vault_password_file: "{{ ansible_root_dir }}/.ansible/vault_pass"
 ansible_port: 22
 ansible_user: root
 ntp_server: europe.pool.ntp.org
--- a/inventory/group_vars/talos.yml
+++ b/inventory/group_vars/talos.yml
@ -0,0 +1,9 @@
+---
+talos_generic_config_dir: "{{ ansible_root_dir }}/configs/talos"
+talos_cluster_config_dir: "{{ ansible_root_dir }}/configs/{{ cluster_name }}"
+talos_cluster_secrets_file: "{{ talos_cluster_config_dir }}/talos-secrets.yaml"
+talos_control_lb_hostname: "control.{{ cluster_name }}"
+talos_node_config_file: "{{ talos_cluster_config_dir }}/talos-{{ inventory_hostname }}.yaml"
+talosconfig: "{{ talos_cluster_config_dir }}/talosconfig.yaml"
+kubeconfig: "{{ talos_cluster_config_dir }}/kubeconfig.yaml"
+talos_image_version: v1.4.7
--- a/playbooks/snel.kubernetes-cluster
+++ b/playbooks/snel.kubernetes-cluster
@ -1 +1 @@
-Subproject commit 647ed922b8e5ef608be8536c0969e96c1643c841
+Subproject commit fc5c05c0be5e26b91ebcae9dbd26d2a88daf10ae