PrimTux

La distribution éducative pour débutants et initiés.

Vous n'êtes pas identifié(e).

Annonce

CARTE DES MEMBRES POUVANT AIDER ET DES ÉCOLES SOUS PRIMTUX
Merci de vous y inscrire en nous envoyant un email si vous souhaitez y apparaître.

  • Pour être automatiquement informé des réponses à vos messages sur le forum, n'oubliez pas de cliquer sur "Suivre cette discussion" en bas de page. Mieux, en vous abonnant au flux RSS du forum, vous pourrez suivre tout nouveau message sur l'ensemble du forum.
  • En allant dans votre Profil, ligne "Vie privée", vous pouvez également cocher "Suivre automatiquement les sujets auxquels on a répondu.", vous n'aurez plus à cliquer sur "Suivre cette discussion" lorsque vous postez un message.
  • Abonnez-vous à la newsletter sur le site principal pour être informé des nouveaux paquets, nouvelles versions, bugs...

#26 05-02-2020 18:57:32

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Bon ça avance.
Première chose : je n'ai toujours pas séparer le serveur du client... je le ferai plus tard.

C'est sur le git, branche devel, fichier acn-v2.py
https://github.com/CyrilleBiot/scripts/ … /acn-v2.py

Donc version 2
Coté serveur
Installation du serveur et de cron-apt pour automatiser les update
Configuration automatique de cron-apt : scan des repo à la recherche des update de sécurité et création d'un fichier ne contenant que les entrées sécurité
config de cron-apt pour utiliser ces update de sécurité et les installer automatiquement (que celles de sécurité, c'est du stable, ça ne devrait pas poser de soucis)
Les mises à jour se font dans la nuit à 4h

Coté client
Possibilité de choisir un port d'écoute différente du 3142 en cas d'install customisée
Installation de cron-apt pour auto les mises à jour de sécurité

Amélioration diverses
Fix des soucis dans la fonction de reconnaissance de la distribution
Split de la fonction d'installation de paquet
Amélioration à droite et à gauche

Tests
Pas l'école , c'est mercredi. Testé avec ce que j'ai sous la main
- DEBIAN SID : OK pas de soucis (par contre pas d'update de securité sous SID..)
- Mint 18 : OK pas de soucis
- ubuntu qui traine : pas de soucis

Voici les conf apportées (plus value ?) en terme de config
- config du proxy d'ACN
- écriture source.list de securité
- écriture d'un fichier de conf spéfique pour cron-apt


[== Undefined ==]
libres09@libres09-Latitude-E6410 ~ $ ls -l  /etc/apt/apt.conf.d/00aptproxyANC  && cat /etc/apt/apt.conf.d/00aptproxyANC 
-rw-r--r-- 1 root root 49 févr.  5 18:26 /etc/apt/apt.conf.d/00aptproxyANC
Acquire::http::Proxy "http://192.168.0.20:3142";

libres09@libres09-Latitude-E6410 ~ $ ls -l  /etc/apt/sources.list.d/s  && cat /etc/apt/sources.list.d/security-primtuxACN.list 
security-primtuxACN.list              stephane_magnenat-xenial-xenial.list  

libres09@libres09-Latitude-E6410 ~ $ ls -l  /etc/apt/sources.list.d/security-primtuxACN.list  && cat /etc/apt/sources.list.d/security-primtuxACN.list 
-rw-r--r-- 1 root root 137 févr.  5 18:26 /etc/apt/sources.list.d/security-primtuxACN.list
# Security Update. For Primtux Apt-cacher-ng.
deb http://security.ubuntu.com/ubuntu/ xenial-security main restricted universe multiverse


libres09@libres09-Latitude-E6410 ~ $ ls -l  /etc/cron-apt/action.d/5-primtuxACN-security && cat /etc/cron-apt/action.d/5-primtuxACN-security 
-rw-r--r-- 1 root root 238 févr.  5 18:26 /etc/cron-apt/action.d/5-primtuxACN-security
upgrade -y -o APT::Get::Show-Upgraded=true
OPTIONS="-o quiet=1 -o APT::Get::List-Cleanup=false -o Dir::Etc::SourceList=/etc/apt/sources.list.d/security-primtuxACN.list -o Dir::Etc::SourceParts=\"/dev/null\""
MAILTO="root"
MAILON="always"

Dernière modification par cyrille (05-02-2020 18:58:53)


All you need : #!/bin/bash

Hors ligne

#27 05-02-2020 20:37:09

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Ok.

En revanche, va falloir supprimer "def installNmapModule(distrib)".
C'est à ton système de paquet (apt) de gérer les dépendances, pas à ton soft.
pip ça doit rester un outil pour du dev, pas pour les utilisateurs : c'est le meilleur moyen de flinger une distrib et d'avoir des bugs non reproductibles parce que t'as des libs avec des versions diff non compatibles.
En plus, pip va prendre la version la plus récente donc si au moment ou t'as créer ton script t'es sur la v1.2 et que dans 1 an, y'a la v2.0 qui sort, ben il va utiliser cette version.
Enfin, si tu gères pip3, il faudra l'inclure dans les dépendances du paquet debian : ça fait doublon et ça va télécharger une dépendance inutile.

Je pense que ça part d'un bon sentiment mais en voulant trop bien faire, tu risques d'entrainer plus de soucis que d'en résoudre.

Hors ligne

#28 05-02-2020 20:44:26

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Oui tout as fait tu soulèves un soucis auquel je me suis heurté.
Le hic c'est que sur mon PC, si j'installe python-nmap via apt sans par la suite faire un pip3 install nmap, je n'arrive pas à faire un import nmap dans python (module not found...)...
D'où la fonction
Donc je suis bien d'accord, mais je ne sais trop comment remédier à cela.
Si tu as la solution pour régler cela, ce serait nickel wink
thx pour l'interet


All you need : #!/bin/bash

Hors ligne

#29 05-02-2020 22:13:59

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Comme ça, je dirais que t'as du perdre quelque chose sur ton PYTHONPATH : une variable global qui va indiquer à ton interpréteur ou chercher les dépendances.
Il faut que tu ais /usr/lib/python3/dist-packages dans le PYTHONPATH pour que ça fonctionne.

En réalité, quand on dev en python, on utilise virtualenv ou pyenv pour avoir des dépendances indépendantes de son système.
Dans cet env, tu configures tes dépendances via un fichier requirements.txt avec des versions précises : un exemple rapide.
Du coup, pip va se caler sur ces versions.

Sinon, y'a aussi docker qui est vraiment sympa : tu peux bosser sur une distrib "neuves" et vérifier que ton soft marche sur plusieurs versions d'ubuntu par exemple.

Hors ligne

#30 06-02-2020 18:55:12

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

PythonPATH
Ok je regarde cette piste
(pour l'instant j'utilise des virtualenv...)
Je vais regarder ce fameux fichier

Je vais jeter  un oeil sur docker (d'habitude c'est plutot des virtualbox ou des schroot)

Et je vire asap installNmapModule() wink

Un peu débordé ces jours ci....


All you need : #!/bin/bash

Hors ligne

#31 06-02-2020 19:42:50

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Pas de prob.

Je te conseil le mode opératoire :
1. pour la phase de dev => virtualenv avec des libs équivalentes à la distrib cible. (donc pas besoin de retoucher le PYTHONPATH)
2. le jour ou tu crées ton paquet deb, tu recettes ton softs avec les déps installé par dpkg.

docker, c'est un outil complémentaire qui peut être pratique pour le dev mais pas non plus indispensable.
Prend ton temps pour apprendre à t'en servir, évalue quand ça te sert vraiment...

Hors ligne

#32 09-02-2020 18:55:13

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Voilà j'ai créé une page sur le wiki
https://wiki.primtux.fr/doku.php/apt-cacher-ng-cron-apt


All you need : #!/bin/bash

Hors ligne

#33 09-02-2020 19:30:58

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Alors, merci tout d'abord d'avoir pris le temps d'écrire de la doc.

Mon avis :

1. Je suis pas fan des wget et installation via un dépôt git, il va falloir rapidement passer sur
un paquet debian.

2. un paquet debian va simplifier drôlement la doc : pas de recommandation selon si on est sur une base debian ou ubuntu ni les dépendances nécessaires.

3. je sais pas pourquoi tu t'acharnes à proposer un script serveur :

Pour moi, la doc peut se résumer à :

apt-get install apt-cacher-ng

et votre serveur de cache est opérationnel et écoute sur le port 3142.

A la rigueur, tu peux proposer juste un script complémentaire pour mettre à jour le port ou activer un cron.

4. Je te déconseille de recommander un installation à partir d'une branche GIT.
Une branche, ça peut être instable. Le mieux c'est d'avoir des tags et de pointer vers une version précise.

Hors ligne

#34 09-02-2020 19:33:28

Steph
Administrateur
Inscription : 03-06-2015
Messages : 5 881

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Faudra regarder si ctparental n'est pas aussi sur le 3142, d'ailleurs on le voit souvent celui-là, il y a une explication? Pourquoi 3142 et pas 4589?

Hors ligne

#35 09-02-2020 19:42:10

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Autre points :
- tu peux ne mettre QUE les commandes à lancer et non les résultats et les préfix de ton shell.
Je trouve que ça embrouille : l'utilisateur (novice) ne distingue pas bien quelles actions il doit mener.
- le script à la fin ne sert à rien.

Je pense dans l'ensemble que tu veux trop bien faire. L'intention est plus que bonne, le résultat est plus mitigé.
Il faut que tu arrives à synthétiser.
Si tu veux plus détailler, tu peux toujours renvoyer sur une FAQ par exemple directement dans ton dépôt git.

Hors ligne

#36 09-02-2020 19:46:42

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

OK ok, je revois ça asap.
Sinon l'install côté serveur n'installe pas que apt-cacher-ng mais également cron-apt et des fichiers de conf spécifiques.
Je mets la page du wiki en attente . Je la ré écriirai  plus tard


All you need : #!/bin/bash

Hors ligne

#37 09-02-2020 20:48:43

Steph
Administrateur
Inscription : 03-06-2015
Messages : 5 881

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Bon ben je me réponds à moi-même... ctparental semble utiliser 8888 et 8080, le ssh sous 8022, 54 en ipv6. Sous dansguardian et tinyproxy c'était 8888 pour le proxy et 8080 poour dansguardian. Ça paraît peut-être débile comme question mais on ne sait jamais...

Hors ligne

#38 09-02-2020 21:20:56

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

si tu veux je peux changer le port 3142 pour un autre si ça risque de poser pb. Je rajoute alors au TODO wink


All you need : #!/bin/bash

Hors ligne

#39 09-02-2020 22:00:57

Steph
Administrateur
Inscription : 03-06-2015
Messages : 5 881

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Non justement là c'est bon, touche plus! De toute manière dans les tests d'intégration si ça ne va pas c'est juste un numéro à changer. Ton soft est hyper-important pour répondre aux détracteurs avec leurs kwartz. Bon je fais mon chiant la prochaine étape ça sera l'installation du même soft sur plusieurs postes en même temps...

Hors ligne

#40 09-02-2020 22:08:45

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

OK steph, le paquet debian est quasi fini. Je viens de finir le man.
Journée chargée demain, peut être demain soir si tout va bien.


All you need : #!/bin/bash

Hors ligne

#41 09-02-2020 22:24:00

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

paquet deb dispo sur la branche devel. Premier jet à l'arrache. Testé sous debian sid. Passe. ++


All you need : #!/bin/bash

Hors ligne

#42 10-02-2020 13:57:36

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

La question sur les ports n'est jamais "débile" Steph : c'est toujours un peu le nerd de la guerre.

T'as des ports qui sont standardisés par l'IANA (les 1024 premiers en tout cas) donc en général il faut une raison en béton pour changer ces derniers.
Pour le reste, c'est assez ouvert.

Après quelques recherches, le port 3142 est quand même réservé à apt-cacher donc vaut mieux laisser tel quel.
Rien n'empêche en revanche de se faire une page wiki de mémo avec les différents ports potentiellement utilisés pour éviter des blagues de softs qui peuvent rentrer en conflit.

@cyril : désolé d'encore te solliciter.
Je pense que l'idéal serait de créer un dépôt git à part pour ton soft.
Serait-t-il également possible de mettre les sources de ton paquet debian et le process de compil dans un README.md ?
L'idée c'est vraiment d'avoir un paquet reproductible que l'on peut compiler chacun de notre côté.

Tu peux t'inspirer de https://github.com/mothsART/fluxboxlauncher

Hors ligne

#43 10-02-2020 14:18:34

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

oui pas de soucis, mothsart
Juste que là entre les coupures d'électricité et le vrai taf et la vie à coté, je pars un peu dans tous les sens wink
Mais c'est noté et je fais ça asap wink

et @cyril : désolé d'encore te solliciter.
Pas de soucis, ça me fait du bien de travailler en équipe et d'avoir des retours même si je semble ronconner de temps et temps wink

Dernière modification par cyrille (10-02-2020 14:18:59)


All you need : #!/bin/bash

Hors ligne

#44 10-02-2020 15:22:51

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

No pression : t'as pas de deadline.
Justement, j'essai de te répondre tôt pour t'éviter de faire et refaire.
Et oui, plus on est nombreux et plus les règles communes et les échanges sont importants.

Si il faut répartir ton travail, tu peux aussi découper les besoins et j'en ferais une partie.

Hors ligne

#45 12-02-2020 20:29:01

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Bsr,
Comme demandé un git à part
https://github.com/CyrilleBiot/acn-py

Les paquets debian et les sources (source et debian).

Je vois le reste asap


All you need : #!/bin/bash

Hors ligne

#46 12-02-2020 21:27:06

cyrille
Modérateur
Lieu : Avesnois (59)
Inscription : 21-09-2016
Messages : 172
Site Web

Re : Créer un serveur de cache apt pour les parcs utilisant primtux


All you need : #!/bin/bash

Hors ligne

#47 13-02-2020 01:09:45

mothsart
Modérateur
Inscription : 31-10-2016
Messages : 1 093

Re : Créer un serveur de cache apt pour les parcs utilisant primtux

Bel effort ! Je regarde ça à tête reposé dans les jours qui viennent.

Hors ligne

Pied de page des forums