Mise en place d'une grappe

Je travaille avtuellement sur la mise en place d'une grappe de deux machines, de façon à faire de la redondance matérielle.
Je me base sur deux K6II, que j'ai pu monter avec exactement les même hardwares.
Le projet va se focaliser sur la mise en place d'un tomcat et d'une BdD.

Fonctionnement courant

Les services mis en place sur experience sont les suivants :
- serveur http (+moinmoin)
- server ftp
- proxy squid (+privoxy+tor)
- serveur tor (pas full time)
- client/serveur file sharing (notement avec wine)
- serveur freebox (freeplayer+vlc)

Problème courant :
- puissance insuffisante pour serveur freebox
- manque de place de stockage (raid 1 sur 2x80G)

Les petits plus ppprod :
- boot sur raid 1
- mise à jour automatique distrib
- serveur admin/audit à distance

Etudes et actions futures :
- boitier média-player
- boitier NAS avec RAID

30/04 et 01/05/07

le 30/04/07 :
utilisation de clamav pour samba : echec. Le fichier de conf clamav semble "touchy".
Le demon est malgre tout lancé et OK.
Ce travail fait suite à un test avec Frox et clamav (qui lui aussi me bloquait tout).
Le sujet reste à creuser.

le 01/05/07 :
compil de la 2.6.20. Problème avec la table NAT de netfilter. Apres un moment de recherche et de tatonnement : OK.
-> passage en 2.6.20

remise à plat du SI

L'ensemble de mes travaux jusqu'à fin 2006 tournaient autour d'un principe : diviser pour régner.
Je multipliais les machines en fonction du nombre de services dont j'avais besoin.

J'ai récupéré un Xeon 1.6GH sur une carte mère Tyan avec 512 Mo de RAM.
Ce nouveau matériel m'a permit de tenter un autre type de configuration : une version centralisée.
Couplé à cette remise à plat, j'ai décidé de changer de système d'exploitation : je passe sur gentoo. En effet, la complexité de ce que je mets en place m'oblige à envisager un système me permettant une maîtrise pointue du système.

Aujourd'hui, après quatre mois d'exploitation, j'ai véritable explosé mes objectifs : j'ai pu déployé beaucoup plus de services qu'envisagés, et pour un coup de mise en place et de maintenance véritable extrêmement réduit.

Disposant aujourd'hui du site www.ppprod.biz, je vais essayé de mettre en place un ensemble de "fiches".

Pas grand chose de nouveau.

8go avec 2940 (20mo) sur pasbelle, mise en place de la 3Com ISA en 10Mb/s. Ca marche correctement.

Essais de proxypass, peu satisfaisant : peu de services marchent.

www.ppprod.biz acheté, et qui pointe sur soleil !

youpi !

concernant play :

J'ai réussi à mettre des regles de filtrage qui permet d'utiliser http-alt pour play ET pour pasbelle. Le tool masquerade passe en v6.1.
Play, un P2@350, ne permet pas de lire des videos, il n'est pas assez puissant. Il faut trouver une autre machine ...
Ca marche bien pour les webradios.

Les problème ypserv sont corrigés (c'était un pb de masque dans la conf).

Avec les ports qui varient (un coup le wan est eth0, un coup eht1), le paramètre interfaces de samba n'est pas utilisable. J'ai vérifié dans les log, ce qui entre sur 135:139 est bien bloqué (et y'en a un max).
Concernant la mise en place du PDC, pour que soleil soit le LBM, il faut redemarrer ndbm, et ca roule. J'ai le problème de root=Administrator, malgres le fait d'avoir enlever cette règle. On verra au prochain reboot de soleil.

concernant pasbelle :
le 40G de Ced est bel et bien mort. pasbelle reste avec son 3Go. On verra par la suite.

Suite à une demande ...

Je réfléchis à une config server ou routeur/serveur.
Je dois identifier le materiel necessaire, puis les options de connexion.

Matos :
- disques en RAID, système + données
- USB pour clé
- lecteur DVD

Conf:
- freebox => ipfixe en modem(=>routeur/serveur) => 15 euro
- livebox => dyndns dans LB (routeur uniquement), DMZ vers serveur => 15 + 25 (=custom dns service)

Système:
- /etc en cvs sur clé
- outils de suivi

Je pensais avoir un 30Go dans pasbelle, erreur, c'est un 3Go. Je pense donc que je vais faire sans : je veux dire que mule ne sera pas en raid, et que je verrai par la suite pour yahourt.
Donc le 40Go va aller dans pasbelle.
Mule reste avec son 30Go.

J'ai un pb sur mule pour la carte isa, elle semble non reconnu.

Coté soft, j'ai mis à jour pouet, et j'ai donc changé de noyeau. Je me suis fait une grande frayeur, ca a planté en cours, mais à priori, pas sur une phase critique, j'ai pu rebooter la machine, avec le nouveau noyeau.

J'ai installé play : W2k et freeplayer. Il semblerai que j'ai un pb de port, faut que je vois si le port du player n'est pas pris par un autre service.

http://soleil.homelinux.net est dispo.

http://www.ppprod.net aussi ;)

A l'origine de la refonte de mes systèmes, c'est un problème de disque dur fautif qui m'a motivé.
En effet, sur ma machine de travail Linux (aujourd'hui nommée pouet), le disque système avait crashé. Ce disque était un 6Go.

Par pur hasard, j'ai voulu testé ce disque dans play, et il a marché.
Je pense donc que le problème du controlleur IDE sur pouet est antérieur au changement de tour. En effet, si pouet est antierement en SCSI, c'est que je pensais avoir bouzillé mon Ctrl IDE en faisant un faux-contact avec la masse de la nouvelle tour.

En fait, il semble bien que le problème soit antérieur. Ca me fait encore plus peur, ca veut dire que la carte est vraiment fatiguée.

Par contre, bonne nouvelle pour play : 6Go, une carte gigabit eth et un ctrl USB2, tout devrait rouler pour en faire un player.

mise en place de rack dans pouet : les 2 Maxtor80 sont 'removable' et donc, celui qui est 'faulty' pourra etre remplacé plus tard.

Malgré le fait d'avoir flasher les adaptateurs ACARD, j'ai un disque Maxtor80Go qui n'est pas reconnu pour faire du RAID1. Je vais laisser tomber pour l'instant.
Je ne savais pas comment faire pour mettre cette machine en "rack" sachant que je devais intervenir dedans : j'ai trouver une solution : mettre les 2 HD RAID1 en rack ! simple et pas cher.
Changer le disque KO sera à rajouter à le liste de taches à faire.

Test en cours du ProxyPass sur pouet, pour accéder à soleil.

config mule sur pasbelle ok.

Hier

Config squid pour privoxy : ok, méthode trouvée.

Mise en place de la mule sur pasbelle. constatation du pb de filtrage mis en place par free : je suis avec un id bas, alors que ma conf de routage marchait tres bien il y a 1 ou 2 mois.
Il faut que je cherche des ports plus exotiques.

Depuis ...

Installation de Tor (+privoxy)
Chaînage de squid vers privoxy->Tor sur certaines url (conf à peaufiner).

Installation de How, visibilité sur etc, mais pas les roottools (et finalement, c'est bien).

Pb : soleil n'est toujours pas visible de l'exterieur

Je n'ai rien fait techniquement, bossant pour autre chose.

Je réfléchis à plusieurs points à mettre en place :
* un serveur tor + pivoxy pour router certaines pages à partir de squid (boycot de i2p, qui est en java)
* un système d'administration accessible par web (outils simple maison, basé sur how?), en perl
* mise en place du service web pour avoir le site, puis boucler avec le dns dynamique, essayer un wiki
* mise en place d'outils de téléchargement sur une autre machine (essayer mute et gnunet), boycoter ants, qui est en java.
* il faut que je retrouve mon ébauche de .profile, pour ne pas perdre de temps
* mise en place de l'outil de reorganisation du stockage des fichiers
* mise en place de l'outils de gestion des sites perso externes

J'ai craqué,
J'ai réinstallé SUSE9.3 sur soleil, avec des partitions plus adaptés :
hde1 de 1G, dumpé à la main sur hdf1, puis du swap (512Mo), sur les deux disques.
puis des partitions logiques sur hde3 (15,5Go)

J'ai mis les services en place, et j'ai installé samba en PDC. J'ai pu connecté jil au domaine.
Le problème venait du serveur wins, il faut le renseigner.

J'ai toujours des lenteurs terrible au démarrage, mais bon, tant pis (je n'ai toujours pas flashé mon bios). Je vois la clé usb, c'est ce que je voulais. J'ai mis /srv/cvsroot dessus.

J'ai deux choses à faire sur ce serveur : mettre en place le dump, et mettre en place les cvs (etc et root).

Il faut que j'installe pouet, pour avoir mon serveur web, je ferais un cache sur soleil, pour pouvoir administrer le parc.

Hier

J'ai voulu retailler les partitions sur les MAxtor80G de soleil, cela a été impossible. il faudra que je (re)supprime tout. Plus tard peut être.

Cette machine met 10 minutes à booter, sur le net, on conseille de flasher la dernière version du bios. Il faut que je le fasse avant de reinstaller.
Je vois dans ce problème qu'il est tres difficile d'avoir les données et le système sur les même HD.

Il faut que je réfléchisse à ce problème.

Hier :

J'ai reussi à faire marcher la carte USB2 avec le chipset VIA sur soleil, mais ca rame de la mort, je ne sais pas pourquoi.
Peux etre que je devrai reinstaller, avec le module ehci_hdb directement chargé au moment de l'install.

J'ai connecté un Maxtor80 sur soleil, et je commence à faire des copie sur soleil. Pour l'instant, tout va bien.

J'ai flasher mes ACARD7720UW, il n'y a pas moyen de savoir si ca a marché. On vera bien. J'ai espoir. Je devrai alors faire le partitionning à la main, et monter les RAID et le LVM à la main.

Ce soir, je continue les backup. Je veux liberer les disques. Ensuite, je configure soleil pour avoir le net.

Ce we :

J'ai mis deux HD Maxtor80G dans soleil.
J'ai installé "/" en RAID logiciel, j'ai reussi à booter, mais /dev/md0 n'est pas reconnu comme boot device.
J'ai mis les deux disques de 1.1Go de play sur soleil.
j'ai ensuite essayé d'installer la 9.3 avec GRUB sur Disquette, je n'ai jamais pu booter.
Je suis obligé de booter sur CD, qui boote sur HD ...

J'ai remarqué que les disques dans pouet ne sont pas redondants, la carte ACARD en bios 3.60 ne marche pas. Sachand que je n'arrive pas à faire fonctionner les adaptec avec une SiI680, il faut que je cherche un moyen en scsi.

Sinon, je peux toujours essayer de m'obstiner, on sait jamais... à réfléchir.