Using the CC: |
Simulation: |
Other infos: ccd0 server informations (SAM station ccin2p3-analysis) ccsvli02 server informations (SAM station ccin2p3-grid1 + SAMGrid) ccsvli16 server informations (SAM station ccin2p3-grid0) ccd01 server informations (SAM station ccin2p3-grid2 (sam v7)) CPU comsumption for D0 weekly monthly all in one |
Bonjour, Du fait de "remaniement" de la configuration de HPSS au CCIN2P3, avec l'installation notament de nouveaux supports magnetiques de grande capacite , il nous est demande *de ne plus utiliser les COS 21 et 22 mais seulement le COS 0 !!* Dans le futur les ressources seront definies uniquement en spécifiant un repertoire de base qui nous sera affecté. Merci de faire le necessaire. Cordialement ... et bonne rentree a vous toutes et tous. -- Patrice Lebrun
Bonjour, En ces temps difficiles pour le centre de calcul, afin de gérer au mieux le CPU qui est mis à notre disposition et du fait que le reprocesing demande beaucoup de ressources en temps CPU, en mémoire et en scratch nous avons été amenés à créer une nouvelle ressource u_users_d0 que nous vous demandons d'utiliser systématiquement dans la soumission de vos jobs. (N'oubliez pas non plus les autres ressources si vous utiliser, hpss, sps ou si vous faites du streaming). Cela nous permettra d'utiliser le CPU qui est attribué pour le reprocessing (et aussi pour la prod MC) vraiment à cette fin. Pour tout problème concernant vos productions privés, n'hésitez pas à contacter Tibor ou moi même. Merci pour votre coopération. Très amicalement.
Suite a des questions sur ce sujet voici quelque rappels de l'utilisation actuelle des espaces /sps/d0 et /d0/d0usr. ------------------------------------- /sps/d0 ------------------------------------- S'agissant de /sps/d0, aucun quota n'est instauré mais un système de nettoyage automatique (utilisé aussi par Atlas)qui est décrit ci-dessous: Lorsque le taux de remplissage des espaces dépasse 95% : . le mécanisme récupère la liste des fichiers non accédés depuis 62 jours (2 mois); . cette liste est triée par date croissante d'accès (les fichiers accédés il y a le plus longtemps en premier); . autant de fichiers que nécessaires parmi ceux de la liste triée sont effacés pour libérer de la place afin de revenir à 80% de remplissage (on commence naturellement par effacer les fichiers accédés il y a le plus longtemps). Actuellement ce mécanisme est en mode "non effacement", il permet seulement de voir ce qui ce passerait si le nettoyage était effectif. Une vision de cela est donnée par l'URL: http://ccspsmon.in2p3.fr/cleanup/d0.html Une resource BQS est associée à cette espace : u_sps_d0 ------------------------------------- /sps/d0usr ------------------------------------- Nous avons instauré un système de quota afin de comparer laquelle des deux méthodes est la mieux adaptée. Chacun a un quota « dur » de 50 Go et un « mou » de 25 Go, il y a un délai de grace de 7 jours, pendant lesquels les 25 Go surnuméraires peuvent être modifiés après quoi l'utilisateur est bloqué. Le délai de grace est le même pour tout le monde (c'est-à-dire n'est pas spécifié par utilisateur). Une resource BQS est associée à cette espace : u_sps_d0usr
Afin d'utiliser au mieux les resources HPSS une nouvelle ressources BQS u_hpss_d0_stress a été créée. Elles doit être utilisée pour les jobs qui ont une courte durée de vie en machine et qui accèdent à HPSS (typiquement un TL <~ 200000). Ou pour les jobs de plus longue durée mais qui font un usage intensif de HPSS. ATTENTION -- NOUVEAU: L'ancienne resource u_hpss_d0 doit être maintenant utilisée à la place de la ressource généraliste hpss !!!! Rappel : pour utiliser une ressource: qsub -l u_hpss_d0,T=... pour avoir des infos sur une ressource: qvar query -s resource=u_hpss_d0 Pour tout problème avec ces ressources, vous pouvez me contacter ou contacter Tibor ou bien encore faire appel au user.support du centre. Merci à vous de bien vouloir propager cette information. -- Patrice Lebrun
Glossary of the D0 soft language (by U. Bassler)
Projet de rapport de Prospective 2004 sur le calcul au CCIN2P3 (by P. Lebrun)
WebTeam |