HAL Journées Réseaux de l'Enseignement Supérieur et de la Recherche
Not a member yet
1242 research outputs found
Sort by
Racdata, une solution big data d’analyse de logs pour l’exploitation d’un datacenter
No full textRacdata is a big data solution for collecting and analysing logs (and all event data), designed by the Nancy-Metz Academy for monitoring the Ministry of Education's National data centre (2000 devices and servers). This solution has been built around several free software packages, in particular the Elastic suite (Elasticsearch, Logstash and Kibana) and the RabbitMQ message handler.These pieces of software can be implemented quickly in a simple, default configuration.However, they require knowledge about how they work as well as advanced configuration as part of their use in production when there are major limitations in terms of availability. In addition, it is essential to properly configure them to produce quality data that can be used by business teams.We present our feedback and experience after 5 years of using this solution at a data centre level and provide details of the optimisation and specific parameters that we have implemented. The choice of architecture and technical optimisation have a significant impact on performance, the quality of data and its integrity (we process more than 4000 events per second without any data loss). The choice of protocols and event formats is important for the collection, transmission and storage of these events.Finally, we present a list of good practices for using this type of solution in a big data context, in an academy or a university.Racdata est une solution big data de collecte et d'analyse de logs (et de toutes données événementielles) conçue par l'Académie de Nancy-Metz pour la supervision du datacenter national du ministère de l'éducation (2000 équipements et serveurs). Cette solution a été construite autour de plusieurs logiciels libres, en particulier la suite Elastic (Elasticsearch, Logstash, Kibana) et le gestionnaire de messages RabbitMQ. Ces logiciels peuvent être mis en oeuvre rapidement dans une configuration simple par défaut. Cependant, ils nécessitent une connaissance de leur fonctionnement et une configuration avancée dans le cadre de leur utilisation en production avec des contraintes fortes de disponibilité. De plus, leur bonne configuration est également essentielle pour produire des données de qualité exploitables par les équipes métier.Nous présentons notre retour d’expérience de 5 ans d'exploitation de cette solution à l’échelle d’un datacenter, en précisant les optimisations et paramétrages spécifiques que nous avons mis en place. Le choix d'architecture et les optimisations techniques ont un impact significatif sur les performances, la qualité des données et leur intégrité (nous traitons plus de 4000 événements par seconde sans perte). Le choix des protocoles et des formats des événements est important pour la collecte, la transmission et le stockage de ces événements.Enfin, nous exposons une liste de bonnes pratiques pour utiliser ce type de solution dans un contexte big data, en académie ou université
Perfsonar, diagnotic et métrologie multi-domaine
No full text**Background**An end-to-end network connection is a composite solution, coming from several operators or heterogeneous domains, each using its own infrastructure made up of potentially different links, equipment, protocols and monitoring devices.**Problem**With current networking tools, monitoring or diagnosing an end-to-end connection requires access to the monitoring data from all the domains through which it passes. It is easy to work on your own network and collect the monitoring information. When it comes to other operators’ domains, however, it proves more complicated.**Solution**PerfSONAR was developed by the Teaching/Research community with the aim of facilitating end-to-end network diagnosis and monitoring in a multi-domain scenario, transparently, instantly and automatically.**Operation**The operating principle is as follows: all PerfSONAR probes (installed in the same domain or in different domains) are interconnected and measure and record: * bandwidth utilisation * available bandwidth * latency * jitter * packet loss rate.The results are then stored centrally on a server, available to different users.**Benefits for RENATER users**The deployment of PerfSONAR is consistent with improving the services provided to the community by providing better visibility for diagnosis of network problems (identifying and correcting bottlenecks) and network metrology (accurately measuring network performance).**Contexte**Une connexion réseau de bout en bout est un dispositif composite, issue de plusieurs opérateurs ou domaines hétérogènes, chacun utilisant sa propre infrastructure, composée de liaisons, équipements, protocoles et dispositifs de supervision potentiellement disparates.**Problématique**Avec les outils réseaux actuels, le monitoring ou le diagnostic d’une connexion bout en bout nécessite d’avoir un accès aux données de supervision de tous les domaines traversés. Il est facile d’intervenir sur son propre réseau et de recueillir les informations de monitoring. Cela s'avère plus complexe dès lors qu'il s'agit de domaines d’autres opérateurs.**Solution**Perfsonar a été développé par la communauté Enseignement/Recherche dans le but de faciliter le diagnostic et de monitoring réseau de bout en bout dans un contexte multi-domaine, et ce de manière transparente, instantanée et automatique.**Fonctionnement**Le principe de fonctionnement est le suivant : toutes les sondes Perfsonar (installées dans le même domaine ou dans des domaines distincts) sont interconnectées et réalisent des mesures : * de l’utilisation de bande passante * de la bande passante disponible * de la latence * de la gigue * du taux de perte de paquetsLes résultats sont ensuite centralisés sur un serveur, à disposition des différents utilisateurs.**Quels bénéfices pour les utilisateurs de RENATER**Dans cette optique, le déploiement de Perfsonar s’inscrit dans l’amélioration des services fournis à la communauté en offrant une meilleure visibilité sur le diagnostic (identification et correction des goulets d'étranglement) et la métrologie réseau (mesurer avec précision les performances du réseau)
La gestion des données de la recherche : enjeux et contraintes
No full textThe mission of a research unit involves producing and promoting the knowledge and information generated and, as such, is an essential asset that should be preserved. Data is a major issue for research today.At the same time, the scientific world is confronted with a recurrent problem: a significant increase in the amount of data produced by research units (digital technology, dematerialisation, etc.) and the need to ensure the traceability of research activities in response to a notable increase in the number of publications withdrawn.The aim of this presentation is to firstly analyse this issue of traceability of research activities and knowledge management in order to then present the best practices to be adopted to improve knowledge management within research units. The following points will be addressed:* selecting a naming convention for digital files,* defining a classification plan for electronic records,* setting up backups and archiving,* choosing file formats,* and taking into account data security and confidentiality aspects.To ensure effective data preservation within research units, it is therefore necessary to combine the organisational aspects with the technical aspects that the IT department traditionally takes care of. This implementation will allow information system services to shift from being a support activity to being a real activity that supports research.La mission d’une unité de recherche consistant à produire et valoriser des connaissances, l’information qui est générée s’avère un patrimoine essentiel qu’il convient de préserver. Les données constituent désormais un enjeu majeur pour la recherche. Dans le même temps, le monde scientifique est confronté à un problème récurrent, une augmentation considérable des données produites au sein des unités de recherche (équipements numériques, dématérialisation…) et la nécessité d’assurer une traçabilité des activités de recherche en réponse à une augmentation notable du nombre de rétractations de publications. Cette présentation se propose, dans un premier temps, d’analyser cette problématique de traçabilité des activités de recherche et de gestion des connaissances pour, dans un deuxième temps, présenter les bonnes pratiques à adopter pour améliorer la gestion des connaissances au sein des unités de recherche. Les points suivants seront abordés : * le choix d’un nommage des fichiers numériques, * la définition d’un plan de classement des dossiers électroniques, * la mise en place des sauvegardes et archivages, * le choix des formats de fichiers, * ou encore la prise en compte des aspects de sécurité et de confidentialité des données…Pour assurer une véritable préservation des données au sein des unités de recherche, il convient donc d’associer des aspects organisationnels aux aspects techniques classiquement pris en charge par les services informatiques. Cette mise en œuvre va permettre de faire passer les services systèmes d’information d’une activité de support à une véritable activité d’appui à la recherche
Un Zimbra surchargé ? Passez à l'objet
No full textIn 2016, the University of Lorraine’s messaging infrastructure moved from file-based storage on a SAN to object-based storage on Ceph.We undertook this change because of the difficulties we encountered in backing up mailboxes overnight. We then reached the performance limits of standard file systems and could no longer respond to legitimate requests to increase quotas. Today, our e-mail system is based on a storage solution that has more capacity, performs better and is more scalable. It is therefore perfectly suited for supporting 100,000 e-mail accounts.During the presentation, I will highlight the difficulties that we were experiencing and how the Zimbra/Ceph storage connector was able to resolve them. I will touch briefly on how Ceph works, explaining what makes it so available and well-performing in a large-scale environment. I will then explain how the Zimbra/Ceph storage connector works.I will detail the old and new messaging infrastructure, the Ceph storage validation process in relation to the requirements of the e-mail system, and the data migration phase. I will also explain how we now run our backup and restore operations. I will provide specific advice on how to configure Ceph storage.I will close by pointing out the benefits associated with this change for both users and e-mail administrators.L’infrastructure de messagerie de l’université de Lorraine est passée en 2016 d’un stockage en fichiers sur SAN à un stockage en objets sur Ceph.Nous avons conduit ce changement en raison des difficultés que nous rencontrions à sauvegarder les boites aux lettres pendant la période nocturne. Nous atteignions alors les limites de performances des systèmes de fichiers standards et ne pouvions répondre aux demandes légitimes d’augmentation des quotas. Aujourd’hui, notre messagerie s’appuie sur un stockage plus capacitif, plus performant et plus évolutif, bien adapté à son échelle de 100 000 comptes de messagerie.Lors de la présentation, je rappellerai les difficultés que nous connaissions et comment le connecteur de stockage Zimbra/Ceph pouvait les résoudre. Je reviendrai brièvement sur le fonctionnement de Ceph en expliquant ce qui le rend aussi disponible et performant à grande échelle puis j’expliquerai le fonctionnement du connecteur de stockage Zimbra/Ceph.Je détaillerai l’ancienne et la nouvelle infrastructure de messagerie, le processus de validation du stockage Ceph au regard des besoins de la messagerie, l’étape de migration des données et préciserai comment nous opérons désormais les sauvegardes et les restaurations. Je donnerai des conseils précis pour configurer le stockage Ceph.Je terminerai en indiquant les bénéfices liés à ce changement pour les utilisateurs et les administrateurs de la messagerie
A propos d'un schéma d'authentification OTP
No full textInternational audienceAuthenticating users of an information system rests on the communication of two pieces of information (username and password). It is a very prevalent process. It does, however, have several weaknesses that can be very harmful to users of these systems. The first weakness is the need for a high level of trust in the service to which users send their sensitive information. More precisely, this relationship implies not only trust in the intentions of said service but also in its capacity to protect the user's identification data. The second weakness is its sensitivity to spoofing the service: when attackers are able to impersonate the expected service (phishing campaign, honeypots, etc.), they can very easily obtain the user's identification data. These weaknesses are all the more disturbing as studies have shown that most users of online services use the same password for most of the services to which they connect. Thus, obtaining a password for one particular service often gives access to virtually all the online services that users need a username and password to access.We propose here an identification protocol to solve these problems while maintaining the username/password system that is well-known to users. In addition, we illustrate its use for three different applications: connecting to an online service, starting a session on a workstation, and physical access control to premises.L’authentification des utilisateurs d’un système d’information reposant sur la communication d’un couple (Identifiant, mot de passe) est un processus très répandu. Il présente cependant plusieurs faiblesses qui peuvent s’avérer très dommageables aux utilisateurs de ces systèmes. La première faiblesse est la nécessité d’une confiance forte de l’utilisateur envers le service auquel il communique ses informations sensibles. Plus précisément, cette relation suppose une confiance dans les intentions dudit service mais aussi dans sa capacité à protéger les données d’identification de l’utilisateur. La seconde faiblesse est sa sensibilité à l’usurpation du service : lorsqu’un attaquant est en mesure de se faire passer pour le service attendu (campagne de phishing, honeypots, …) il obtient très facilement les données d’identification de l’utilisateur. Ces faiblesses sont d’autant plus gênantes que des études ont montré que les utilisateurs de services en ligne sont une majorité à utiliser le même mot de passe pour la plupart des services auxquels ils se connectent. Ainsi, l’obtention d’un mot de passe pour un service particulier donne bien souvent accès à la quasi-totalité des services en ligne pour lesquels les utilisateurs disposent d’une authentification.Nous proposons ici un protocole d'identification permettant de résoudre ces problèmes tout en conservant le système identifiant/mot de passe bien connu des utilisateurs et illustrons son usage pour trois applications différentes : la connexion à un service en ligne, l'ouverture d'une session sur un poste informatique et un contrôle d'accès physique à un local
Audit de datacentre : explication par l'exemple
No full textInternational audienceAre you interested in your datacenter? We are interested in it too!GDS EcoInfo (part of CNRS, the French National Centre for Scientific Research) offers a datacenter audit service to the higher education and research community with the objective of reducing operating costs by rationalising energy expenditure through the implementation of best practices via concrete actions. The poster presents the audit service offered by EcoInfo.If your datacenter is not optimised, it can consume at least as much energy to maintain acceptable operating conditions (UPS-protected power, cooling) as the energy required to supply power to the servers. Why do we let this happen?You are not the only ones: the worldwide energy consumption of datacenters represents 100 gigawatts of power, of which only a small part corresponds to the power consumed by the large high-profile datacenters that are already equipped with eco-friendly infrastructure.This is why your role in global energy saving is real and important. So... Have your datacenter audited!Votre Datacentre vous intéresse ? Il nous intéresse aussi !Le GDS EcoInfo du CNRS propose à la communauté de l'ESR un service d'audit de Datacentre dans l'objectif de réduire les coûts d'exploitation en rationalisant les dépenses énergétiques, en mettant en œuvre des bonnes pratiques via des actions concrètes. Le poster présente le service d'audit proposé par EcoInfo.S'il n'est pas optimisé, votre Datacentre peut consommer au moins autant d'énergie pour le maintien des conditions opérationnelles (électricité ondulée, froid) que pour l'alimentation effective des serveurs. N'est-ce pas dommage ?Et vous n'êtes pas les seuls : la consommation énergétique des Datacentres représente à l'échelle mondiale une puissance de 100GW, dont seule une petite partie correspond à la puissance consommée par les grands Datacentres médiatisés, qui sont déjà dotés d'infrastructures éco-responsables. C'est pour cela que votre rôle dans les gains énergétiques globaux est réel et important. Alors... Faites auditer votre Datacentre !Le GDS EcoInfo possède une expertise reconnue en urbanisation de Datacentres et propose depuis longtemps d'accompagner les responsables de salles sur le chemin de la sobriété énergétique. Ces audits peuvent prendre plusieurs formes. Nous nous appuierons sur un exemple concret réalisé en 2016 pour illustrer cette démarche. La méthodologie et les préconisations effectuées dans le cadre de cet audit seront présentées.Ainsi, le poster mettra en avant par l'exemple quelques bonnes pratiques pour la maîtrise énergétique des Datacentres, et la communauté des JRES pourra se rendre compte que le service d'audit proposé par le GDS EcoInfo est utile et accessible à tous
Cloud privé pour la recherche en informatique : Openstack à l'Inria Saclay
No full textThis presentation provides feedback on the implementation of a private cloud for researchers at the Inria Saclay centre and for certain teams from other research centres. We will revisit the steps and the difficulties of this project, as well as the solutions that we have put in place to guarantee service availability. In terms of the network, we will discuss the implementation of a 10-Gigabit Ethernet architecture rather than InfiniBand. In relation to the distributed storage, we will address the architecture-related choices made and the tuning needed to improve the performance of the Ceph cluster. Finally, we will see how we meet the wide-ranging needs of our researchers with only 32 servers and without installing all possible software layers imaginable.Cette présentation est un retour d'expérience sur la mise en place d'un cloud privé à destination des chercheurs du centre Inria Saclay et de certaines équipes des autres centres de recherche. Nous reviendrons sur les étapes, les difficultés de ce projet et sur les solutions que nous avons mises en place pour garantir une disponibilité de service. Sur le plan du réseau, nous aborderons la mise en place d'une architecture ethernet en 10 giga plutôt que de l'infiniband. Au niveau du stockage distribué, nous évoquerons les choix d'architecture qui ont été faits et le tuning nécessaire pour améliorer les performances du cluster Ceph. Enfin nous verrons comment nous répondons à un large panel de besoins de nos chercheurs avec seulement 32 serveurs et sans installer toutes les couches logicielles possibles et imaginables
RENATER, partenaire du projet CLONETS pour l’étude de la construction d’un réseau métrologique européen
No full textA scientific and technological paradigm change is currently taking place concerning the way that very high performance time and frequency reference signals are distributed. Researchers have already demonstrated performance that is several orders of magnitude better than the conventional methods by GNSS (GPS, Glonass, etc.) by transporting the signal over optical-fibre networks, over distances up to continental scales. CLONETS aims to prepare the transfer of this new generation of technology to industry. There are 16 European stakeholders representing all parties involved (national metrological institute, research and education telecommunications networks and several companies). They will collaborate in order to prepare the deployment of this technology to create a sustainable, pan-European network, providing high-performance “clock” services to European research infrastructures. Further, this core network will be designed to be compatible with a global European vision of time and frequency distribution over telecommunications networks, enabling it to provide support to a multitude of lower-performance time services, responding to the rapidlygrowing needs created by developments such as cloud computing, Internet of Things and Industry 4.0.Un bouleversement scientifique et technologique est en train de se produire dans la manière de distribuer des signaux de référence de fréquence et de temps. La mise au point de nouvelles techniques a permis d’utiliser la fibre optique comme support pour réaliser ces transferts, en démontrant des performances de plusieurs ordres de grandeur meilleurs que les méthodes classiques par GNSS (GPS, Glonass...), sur des distances allant jusqu'à des échelles continentales. CLONETS (CLOck NETwork Services) vise à préparer le transfert de cette nouvelle génération de technologie de transfert de temps et de fréquence à l'industrie. Ce sont ainsi 16 acteurs européens représentant l’ensemble des parties impliquées (laboratoires métrologiques nationaux, réseaux de télécommunication nationaux pour la recherche et l’éducation, ainsi que plusieurs entreprises) qui vont collaborer pour étudier les enjeux du déploiement d’un réseau paneuropéen métrologique basé sur des horloges atomiques et définir la meilleure stratégie pour l'implémenter. Ce réseau, en proposant des services de temps et de fréquence de très haute performance, sera à même de répondre aux besoins en croissance rapide créés par le Cloud Computing, l’Internet des objets et l'industrie 4.0
Valorisation énergétique d'un local informatique par free cooling
No full textInternational audienceOur Promes laboratory, UPR 8521 at the French National Centre for Scientific Research, or CNRS**,** specialises in solar energy and energy optimisation.Essential to maintaining suitable operating conditions for data processing equipment in data centres, air conditioning solutions are particularly energy hungry.The originality of this project lies in demonstrating that a direct air //free cooling// system in a Mediterranean region**,** can be effective in a local **data centre** without disrupting the existing basic structure.We will provide feedback on our experience with our system one full year after its installation. We will present our free **cooling** system controlled by a Raspberry Pi and a Python program.Based on our experience, we aim to answer the following questions:- Is it possible to cool a multipurpose computer room using //free cooling// if the airflow is not explicitly channelled?- Is it possible to heat our building with the warm air generated by IT without disturbing those people who use the building?- What are the resulting energy and financial savings?- How does this system behave with existing air-conditioning units on hot days?- How are we notified of a cooling system failure or breakdown?- How robust is the system?Finally, we will provide you with full documentation for implementing a //free cooling// system in your server rooms.Notre laboratoire Promes, UPR 8521 du CNRS**,** est spécialisé en énergie solaire et en optimisation énergétique. Indispensable au maintien de bonnes conditions de fonctionnement des équipements informatiques des centres de données, la climatisation est un poste particulièrement énergivore.L’originalité de ce projet est de démontrer qu’un système de //free cooling// à air direct, dans une région méditerranéenne**,** peut être efficace dans un **centre de données** de proximité sans remettre en cause la structure de base existante.Nous donnerons notre retour d’expérience sur une année complète après l’installation de notre système. Nous présenterons notre système de free **c**ooling commandé par un Raspberry et un programme Python.Ainsi, notre expérience vise à répondre aux questions suivantes :- Est-il possible de refroidir une salle informatique polyvalente par //free cooling// si les flux d’air ne sont pas clairement canalisés ? - Est-il possible de réchauffer notre bâtiment avec l’air chaud généré par l’informatique sans gêner les usagers du bâtiment ?- Quelles sont les économies énergétiques et financières réalisées ?- Comment se comporte ce système avec des climatiseurs existants lors des journées chaudes ?- Comment recevoir des messages en cas de panne de rafraîchissement ?- Quelle est la robustesse du système ?Nous vous proposerons pour conclure une documentation complète pour réaliser un //free cooling// dans vos salles serveurs
Virt'UL, un nouveau service numérique d'accès aux ressources informatiques
No full text====== Virt'UL, the name of a new service to access your IT ======Server virtualisation has reached a mature state while virtual desktop infrastructure (VDI) is still in its infancy. However, with the rapid arrival of BYOD (bring your own device), the market has evolved dramatically and many solutions now exist. The University of Lorraine has launched a working group focused on this subject.Since June 2016, the Virt’UL group has been responsible for undertaking a study into the use of BYOD, proposing several potential solutions and finally implementing the solution that provides, at the time of the study, the most functionality to our users. Virt’UL is also a new digital service that will be gradually offered to university users from September 2017.Based on the study into the use of BYOD by end users, the working group identified various potential solutions and offers you the chance to find out about the results of its work on three solutions:- Remote Desktop Services (RDS) farms/RemoteApp from Microsoft,- VDI Horizon View from VMware,- XenApp/XenDesktop from Citrix.For each solution, we present the different features, the situations where it should be used, the model for its administration and the financial aspects.La virtualisation de serveurs est parvenue à un état de maturation alors que la virtualisation du poste de travail (VDI) en est encore à balbutier. Pourtant, avec l’arrivée massive du BYOD, le marché a fortement évolué et de nombreuses solutions existent. L’Université de Lorraine a lancé un groupe de travail sur ce sujet.Depuis juin 2016, le groupe Virt’UL s’est donc chargé de faire l’étude des usages du BYOD, de proposer plusieurs pistes de solutions et finalement de mettre en œuvre la solution qui offre, au moment de l’étude, le plus de fonctionnalités à nos utilisateurs. Virt’UL est aussi ce nouveau service numérique qui sera offert progressivement aux usagers de l’université à partir de septembre 2017.A partir de l'étude des usages du BYOD par les utilisateurs finaux, le groupe de travail a recensé différentes pistes de solutions et propose de vous faire découvrir le résultat de ses travaux en trois études :- fermes TSE/RemoteApp de Microsoft,- VDI Horizon View de Vmware,- XenApp/XenDesktop de Citrix.Pour chaque solution, nous présentons les différentes fonctionnalités, les cas d'usage, le modèle d'administration et les aspects financiers