Journal : Pas de Windows pour les astronomes !

Posté par patrick_g (page perso, ) le 26 avril 2004
0
Vu dans The Messenger, la dernière lettre trimestrielle de l'ESO (observatoire européen austral).

Le problème est le suivant : comment transmettre économiquement les données astronomiques créées par les télescopes aux différents astronomes à travers l'Europe ?
Le flot étant gigantesque un FTP n'est pas envisageable et les différents types de K7 posent des problèmes de compatibilité et de temps d'accès.
La solution est d'envoyer des disques durs (pas chers + accès rapide) et de demander aux astronomes de les renvoyer après une semaine.
Maintenant un nouveau problème vous saute aux yeux : quel file system utiliser pour ces disques durs ?

La réponse de l'ESO :

To make the disks readable on as many
computer platform as possible, we choose to
create a file system on the disk such as to
make it look like a (very) large CD. In this
way, three of the main operating systems
used by astronomers could be supported
with the same setup: all of Linux, Solaris 8
and MacOS X can easily read the disks that
we so produce.

La solution est en effet astucieuse mais surtout on voit que Windows n'est même pas dans les trois OS les plus utilisés par les astronomes….

L'URL : http://www.eso.org/gen-fac/pubs/messenger/(...)

> Lire le journal (21 commentaires, moyenne: 1,1).  

Cette discussion est archivée, il n'est plus possible de laisser des commentaires.

Note : les commentaires appartiennent à ceux qui les ont postés. Nous n'en sommes pas responsables.

Re: Pas de Windows pour les astronomes !

Posté par Obsidian () le 26/04/2004 à 10:07. (lien). Évalué à 3.

Très bien ! :-)

En fait, on voit surtout que dans le secteur de la recherche, Unix est très privilégié. Moralité, les gens érudits choisissent d'eux-même le meilleur système (attention: un troll se cache dans ce commentaire) ...

  • [^]Re: Pas de Windows pour les astronomes !

    Posté par puxor () le 26/04/2004 à 10:15. (lien). Évalué à 1.

    c'est qui rudit ?

    je suis déjà loin...

    • [+] [^]Re: Pas de Windows pour les astronomes !

      Posté par symoon (page perso, ) le 26/04/2004 à 10:17. (lien). Évalué à -1.

      c'est qui rudit ?

      rudy !

Re: Pas de Windows pour les astronomes !

Posté par marvin () le 26/04/2004 à 10:23. (lien). Évalué à 1.

> La solution est en effet astucieuse

Mouais :-/
Je ne suis pas sûr que l'iso 9660 (FS des cd) soit très approprié pour:
- les immenses volumes de données.
- la modification des données en second lieu.

Bon, dans la mesure ou ils ne s'en servent que pour le transport...

  • [^]Re: Pas de Windows pour les astronomes !

    Posté par Jak () le 26/04/2004 à 11:23. (lien). Évalué à 1.

    >- les immenses volumes de données.
    Pourquoi ? Perte d'espace à cause de la structure ?

    >- la modification des données en second lieu.
    Ben, a priori, c'est pour transférer des données, pas pour les bricoler, donc ça ne semble pas gênant.

    --
    « Le savoir, n'est-ce pas, est un bien précieux. Trop précieux pour ne pas être partagé. »
    - Battologio d'Epanalepse, in De Cape et de Crocs, Acte VII (Ayroles & Masbou)
  • [^]Re: Pas de Windows pour les astronomes !

    Posté par Nicolas () le 27/04/2004 à 16:57. (lien). Évalué à 1.

    je suis pas sur que l'iso 9660 soit le choix non? Ca peut etre de l'UDF aussi.
    Par contre l'avantage de cela c'est de garantir que les donnees sr le disque resteront tel quel sans que qq'un s'amuse a effacer des fichiers...

Re: Pas de Windows pour les astronomes !

Posté par KiKouN (Jabber id, ) le 26/04/2004 à 10:26. (lien). Évalué à 1.

Ils pourraient utiliser le p2p. Ce serait l'occasion de démontrer que ce type de transmission n'est pas que mauvais.

--
KiKouN, Bucheron-Geek
  • [^]Re: Pas de Windows pour les astronomes !

    Posté par Jak () le 26/04/2004 à 11:21. (lien). Évalué à 1.

    Non, je ne pense pas, car les données à transférer ne sont disponibles qu'à un seul endroit.

    --
    « Le savoir, n'est-ce pas, est un bien précieux. Trop précieux pour ne pas être partagé. »
    - Battologio d'Epanalepse, in De Cape et de Crocs, Acte VII (Ayroles & Masbou)
    • [^]Re: Pas de Windows pour les astronomes !

      Posté par \o/ (Jabber id, ) le 26/04/2004 à 11:38. (lien). Évalué à 2.

      Bittorrent ne conviendrait-il pas pour ça?

      • [^]Re: Pas de Windows pour les astronomes !

        Posté par Yannick Beynet (page perso, ) le 26/04/2004 à 12:09. (lien). Évalué à 0.

        bof quand il y a un seul émetteur ...

        • [^]Re: Pas de Windows pour les astronomes !

          Posté par wismerhill (page perso, ) le 26/04/2004 à 14:07. (lien). Évalué à 1.

          Avec bittorrent, les personnes qui sont en cours de téléchargement uploadent ausi pour les autres.

          • [^]Re: Pas de Windows pour les astronomes !

            Posté par KiKouN (Jabber id, ) le 26/04/2004 à 20:41. (lien). Évalué à 1.

            puis ils peuvent laisser disponible après même.

            Et il ne faut pas oublier que ces scientifiques sont en université pour une partie. Ce qu'il laisse penser une bonne bande passante et dans les deux sens. Et les autres doivent aussi, je pense, avoir une bonne connection.

            --
            KiKouN, Bucheron-Geek
      • [^]Re: Pas de Windows pour les astronomes !

        Posté par Fabien Jakimowicz (page perso, ) le 26/04/2004 à 12:17. (lien). Évalué à 0.

        Non etant donne l'unicite de la source, on en revient au probleme du serveur ftp.

        • [^]Re: Pas de Windows pour les astronomes !

          Posté par Polaris () le 26/04/2004 à 12:26. (lien). Évalué à 3.

          Justement pas. L'intérêt de bittorent, c'est de pouvoir alimenter une grosse demande à partir d'une source: toutes les destinations se transforment en sources secondaires tant qu'elles restent connectées... Comme la source d'origine se débrouille pour ne pas dupliquer ce qu'elle distribue, l'upload des clients s'ajoute à celle du serveur.

  • [^]Re: Pas de Windows pour les astronomes !

    Posté par Nicolas () le 27/04/2004 à 16:57. (lien). Évalué à 1.

    actuellement ils envoie des dvds pour les donnees au PI (principal investigator) du projet, et j'ai bien dit DES dvds (en gros une nuit d'observation te donne droit a 4/5 dvds, sachant que tu as 4 telescopes qui fonctionnent en meme temps t'imagine le masse de donnees chaque jour et le probleme va croitre de plus en plus du fait de l'evolution des instruments et des CCD et de l'arrive d'autre telescope. En fait le probleme essentiel (mais bon Eddy<, malheureusement absent, pourrait donner plus de details) c'est que les donnees en questions sont archive au paranal et envoye le lendemain par liaison satellite au centre de Garching, ca fonctionne mais cela laisse plein de probleme. Maintenant si Internet 2 voit le jour cela changera peut etre la donne

Re: Pas de Windows pour les astronomes !

Posté par jigso () le 26/04/2004 à 11:54. (lien). Évalué à 2.

Pourquoi pas utiliser le disque comme une bande, tar zcvf /dev/hdX, et zou !

  • [^]Re: Pas de Windows pour les astronomes !

    Posté par Obsidian () le 26/04/2004 à 12:15. (lien). Évalué à 1.

    Parce qu'il suffit d'un seul secteur défectueux pour tout compromettre.

    Un FS minimaliste est effectivement indiqué pour récupérer le maximum d'espace disponible, mais il faut au minimum garantir l'intégrité du support ...

    • [^]Re: Pas de Windows pour les astronomes !

      Posté par KiKouN (Jabber id, ) le 26/04/2004 à 14:39. (lien). Évalué à 2.

      surtout avec des disques pas chers et qui voyageront par la poste.

      --
      KiKouN, Bucheron-Geek
    • [^]Re: Pas de Windows pour les astronomes !

      Posté par Laurent (Jabber id, ) le 26/04/2004 à 18:11. (lien). Évalué à 1.

      normalement afio est exempt de ce probleme

      On pourrait aussi imaginer utiliser UFS plutot que iso9660

      mais j'ai l'impression que l'utilisation de bittorrent serait plus adaptée au problème. Enfin moi je dis ça ...

      • [^]Re: Pas de Windows pour les astronomes !

        Posté par Khanh-Dang (page perso, ) le 26/04/2004 à 18:33. (lien). Évalué à 1.

        Sauf que dans le cas des données d'astronomes, la quantité s'exprime facilement en teraoctets. Le courier (postal, pas SMTP !) est donc un moyen très rapide et peu cher.

        Le coût bande passante doit certainement être très élevé quand il s'agit de transférer autant de données.

    • [^]Re: Pas de Windows pour les astronomes !

      Posté par jigso () le 27/04/2004 à 07:28. (lien). Évalué à 1.

      Parce qu'il suffit d'un seul secteur défectueux pour tout compromettre.

      C'est vrai pour tout FS...

      Dans le cas d'un tar, on peut - en ne compressant pas - toujours sauter le secteur défectueux et continuer au fichier suivant. Seuls les fichiers du secteur défectueux seront touchés (comme avec un FS classique).

Revenir en haut de page