EOhopS project
Επεξεργασία δεδομένων παρατήρησης της Γης για την επιστήμη

Όταν η Ευρωπαϊκή Υπηρεσία Διαστήματος (European Space Agency - ESA) αποφάσισε να εισαγάγει στην ευρωπαϊκή επιστημονική κοινότητα υπηρεσίες βασισμένες στο cloud για δεδομένα παρατήρησης της γης, απευθύνθηκε στην cloudeo για να κατασκευάσει την απαραίτητη πλατφόρμα. Η ιδέα ήταν να συμπεριληφθούν τα λεγόμενα Third-Party Mission (TPM) - δηλαδή τα δεδομένα που δεν παρέχονται και δεν φιλοξενούνται από την ESA - σε αυτή την προσέγγιση που βασίζεται στο cloud: επί του παρόντος, οι χρήστες πρέπει να κατεβάζουν τέτοια δεδομένα TPM από τα αρχεία της ESA ή τους διακομιστές των παρόχων δεδομένων. Η διαδικασία αυτή χρησιμοποιεί εκτεταμένους πόρους εύρους ζώνης και απαιτεί μεγάλες δυνατότητες αποθήκευσης και διαχείρισης δεδομένων από την πλευρά των χρηστών.

Η Cloudeo διαθέτει πολυετή εμπειρία και τεχνογνωσία σε έργα και προϊόντα που βασίζονται σε έργα και προϊόντα Data-as-a-Service (DaaS), Software-as-a-Service (SaaS) και Platform-as-a-Service (PaaS). Ανέπτυξαν το Service API τους για να δημιουργήσουν μια ενιαία διεπαφή, η οποία επιτρέπει την πρόσβαση σε μεγάλα αρχεία (τυπικά για δεδομένα παρατήρησης της Γης) ανεξαρτήτως πλατφόρμας. Στην ουσία, το cloudeo Service API καθιστά ομοιογενή την πρόσβαση στα δεδομένα και απλοποιεί την πρόσβαση για την εφαρμογή crowdsourcing. Η ιδέα είναι ότι, αντί να αποκτούν ακριβές άδειες χρήσης λογισμικού και να αγοράζουν μεγάλα πακέτα δεδομένων απεικονίσεων EO με μεγάλο εύρος ζώνης και αποθηκευτικό χώρο, οι πελάτες μπορούν να πληρώνουν για τη χρήση και την επεξεργασία αυτών των αρχείων χρησιμοποιώντας εικονικούς σταθμούς εργασίας που περιλαμβάνουν άδειες χρήσης λογισμικού βάσει χρόνου. Αυτό το μοντέλο ήταν πολύ κατάλληλο για το έργο EOhopS- κυρίως, επειδή η ενσωματωμένη μέτρηση υποστηρίζει επιχειρηματικά μοντέλα πληρωμής ανά χρήση και ανά εφαρμογή, επιτρέποντας σε τρίτους παρόχους να εκμεταλλεύονται τα δεδομένα τους χωρίς ανησυχίες για τα δικαιώματα πνευματικής ιδιοκτησίας τους.

Το αντικείμενο του έργου ήταν να παρέχει στους επιστημονικούς χρήστες πρόσβαση σε αυτά τα δεδομένα EO τρίτων σε μια υποδομή επεξεργασίας που φιλοξενείται (παρόμοια με το cloudeo Workbench) χρησιμοποιώντας εικονικές μηχανές. Ταυτόχρονα, οι χρήστες καλούνταν επίσης να μεταφορτώσουν το περιεχόμενό τους, όπως δεδομένα επιτόπιων μετρήσεων ή επιστημονικούς αλγορίθμους, σε αυτόν τον εικονικό Workbench. Αυτή η ιδέα επιτρέπει στους χρήστες να επεξεργάζονται αυτούς τους τεράστιους όγκους δεδομένων στο νέφος και να μεταφορτώνουν μόνο τα επιθυμητά αποτελέσματα στο τοπικό υπολογιστικό τους περιβάλλον, εξοικονομώντας έτσι δαπανηρό εύρος ζώνης και πόρους αποθήκευσης, ενώ ταυτόχρονα προστατεύουν τα πνευματικά δικαιώματα των παρόχων TPM.

Το μοντέλο αυτό συνοδεύτηκε από πολλές υλικοτεχνικές προκλήσεις που έπρεπε να επιλυθούν, όπως οι όροι αδειοδότησης των EO Data-as-a-Service, η κατανομή των δυνατοτήτων απομακρυσμένης επεξεργασίας στους χρήστες και οι ασφαλείς συνδέσεις αυτής της υποδομής επεξεργασίας στο νέφος των παρόχων δεδομένων TPM για την παραγγελία και την πρόσβαση στο αρχείο, κ.λπ.

Δεδομένου ότι επρόκειτο για ένα διερευνητικό πρόγραμμα, τα έργα επιλέχθηκαν όχι μόνο με βάση την επιστημονική τους αξία, αλλά και με βάση το πόσο καλά ήταν σε θέση να χρησιμοποιήσουν τις νέες τεχνολογικές δυνατότητες, δηλαδή την ικανότητα να επεξεργάζονται μεγάλες ποσότητες δεδομένων εξ αποστάσεως, να μεταφορτώνουν το περιεχόμενό τους σε ένα απομακρυσμένο περιβάλλον για ανάλυση και να διαθέτουν μόνο τα αποτελέσματα της επεξεργασίας για λήψη.

Μόνο ένας περιορισμένος αριθμός έργων μπορούσε να εξυπηρετηθεί στο πλαίσιο των πόρων της ESA που διατέθηκαν για την υπηρεσία- τα έργα έγιναν δεκτά με βάση την αντιστοιχία τους με τους ανωτέρω στόχους και με βάση τη σειρά προτεραιότητας. Η ζήτηση υπερέβαινε τη χωρητικότητα του έργου: Μέχρι τώρα, όλοι οι πόροι του EOhopS έχουν διατεθεί και δεν γίνονται δεκτές άλλες αιτήσεις έργων.

EOhopS project
cloudeo AG, Dimitris Bellos 12 Ιουνίου, 2018
Ετικέτες
Σύνδεση to leave a comment
Χιόνι στην Αθήνα, Ελλάδα