Az adatintegráció és elosztott feldolgozás lehetőségei az agrárinformatikában

Az agrárgazdaság kapcsolatrendszerének bonyolultsága, a természeti tényezők és környezeti hatások sztochasztikus jellege, különböző élelmiszerláncok menedzselésének problémái miatt az ágazat különböző szintjein történő döntések meghozásához rendkívül összetett adatokra van szükség, amely különböző típusú adatok feldolgozását, hozzáférését és integrálását teszi szükségessé. A döntéshozatali folyamatban az információk puszta összegyűjtésén át a megszerzett információ feldolgozásáig szinte bármely mozzanatban alkalmazható, alkalmazandó az információtechnológia. Az egyre jobban elterjedő klaszter és grid technológia egy jó megoldást kínálhat az adatok feldolgozására és összegyűjtésére a különböző alkalmazásokban pl. a döntéstámogatásban, tudásbázis építésben vagy a monitorozó rendszerekben. A grid és az elosztott feldolgozású programok képesek egyesíteni a földrajzilag és szervezetileg különálló számítógépes kapacitásokat. Nemcsak a processzorokat és a tároló egységeket, hanem a kommunikációs rendszereket, valós idejű adatforrásokat, mérőeszközöket és az együttműködő kutatókat is. Képesek maximalizálni az adat és alkalmazáshasználatot centralizáció nélkül, egyszerűvé teszik a fenntartást és segítségükkel dinamikusan integrálhatóak a különböző helyről származó adatok. Prezentációnkban szeretnénk bemutatni az elosztott rendszerek és a grid technológia alapvető fogalmait, a Magyarországon jelenleg elérhető grid megoldásokat, bemutatunk néhány alkalmazást, amely segítséget nyújthat a mezőgazdasági döntésekben és vidékfejlesztési igények kielégítésében, és az AgriGrid rendszer alapját képezheti. Ezen kívül szeretnénk bemutatni a tanszékünkön telepített klasztert, mely a NorduGrid-hez csatlakozik az ARC middleware segítségével

Production grid systems and their programming

Summary form only given. There are a large variety of grid test-beds that can be used for experimental purposes by a small community. However, the number of production grid systems that can be used as a service for a large community is very limited. The current tutorial provides introduction to three of these very few production grid systems. They represent different models and policies of using grid resources and hence understanding and comparing them is an extremely useful exercise to everyone interested in grid technology. The Hungarian ClusterGrid infrastructure connects clusters during the nights and weekends. These clusters are used during the day for educational purposes at the Hungarian universities and polytechnics. Therefore, a unique feature of this grid is the switching mechanism by which the day time and night time working modes are loaded to the computers. In order to manage the system as a production, one, the system is homogeneous, all the machines should install the same grid software package. The second even larger production grid system is the LHC-grid that was developed by CERN to support the Large Hadron Collider experiments. This grid is also homogeneous but it works as a 24-hour service. All the computers in the grid are completely devoted to offer grid services. The LHC-grid is mainly used by physists but in the EGEE project other applications like bio-medical applications are ported and supported on this grid. The third production grid is the NorduGrid which is completely heterogeneous and the resources can join and leave the grid at any time as they need. The NorduGrid was developed to serve the Nordic countries of Europe but now more and more institutions from other countries join this grid due to its large flexibility. Concerning the user view an important question is how to handle this large variety of production grids and other grid test-beds. How to develop applications for such different grid systems and how to port applications among them? A possible answer for these important questions is the use of a grid portal technology. The EU GridLab project developed the GridSphere portal framework that was the basis of developing the P-GRADE grid portal. By the P-GRADE portal, users can develop workflow-like applications including HPC components and can run such workflows on any of the grid systems in a transparent way