Federating large astronomical databases  Page description

Help  Print 
Back »

 

Details of project

 
Identifier
114560
Type NN
Principal investigator Dobos, László
Title in Hungarian Nagy csillagászati adatbázisok összekapcsolása
Title in English Federating large astronomical databases
Keywords in Hungarian asztrofizikai adatbázisok, big data, elosztott adatbázisok, adatfederálás, virtuális obszervatórium
Keywords in English astrophysical databases, big data, distributed databases, data federation, virtual observatory
Discipline
Astrophysics (Council of Physical Sciences)80 %
Information Technology (Council of Physical Sciences)20 %
Ortelius classification: Applied informatics
Panel Physics
Department or equivalent Department of Physics of Complex Systems (Eötvös Loránd University)
Participants Bányai, Evelin
Beck, Róbert
Csabai, István
Hajdu, Tamás
Szalai-Gindl, János Márk
Starting date 2015-05-01
Closing date 2018-09-30
Funding (in million HUF) 31.662
FTE (full time equivalent) 7.11
state running project





 

Final report

 
Results in Hungarian
A pályázat eredeti célkitűzéseinek megfelelően jelentős munkát fektettünk a katalógusok keresztazonosítására szolgáló SkyQuery rendszer továbbfejlesztésébe. Az egyik fő tevékenység a SkyQuery és a Johns Hopkins egyetemen üzemeltett egyéb csillagászati adatbázisok összekapcsolása volt, mint pl. az SDSS SkyServer és a SciServer. Több mint 50 nagy csillagászati adatbázist annotáltunk és konvertáltunk a SkyQuery rendszerébe, így azokon elvégezhetővé vált a keresztazonosítás. Jelentős munkát fektettünk a Lábnyom Szolgáltatás új verziójának kifejlesztésébe, mely hamarosan on-line elérhetővé válik és égterületek egzakt geometriai adatbázisát teszi lehetővé, mint amilyenek pl. az égtérképek lefedettségi térképei. Ehhez kapcsolódóan az ESA-val együttműködésben egy adatbázist építettünk, mely a Herschel Űrteleszkóp méréseinek lefedettségi térképeit tartalmazza. Jelentős előrehaladást tettünk a fotometrikus vöröseltolódás-becslés témakörében. Elkészítettük az SDSS DR12 “hivatalos” foto-z katalógusát és egy cikksorozatot indítottunk a foto-z technikák validálásáról. Újtípusú kozmológiai szimulációk kifejlesztésébe kezdtünk. Az inhomogén módon táguló univerzumot modellező szimulációnk eredményének jelentős nemzetközi visszhangja volt. Egy olyan új típusú, standard szimuláción is elkezdtünk dolgozni, mely periodikus doboz helyett gömbi geometriát használ. Fő előnye, hogy jobban illeszkedik a megfigyelésekhez, ezért fontos eszköz lehet a közeljövő nagy égfelméréseinek kiértékelésében.
Results in English
According to the main goal of the proposal, we have put significant work into the development of the SkyQuery on-demand cross-match tool. The main effort went into integrating SkyQuery with the rest of astronomy related database and data processing services at the Johns Hopkins University, particularly the SDSS SkyServer and SciServer. We have annotated and converted more than 50 important astronomical data sets to be accessible from SkyQuery for cross-matching. We have done significant work on a new version of Footprint Service which will soon be published on-line and will allow access to the exact geometric description of spherical regions such as sky survey footprint. As a side project to the Footprint Service, in collaboration with ESA, we built a database of observation sky coverage for the Herschel Space Observatory. We have done significant work in the field of photometric redshift estimation. We created the "official" catalog of photo-z redshift for the Sloan Digital Sky Survey and started a series of papers on photo-z validation. We started working on new types of n-body cosmological simulations. Our simulation of the inhomogeneously expanding universe spurred international interest. We have started working on a new type of standard cosmological simulation which uses a spherical geometry instead of a periodic box. Matching the observations better, this simulation technique is expected to be an important tool for analyzing future large scale sky survey data.
Full text https://www.otka-palyazat.hu/download.php?type=zarobeszamolo&projektid=114560
Decision
Yes





 

List of publications

 
Beck, Róbert; Dobos, László; Budavári, Tamás; Szalay, Alexander S.; Csabai, István: Photometric redshifts for the SDSS Data Release 12, accepted for publication in Monthly Notices of the Royal Astronomical Society, 2016
Beck, Róbert; Dobos, László; Yip, Ching-Wa; Szalay, Alexander S.; Csabai, István: Quantifying correlations between galaxy emission lines and stellar continua, Monthly Notices of the Royal Astronomical Society, Volume 457, Issue 1, p.362-374, 2016
Laszlo Dobos, Tamas Budavari, Evelin Banyai, Istvan Csabai and Alexander Szalay: SKYQUERY: A PARALLEL DATABASE PLATFORM FOR ON-DEMAND CROSS-MATCHING, Proceedings of the ESA Conference on Big Data from Space (BIDS), 2016
Verebélyi, Erika; Dobos, László; Kiss, Csaba: Footprint Database and web services for the Herschel space observatory, Proceedings of the IAU General Assembly, Meeting #29, id.2236977, 2015
Erika Verebelyi, Laszlo Dobos, Eva Verdugo, David Teyssier, Katrina Exter, Ivan Valtchanov and Csaba Kiss: A FOOTPRINT DATABASE OF THE HERSCHEL SPACE OBSERVATORY, Proceedings of the ESA Conference on Big Data from Space (BIDS), 2016
Varga-Verebélyi Erika: Hideg galaktikus molekulafelhők vizsgálata, doktori értekezés - 7. fejezet, 2016
Beck, Róbert; Dobos, László; Budavári, Tamás; Szalay, Alexander S.; Csabai, István: Photometric redshifts for the SDSS Data Release 12, Monthly Notices of the Royal Astronomical Society, Volume 460, Issue 2, p.1371-1381, 2016
Rácz, Gábor; Dobos, László; Beck, Róbert; Szapudi, István; Csabai, István: Concordance cosmology without dark energy, Monthly Notices of the Royal Astronomical Society: Letters, Volume 469, Issue 1, p.L1-L5, 2017
Beck, R.; Dobos, L.; Budavári, T.; Szalay, A. S.; Csabai, I.: Photo-z-SQL: Integrated, flexible photometric redshift computation in a database, Astronomy and Computing, Volume 19, p. 34-44., 2017
Bagoly, Z.; Horvath, I.; Szecsi, D.; Balazs, L. G.; Csabai, I.; Dobos, L.; Lichtenberger, J.; Toth, L. V.: The Automatized Detector Weight Optimization (ADWO) Method for Searching Weak Electromagnetic Counterparts of Gravitational Waves, Eighth Huntsville Gamma-Ray Burst Symposium, held 24-28 October, 2016 in Huntsville, Alabama. LPI Contribution No. 1962, id.4009, 2016
Bagoly, Zsolt; Szécsi, Dorottya; Balázs, Lajos G.; Csabai, István; Horváth, István; Dobos, László; Lichtenberger, János; Tóth, L. Viktor: Searching for electromagnetic counterpart of LIGO gravitational waves in the Fermi GBM data with ADWO, Astronomy & Astrophysics, Volume 593, id.L10, 4 pp., 2016
Banyai, E.; Plachy, E.; Molnar, L.; Dobos, L.; Szabo, R.: Constraining RRc candidates using SDSS colours, Communications from the Konkoly Observatory, Vol. 105, p. 195-196, 2016
Beck Róbert: Empirical and spectral template based approaches in the analysis of galaxy data, a doktori értekezés jelenleg bírálat alatt áll, 2017
G Rácz, I Szapudi, I Csabai, L Dobos: Compactified Cosmological Simulations of the Infinite Universe, accepted for MNRAS 2018, arXiv:1711.04959, 2018
R Beck, I Csabai, G Rácz, I Szapudi: The integrated Sachs-Wolfe effect in the AvERA cosmology, submitted to MNRAS 2018, arXiv:1801.08566, 2018
L Dobos, G Csörnyei: The effect of emission lines on the performance of photometric redshift estimation algorithms, In preparation, 2018
G Dálya, G Galgóczi, L Dobos, Z Frei, I S Heng, R Macas, C Messenger, P Raffai, R S. de Souza: GLADE: A Galaxy Catalogue for Multi-Messenger Searches in the Advanced Gravitational-Wave Detector Era, submitted to MNRAS 2018, arXiv:1804.05709, 2018
Beck Róbert: Empirical and spectral template based approaches in the analysis of galaxy data, https://edit.elte.hu/xmlui/handle/10831/37497, 2017
G Rácz, I Szapudi, I Csabai, L Dobos: Compactified Cosmological Simulations of the Infinite Universe, Monthly Notices of the Royal Astronomical Society, Volume 477, Issue 2, p.1949-1957, 2018
R Beck, I Csabai, G Rácz, I Szapudi: The integrated Sachs-Wolfe effect in the AvERA cosmology, Monthly Notices of the Royal Astronomical Society, Volume 479, Issue 3, p.3582-3591, 2018
G Dálya, G Galgóczi, L Dobos, Z Frei, I S Heng, R Macas, C Messenger, P Raffai, R S. de Souza: GLADE: A Galaxy Catalogue for Multi-Messenger Searches in the Advanced Gravitational-Wave Detector Era, Monthly Notices of the Royal Astronomical Society, Volume 279, Issue 2, pp. 2374-2381, 2018
Dobos, László; Varga-Verebélyi, Erika; Verdugo, Eva; Teyssier, David; Exter, Katrina; Valtchanov, Ivan; Budavári, Tamás; Kiss, Csaba: The Footprint Database and Web Services of the Herschel Space Observatory, Experimental Astronomy, Volume 42, Issue 2, pp.139-164, 2016
Plachy, E.; Molnar, L.; Szabo, R.; Kolenberg, K.; Banyai, E: Target selection of classical pulsating variables for space-based photometry, Communications from the Konkoly Observatory, Vol. 105, p. 19-22, 2016
János M Szalai-Gindl, László Dobos, István Csabai: Tiling Strategies for Distributed Point Cloud Databases, Proceedings of the 29th International Conference on Scientific and Statistical Database Management pp. 32, 2017
Beck, R., et al.: On the realistic validation of photometric redshifts, Monthly Notices of the Royal Astronomical Society Volume 468 Issue 4 pp.4323-4339., 2017
István Csabai, László Dobos, Attila Kiss and János M. Szalai-Gindl: Some Mathematical Properties of the Performance Measures Applied for Point Cloud Databases, Annales Universitatis Scientiarum Budapestinensis de Rolando Eötvös Nominatae, Sectio Computatorica, Volume 47, pp. 197–209, 2018
János M. Szalai-Gindl, Tamás Budavári, Thomas J. Loredo, Brandon C. Kelly, István Csabai, László Dobos: Hierarchical Bayesian Method for Estimating Luminosity Function, accepted for publication in Astronomy and Computing, 2018
Csörnyei Géza: Fotometriai vöröseltolódás-becslések pontosítása, BSc szakdolgozat, 2018
L Dobos, T Budavári, E Bányai, T Hajdu, Alexander S. Szalay: SkyQuery: a web service for fast cross-matching of the largest astronomical catalogs, Division B of IAU General Assembly, Vienna, 2018
G Csörnyei, L Dobos: Characterizing the effect of emission lines on photometric redshift estimation, Division J of IAU General Assembly, Vienna, 2018
Ribli, Dezső, Bálint Ármin Pataki, and István Csabai: An improved cosmological parameter inference scheme motivated by deep learning, Nature Astronomy doi:10.1038/s41550-018-0596-8, 2018





 

Events of the project

 
2017-10-25 10:37:39
Résztvevők változása
2015-09-17 09:12:22
Résztvevők változása




Back »