|
Zenodo
Zenodo es un repositorio de acceso abierto de propósito general desarrollado bajo el programa europeo OpenAIRE y operado por CERN .[1][2] Permite a los investigadores depositar artículos de investigación, conjuntos de datos, software de investigación, informes y cualquier otro artefacto digital relacionado con la investigación. Para cada envío, se acuña un identificador de objeto digital persistente (DOI), lo que hace que los elementos almacenados se puedan citar fácilmente. Financiadores que apoyan a ZenodoPuede vincular registros en Zenodo a subvenciones de los siguientes patrocinadores: Comisión Europea (Programa Marco 7 / Horizonte 2020). A finales de junio de 2017, también lanzaremos subvenciones para los siguientes donantes:
FCT - Fundação para a Ciência e a Tecnologia, I.P. (Portugal) MESTD - Ministerio de Educación, Ciencia y Desarrollo Tecnológico (Serbia) MZOS - Ministerio de Ciencia, Educación y Deportes de la República de Croacia (Croacia) NHMRC - Consejo Nacional de Investigación Médica y de Salud (Australia) NSF - Fundación Nacional de Ciencias (EE. UU.) NWO - Organización de los Países Bajos para la Investigación Científica (Países Bajos) WT - Wellcome Trust (Reino Unido) Además, OpenAIRE tiene los siguientes financiadores en proceso que estarán disponibles en Zenodo una vez que se lancen en OpenAIRE:
NIH - Institutos Nacionales de Salud (EE. UU.) RCUK - Consejo de Investigación del Reino Unido (Reino Unido) SFI - Fundación de Ciencias de Irlanda (Irlanda) SNSF - Fundación Nacional de Ciencias de Suiza (Suiza) TARA - Fundación Tara Expeditions CaracterísticasZenodo se creó en 2013 con el nombre de repositorio de registros huérfanos de OpenAire [3] para permitir que los investigadores de cualquier área temática cumplan con cualquier requisito de depósito de ciencia abierta sin un repositorio institucional. Se relanzó como Zenodo en 2015 para proporcionar un lugar para que los investigadores depositen conjuntos de datos[4] permitiendo la carga de archivos hasta 50 GB.[5][6] Proporciona un DOI a los conjuntos de datos[7] y otros datos enviados que carecen de uno para facilitar la cita y admite varios tipos de datos y licencias. Una fuente compatible son los repositorios de GitHub .[8] Zenodo cuenta con el respaldo del CERN "como una actividad marginal" y está alojado en la infraestructura informática de alto rendimiento que se opera principalmente para las necesidades de la física de alta energía.[9] Zenodo se ejecuta con Invenio (un entorno de software libre para repositorios digitales a gran escala), envuelto por una pequeña capa adicional de código que también se llama Zenodo .[10] En 2019, Zenodo anunció una asociación con el repositorio de datos Dryad para desarrollar conjuntamente nuevas soluciones centradas en respaldar los flujos de trabajo de investigadores y editores, así como las mejores prácticas en software y curación de datos.[11] InfraestructuraOrganizativoInstitución de acogidaZenodo está alojado en el CERN, que existe desde 1954 y actualmente tiene un programa experimental definido para los próximos 20 años. El CERN es una institución de memoria para la Física de Altas Energías y es reconocida por su trabajo pionero en Acceso Abierto. Organizacionalmente, Zenodo está integrado en el Departamento de TI, Grupo de Aplicaciones y Dispositivos de Colaboración, Sección de Repositorios Digitales (IT-CDA-DR). El CERN ofrece a Zenodo como parte de su misión de poner a disposición los resultados de su trabajo ( Convenio CERN, artículo II, §1 ). Estatus legalEl CERN es una organización intergubernamental y tiene personalidad jurídica en los territorios metropolitanos de todos los Estados miembros del CERN ( Convenio CERN, artículo IX ) y goza de la capacidad jurídica correspondiente en virtud del derecho internacional público. Como organización intergubernamental, el CERN disfruta de ciertos privilegios e inmunidades, incluida, por ejemplo, la inmunidad de jurisdicción de los tribunales nacionales para garantizar nuestra independencia de los Estados miembros individuales. Esto no significa que el CERN opere en algún tipo de vacío legal, ya que los protocolos requieren que el CERN resuelva sus disputas por otros medios. Lea más sobre el estatus legal del CERN en el Boletín del CERN . Documentos legales:
FondosZenodo está financiado por:
Zenodo se desarrolla y se respalda como una actividad marginal, y se aloja sobre la infraestructura y los servicios existentes en el CERN, con el fin de reducir los costos operativos y confiar en los esfuerzos existentes para la Física de Altas Energías. El CERN cuenta con algunos de los principales expertos del mundo en la ejecución de infraestructuras de datos de investigación a gran escala y repositorios digitales en los que confiamos para ofrecer un repositorio digital confiable. PersonalActualmente, Zenodo es operado por:
Sin embargo, Zenodo está integrado en un equipo mucho más grande, encabezado por José Benito González López, que ejecuta servicios como CERN Document Server , CERN Open Data , CERN Analysis Preservation y confiamos en gran medida en las funciones de desarrollo conjunto a través del marco de la biblioteca digital de Invenio . MembresíasEl CERN es miembro activo de las siguientes organizaciones y organismos internacionales (no exhaustivo):
Somos socios en múltiples proyectos financiados por la Comisión Europea, entre otros:
TécnicoZenodo funciona con CERN Data Center y el marco de la biblioteca digital Invenio y se ejecuta completamente en productos de código abierto. Físicamente, toda la infraestructura técnica de Zenodo se encuentra en las instalaciones del CERN, que están sujetas al estatus legal del CERN (ver arriba). Gestión del servidorLos servidores de Zenodo se administran a través del sistema de administración de configuración OpenStack y Puppet , lo que garantiza que nuestros servidores siempre tengan aplicados los últimos parches de seguridad. Los servidores se monitorean a través de la infraestructura de monitoreo del CERN basada en Flume, Elasticsearch, Kibana y Hadoop. Los errores de la aplicación se registran y se agregan en una instancia de Sentry local . El tráfico a los servidores frontend de Zenodo se equilibra la carga a través de una combinación de equilibrio de carga de DNS y equilibradores de carga de HAProxy. Además, estamos ejecutando dos sistemas independientes: un sistema de producción y un sistema de garantía de calidad . Esto asegura que todos los cambios, ya sea a nivel de infraestructura o de código fuente, puedan ser probados y validados en nuestro sistema de aseguramiento de la calidad antes de ser aplicados a nuestro sistema de producción. Servidores frontendLos servidores frontend de Zenodo son responsables de ejecutar la aplicación de la plataforma de repositorio Invenio, que se basa en Python y el marco de desarrollo web Flask. Los servidores frontend ejecutan el servidor HTTP nginx y el servidor de aplicaciones uwsgi frente a la aplicación y nginx además se encarga de servir contenido estático. Almacenamiento de datosTodos los archivos cargados en Zenodo se almacenan en el servicio EOS del CERN en un clúster de disco de 18 petabytes. Cada copia de archivo tiene dos réplicas ubicadas en diferentes servidores de disco. Para cada archivo, almacenamos dos sumas de comprobación MD5 independientes. Invenio almacena una suma de comprobación y la utiliza para detectar cambios en archivos realizados desde fuera de Invenio. La otra suma de comprobación es almacenada por EOS y se utiliza para la detección y recuperación automática de archivos corruptos en discos. Zenodo puede, dependiendo de los patrones de acceso en el futuro, mover el archivo y / o la copia en línea al sistema de almacenamiento en cinta a largo plazo CASTOR del CERN para minimizar los costos de almacenamiento a largo plazo. EOS es la principal infraestructura de almacenamiento de baja latencia para datos físicos del Gran Colisionador de Hadrones (LHC) y el CERN actualmente opera múltiples instancias por un total de más de 150 petabytes de datos con tasas de crecimiento esperadas de 30 a 50 petabytes por año. El sistema CASTOR del CERN gestiona actualmente más de 100 petabytes de datos del LHC que se comprueban periódicamente para detectar daños en los datos. Invenio proporciona un almacén de objetos como una capa de gestión de archivos sobre EOS que se encarga, por ejemplo, de los cambios de versión de los archivos. Almacenamiento de metadatosLos metadatos y los identificadores persistentes en Zenodo se almacenan en una instancia de PostgreSQL operada en la infraestructura de base de datos bajo demanda del CERN con un ciclo de respaldo de 12 horas con un respaldo enviado al almacenamiento en cinta una vez a la semana. Además, los metadatos están indexados en un clúster de Elasticsearch para una búsqueda rápida y potente. Los metadatos se almacenan en formato JSON en PostgreSQL en una estructura descrita por JSONSchemas versionados. Todos los cambios en los registros de metadatos en Zenodo están versionados y ocurren dentro de las transacciones de la base de datos. Además de los metadatos y el almacenamiento de datos, Zenodo confía en Redis para el almacenamiento en caché y RabbitMQ y python Celery para trabajos distribuidos en segundo plano. SeguridadNos tomamos la seguridad muy en serio y hacemos todo lo posible para proteger sus datos.
OrganizativoInstitución de acogidaZenodo está alojado en el CERN, que existe desde 1954 y actualmente tiene un programa experimental definido para los próximos 20 años. El CERN es una institución de memoria para la Física de Altas Energías y es reconocida por su trabajo pionero en Acceso Abierto. Organizacionalmente, Zenodo está integrado en el Departamento de TI, Grupo de Aplicaciones y Dispositivos de Colaboración, Sección de Repositorios Digitales (IT-CDA-DR). El CERN ofrece a Zenodo como parte de su misión de poner a disposición los resultados de su trabajo ( Convenio CERN, artículo II, §1 ). Estatus legalEl CERN es una organización intergubernamental y tiene personalidad jurídica en los territorios metropolitanos de todos los Estados miembros del CERN ( Convenio CERN, artículo IX ) y goza de la capacidad jurídica correspondiente en virtud del derecho internacional público. Como organización intergubernamental, el CERN disfruta de ciertos privilegios e inmunidades, incluida, por ejemplo, la inmunidad de jurisdicción de los tribunales nacionales para garantizar nuestra independencia de los Estados miembros individuales. Esto no significa que el CERN opere en algún tipo de vacío legal, ya que los protocolos requieren que el CERN resuelva sus disputas por otros medios. Lea más sobre el estatus legal del CERN en el Boletín del CERN . Documentos legales:
FondosZenodo está financiado por:
Zenodo se desarrolla y se respalda como una actividad marginal, y se aloja sobre la infraestructura y los servicios existentes en el CERN, con el fin de reducir los costos operativos y confiar en los esfuerzos existentes para la Física de Altas Energías. El CERN cuenta con algunos de los principales expertos del mundo en la ejecución de infraestructuras de datos de investigación a gran escala y repositorios digitales en los que confiamos para ofrecer un repositorio digital confiable. PersonalActualmente, Zenodo es operado por:
Sin embargo, Zenodo está integrado en un equipo mucho más grande, encabezado por José Benito González López, que ejecuta servicios como CERN Document Server , CERN Open Data , CERN Analysis Preservation y confiamos en gran medida en las funciones de desarrollo conjunto a través del marco de la biblioteca digital de Invenio . MembresíasEl CERN es miembro activo de las siguientes organizaciones y organismos internacionales (no exhaustivo):
Somos socios en múltiples proyectos financiados por la Comisión Europea, entre otros:
TécnicoZenodo funciona con CERN Data Center y el marco de la biblioteca digital Invenio y se ejecuta completamente en productos de código abierto. Físicamente, toda la infraestructura técnica de Zenodo se encuentra en las instalaciones del CERN, que están sujetas al estatus legal del CERN (ver arriba). Gestión del servidorLos servidores de Zenodo se administran a través del sistema de administración de configuración OpenStack y Puppet , lo que garantiza que nuestros servidores siempre tengan aplicados los últimos parches de seguridad. Los servidores se monitorean a través de la infraestructura de monitoreo del CERN basada en Flume, Elasticsearch, Kibana y Hadoop. Los errores de la aplicación se registran y se agregan en una instancia de Sentry local . El tráfico a los servidores frontend de Zenodo se equilibra la carga a través de una combinación de equilibrio de carga de DNS y equilibradores de carga de HAProxy. Además, estamos ejecutando dos sistemas independientes: un sistema de producción y un sistema de garantía de calidad . Esto asegura que todos los cambios, ya sea a nivel de infraestructura o de código fuente, puedan ser probados y validados en nuestro sistema de aseguramiento de la calidad antes de ser aplicados a nuestro sistema de producción. Servidores frontendLos servidores frontend de Zenodo son responsables de ejecutar la aplicación de la plataforma de repositorio Invenio, que se basa en Python y el marco de desarrollo web Flask. Los servidores frontend ejecutan el servidor HTTP nginx y el servidor de aplicaciones uwsgi frente a la aplicación y nginx además se encarga de servir contenido estático. Almacenamiento de datosTodos los archivos cargados en Zenodo se almacenan en el servicio EOS del CERN en un clúster de disco de 18 petabytes. Cada copia de archivo tiene dos réplicas ubicadas en diferentes servidores de disco. Para cada archivo, almacenamos dos sumas de comprobación MD5 independientes. Invenio almacena una suma de comprobación y la utiliza para detectar cambios en archivos realizados desde fuera de Invenio. La otra suma de comprobación es almacenada por EOS y se utiliza para la detección y recuperación automática de archivos corruptos en discos. Zenodo puede, dependiendo de los patrones de acceso en el futuro, mover el archivo y / o la copia en línea al sistema de almacenamiento en cinta a largo plazo CASTOR del CERN para minimizar los costos de almacenamiento a largo plazo. EOS es la principal infraestructura de almacenamiento de baja latencia para datos físicos del Gran Colisionador de Hadrones (LHC) y el CERN actualmente opera múltiples instancias por un total de más de 150 petabytes de datos con tasas de crecimiento esperadas de 30 a 50 petabytes por año. El sistema CASTOR del CERN gestiona actualmente más de 100 petabytes de datos del LHC que se comprueban periódicamente para detectar daños en los datos. Invenio proporciona un almacén de objetos como una capa de gestión de archivos sobre EOS que se encarga, por ejemplo, de los cambios de versión de los archivos. Almacenamiento de metadatosLos metadatos y los identificadores persistentes en Zenodo se almacenan en una instancia de PostgreSQL operada en la infraestructura de base de datos bajo demanda del CERN con un ciclo de respaldo de 12 horas con un respaldo enviado al almacenamiento en cinta una vez a la semana. Además, los metadatos están indexados en un clúster de Elasticsearch para una búsqueda rápida y potente. Los metadatos se almacenan en formato JSON en PostgreSQL en una estructura descrita por JSONSchemas versionados. Todos los cambios en los registros de metadatos en Zenodo están versionados y ocurren dentro de las transacciones de la base de datos. Además de los metadatos y el almacenamiento de datos, Zenodo confía en Redis para el almacenamiento en caché y RabbitMQ y python Celery para trabajos distribuidos en segundo plano. SeguridadNos tomamos la seguridad muy en serio y hacemos todo lo posible para proteger sus datos.
Referencias
Enlaces externos |
|||||||||||||||||||||||||||||||||
