Un componente clave del procesamiento de datos de NHS Digital tuvo problemas para hacer frente a la demanda causada por las pruebas de Covid-19, según uno de sus tecnólogos senior.
El Master Person Service (MPS), que está diseñado para vincular los registros de tratamiento a las personas a través de datos demográficos, recibió hasta un millón de solicitudes por hora en algunos períodos el año pasado cuando las pruebas estaban en su punto máximo.
“El servicio tuvo problemas para cumplir con los volúmenes de prueba de Covid”, dijo James Zwiers, jefe de ingeniería de software y operaciones de TI de la dirección de servicios de datos de la organización, en una sesión en la conferencia Big Data LDN en Londres el 22 de septiembre. “Ahí es donde el desafío estaba más que en ningún otro lugar”.
NHS Digital aumentó la capacidad de MPS para hacer frente a la demanda.
Los servicios del NHS son proporcionados por una amplia gama de organizaciones que recopilan datos de diferentes maneras. El número del NHS proporciona un identificador único para cada individuo en Inglaterra, con equivalentes en Escocia, Gales e Irlanda del Norte, pero estos no son ampliamente conocidos por las personas y no es necesario recopilarlos como condición para el tratamiento.
MPS tiene como objetivo llenar el vacío cuando las personas no conocen su número de NHS o proporcionan uno no válido aplicando un algoritmo de cuatro etapas a sus datos demográficos, como edad, sexo y código postal. Su objetivo es generar el número NHS correcto en el 99% de los casos, además de proporcionar una puntuación de confianza.
Al describir la arquitectura general del servicio de procesamiento de datos de NHS Digital, James Zwiers dijo que utiliza Amazon Web Services, Splunk, GitLab, Terraform y Kubernetes para administrar más de 200 conjuntos de datos de salud y atención social que cubren la población de Inglaterra y, en algunos casos, todo el Reino Unido. .
Los conjuntos de datos incluyen los que se utilizan para gestionar la respuesta a la pandemia, como los procesos de NHS Test and Trace y los pasaportes Covid. No procesan datos en tiempo real, con cierta información sobre los servicios de ambulancia procesada en 15-60 minutos, pero otros datos de los hospitales solo se manejan mensualmente.
Aunque la arquitectura de datos de NHS Digital se ejecuta en una nube pública, Zwiers dijo que estaba protegida mediante una variedad de medidas. Los datos solo pueden fluir en una dirección, con procesos de solo lectura o escritura en una sola ubicación, todos los servicios de computación tienen un solo propósito y NHS Digital verifica la identidad de todos los usuarios. “Si no necesita acceso a los datos, no tiene acceso a ellos”, dijo.
El Centro Nacional de Seguridad Cibernética (NCSC), la unidad de seguridad de la información de GCHQ, está involucrado en la protección de los sistemas, y Zwiers agregó que se sabe que los “actores del estado-nación” están interesados en su contenido.
Dijo que NHS Digital acepta datos de proveedores de atención médica en una variedad de formatos, incluidos XML, JSON y los generados por Microsoft Excel. Se culpó al uso de Public Health England del antiguo formato de archivo .xls de Excel, que limita el número de filas a 65,535, por la pérdida de datos en 15,841 resultados de la prueba Covid-19 en septiembre y octubre de 2020.
“Me gustaría que nos alejáramos de Excel, pero para el gobierno, Excel está aquí para quedarse”, dijo Zwiers, y agregó que NHS Digital aceptó datos en una variedad de formatos para reducir la carga de informes en las organizaciones proveedoras.
