S1699885516300824_S200_es

Vista previa del material en texto

Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
Rev Esp Patol. 2016;xxx(xx):xxx---xxx
www.elsevier.es/patologia
Patología
R E V I S T A E S P A Ñ O L A D E
ORIGINAL
Control de calidad de la citología ginecológica.
Programa de Calidad de la Sociedad Española de
Citología. Resultados de la primera ronda
Francesc Alameda a,∗, Laia Bernetb, Rafael Cano c, Inmaculada Catalinad,
Concepción Otale, Domingo de Agustín f, Beatriz Eizaguirre g, Marcial García Rojoh,
John Comba i, Rosario Granados j, Carmen López-Varela k, María Dolores Comes l,
Rosa Oncins l, Magdalena Sanchom y Julio Rodríguez-Costa k
a Servicio de Patología, Hospital del Mar, Barcelona, España
b Servicio de Patología, Hospital LLuís Alcañis, Xátiva, España
c Servicio de Patología, Hospital Universitario de la Ribera, Alcira, España
d Servicio de Patología, Hospital del Perpetuo Socorro, Badajoz, España
e Servicio de Patología, Hospital Virgen de la Macarena, Sevilla, España
f Servicio de Patología, Hospital Central de la Defensa, Madrid, España
g Servicio de Patología, Hospital Miguel Servet, Zaragoza, España
h Servicio de Patología, Hospital de Jerez, Cádiz, España
i Servicio de Patología, Hospital Universitario Donostia, Donostia, España
j Servicio de Patología, Hospital de Getafe, Madrid, España
k Servicio de Patología, Hospital Gregorio Marañón, Madrid, España
l Servicio de Patología, Hospital de Barbastro, Huesca, España
m Servicio de Patología, Hospital Clínico Universitario de Salamanca, Salamanca, España
Recibido el 21 de septiembre de 2016; aceptado el 2 de diciembre de 2016
PALABRAS CLAVE
Citología
ginecológica;
Control de calidad;
Cáncer de cérvix;
Cribado
Resumen
Introducción: Las recomendaciones del cribado de cáncer de cérvix en España incluyen la parti-
cipación en programas de control de calidad externos a los laboratorios de citología. La Sociedad
Española de Citología ha iniciado un programa de control de calidad de la citología ginecológica.
Objetivo: Presentar y discutir los resultados de la primera ronda del control de calidad de la
Sociedad Española de Citología.
Material y método: Organización de los hospitales participantes según el tipo de citología.
Intercambio de preparaciones de 50 casos entre los participantes: 10 negativos, 20 ASCUS-ASCH,
10 LSIL y 10 HSIL. Estudio de la correlación diagnóstica interobservador.
∗ Autor para correspondencia.
Correo electrónico: FAlameda@hospitaldelmar.cat (F. Alameda).
http://dx.doi.org/10.1016/j.patol.2016.12.002
1699-8855/© 2016 Sociedad Española de Anatomı́a Patológica. Publicado por Elsevier España, S.L.U. Todos los derechos reservados.
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
dx.doi.org/10.1016/j.patol.2016.12.002
http://www.elsevier.es/patologia
mailto:FAlameda@hospitaldelmar.cat
dx.doi.org/10.1016/j.patol.2016.12.002
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
2 F. Alameda et al.
Resultados: Trece hospitales participantes: 6 en ThinPrep, 5 en triple toma y 2 en SurePath.
La concordancia global media fue del 69,7%. La concordancia media por tipo de lesión fue
del 41,7%. La concordancia en negativos fue del 78,1%, en ASCUS del 41,3%, en LSIL de 58,9%
y en HSIL del 64,2%. Los casos discordantes se diagnosticaban con mayor frecuencia como
negativos, ASCUS y LSIL. Las discordancias severas (HSIL/ASCH versus negativo), alcanzaron un
3,8% de casos.
Conclusiones: Nuestros resultados son similares a los descritos en la literatura con muy esca-
sas discordancias severas. El método de intercambio de laminillas utilizado no permite una
formación continuada posterior, ya que no incluye la revisión de los casos con discordancias
diagnósticas. Por ello, se contemplan correcciones metodológicas en sucesivas rondas.
© 2016 Sociedad Española de Anatomı́a Patológica. Publicado por Elsevier España, S.L.U. Todos
los derechos reservados.
KEYWORDS
Gynecological
cytology;
Quality control;
Cervical cancer;
Screening
Quality control of Gynecologic cytology program of the Spanish sicuety for Cytology.
Results of the first round
Abstract
Introduction: The Spanish guidelines for cervical cancer screening recommend participating in
external quality control programs. The Spanish Society of Cytology has started its own program
of quality control for gynecological cytology.
Aim: To describe and discuss the results of the first round of The Spanish Society of Cytology
quality control for gynecological cytology.
Material and method: Organization of participating hospitals on the basis of cytology type.
Exchange of diagnostic slides from 50 cases among participants, as follows: 10 negative; 20
ASCUS-ASCH, 10 LSIL and 10 HSIL. Analysis of inter-observer correlation.
Results: 13 hospitals took part: 6 with ThinPrep liquid-based cytology, 5 with conventional
cytology, and 2 with SurePath liquid-based cytology.
The global mean concordance was 69.7%. The mean concordance in the type of lesion was
41.7%. The concordance was 78.1% in negative diagnoses, 41.3%, in ASCUS, 58.9% in LSIL and
64.2% in HSIL The discordant cases were diagnosed more frequently as negative, ASCUS and
LSIL. 3.8% of cases showed major discordances (HSIL or ASCH versus negatives).
Conclusions: Our results are similar to those reported in the literature, with very little severe
discordance. The method of exchanging slides does not allows continuous training, since the
review of discordant cases can not be made. Therefore, methodological corrections are con-
templated for future rounds.
© 2016 Sociedad Española de Anatomı́a Patológica. Published by Elsevier España, S.L.U. All
rights reserved.
Introducción
La citología ginecológica aplicada en los últimos años, si bien
de forma oportunista y con periodicidad anual, nos ha lle-
vado a una disminución de la incidencia de cáncer de cérvix
en el mundo occidental, de manera que, en algunos países,
España entre ellos, el cáncer de cérvix ha dejado de ser el
primero en incidencia, dando paso a otras neoplasias como
las de mama, colon y pulmón.
El conocimiento acerca de la biología evolutiva del cán-
cer de cérvix y la importancia capital de la infección por VPH
como condición «sine qua non» para el desarrollo de este
cáncer, así como la evidencia de la relativamente baja sen-
sibilidad de la citología para el diagnóstico de lesiones CIN2+
(neoplasia intraepitelial cervical de grado II o más), han lle-
vado a la recomendación de establecer un nuevo método de
cribado de cáncer de cérvix en España1.
Por lo que respecta a la citología ginecológica, dichas
recomendaciones incluyen la práctica de controles de cali-
dad internos en los laboratorios de citología,en especial
a la correlación citohistológica y al estudio de los fal-
sos negativos2---7. En la literatura actual, la tasa de falsos
negativos se encuentra alrededor del 7,8%, de los cuales
aproximadamente la tercera parte corresponde a un pro-
blema de la toma, otra tercera parte a un error de lectura
y una tercera parte a errores de interpretación7. Todo ello
pone de manifiesto la importancia de la formación conti-
nuada. En este sentido, se ha propuesto que una de las
herramientas de formación podría ser la revisión del atlas
de Bethesda en los propios laboratorios, pero según algu-
nos autores, esta práctica no parece útil para mejorar la
interpretación de los casos8.
Asimismo se sugiere que los servicios de anatomía patoló-
gica, y. en concreto los laboratorios de citología, participen
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
Control de calidad de la citología ginecológica. Programa de Calidad de la Socie 3
en sistemas de control de calidad externos a los mismos
servicios. La experiencia recogida en la literatura incluye
diversos modelos de controles de calidad que abarcan el
estudio de la calidad de la muestra, la calidad tintorial
y estudios de la calidad del diagnóstico9---14. Uno de estos
modelos está realizado con intercambio de preparaciones15.
En ese estudio, entre otros detalles, el error serio o grave
quedaba definido como aquellas situaciones en las que se
observaba una lesión de alto grado, o cáncer que no había
sido recogida en el informe citológico.
Se han desarrollado también métodos basados en la digi-
talización de preparaciones, pero solo pueden utilizarse con
citología en monocapa16,17.
En los estudios comparativos, uno de los caballos de
batalla es el diagnóstico de atipia en células escamosas
de significado incierto (ASCUS) ya que frecuentemente se
utiliza como cajón de sastre y no con criterios citológicos
estrictos. En esta área existen distintos trabajos que esta-
blecen porcentajes de correlación interobservador si bien la
mayoría, tienen también en cuenta el resto de diagnósticos
citológicos17---22.
La Sociedad Española de Citología (SEC) está desarro-
llando un programa de control de calidad de la citología
ginecológica. En la primera fase hemos procedido a efectuar
un estudio de correlación entre observadores (interobserva-
dor).
Objetivo
Nuestro objetivo en este trabajo es, por un lado, dar a
conocer el programa de control de calidad de la citología
ginecológica que efectúa la SEC y, por otro, mostrar los
resultados del estudio de correlación interobservador en la
primera ronda efectuada.
Material y métodos
La SEC ofrecía a sus socios la participación en el presente
estudio en la forma siguiente:
Cada uno de los participantes debía en primer lugar
mostrar su voluntad de participación, inscribiéndose en el
programa. Se solicitaban, entre los datos de inscripción, la
descripción del tipo de citología utilizada (ThinPrep, con-
vencional o SurePath) así como una persona de contacto,
responsable del control de calidad. Dicha persona debía
escoger un total de 50 casos, incluyendo, 10 negativos para
células malignas, 20 ASCUS, atipia en células escamosas sos-
pechosa de lesión de alto grado (ASCH), lesión escamosa
intraepitelial de bajo grado (10 LSIL) y lesión escamosa
intraepitelial de alto grado (10 HSIL).
A su vez, la SEC, estableció un «centro de coordinación»
del programa.
Una vez conocidos los hospitales participantes y el tipo
de citología, se establecieron tres ruedas de intercambio de
casos, asociadas a los distintos tipos de citología utilizada,
procediendo de la siguiente forma (fig. 1):
El hospital A enviaba los casos seleccionados al hospital
B y los diagnósticos de estos casos al centro de coordinación
de la SEC. El hospital B recibía los casos, los diagnosticaba
y enviaba sus diagnósticos al centro de coordinación de la
SEC a la vez que devolvía los casos al hospital A.
Sociedad española de citologia
Control de calidad citologia ginecológia
HOSP. A
Coordinación
(3)
(3)
(3)
(3)
(1)
(1)
(1)
(1)
(1)
(1) (1)
(1)
(2)
(2)(2)
(2)
HOSP. B
HOSP. CHOSP. D
Figura 1 Sistema de intercambio de casos entre hospitales.
A su vez el hospital B hacía lo mismo con el hospital C,
el C con el D, y así sucesivamente hasta cerrar el círculo de
hospitales participantes de manera que el último hospital
procedía con el primero en la forma indicada.
Una vez recogidos todos los datos, el centro de coordina-
ción de la SEC calculaba la concordancia entre observadores
para cada hospital, la media de la concordancia entre
observadores para cada tipo de citología y la media de la
concordancia entre observadores global, datos que se trans-
mitían a los hospitales participantes y que se exponen en
este trabajo.
Se calculaba también la concordancia entre observadores
en casos negativos, y por tipo de lesión (ASCUS, ASCH, LSIL
y HSIL).
También se analizaban las discordancias estableciendo
una estratificación en relación con la importancia clínica,
subdividiendo entre discordancias severas mayores, meno-
res e intermedias.
Las discordancias severas se definieron como aquellos
casos informados como HSIL o ASCH y que en la revisión
se informaron como negativos. Las discordancias mayo-
res, se definieron como aquellos casos informados como
LSIL o ASCUS y que en la revisión se informaron como
negativos. Las discordancias menores se definieron como
aquellos casos diagnosticados como HSIL que en la revisión
fueron informados como ASCH y aquellos casos informa-
dos como LSIL que en la revisión fueron informados como
ASCUS. El resto de discordancias fue recogido bajo el
grupo de discordancias intermedias. Las concordancias y
discordancias se calcularon respecto al diagnóstico inicial
establecido por cada uno de los hospitales participan-
tes que había seleccionado los casos, y que los enviaba
al segundo hospital. No se estableció ningún «comité de
expertos» que corroboraran dichos diagnósticos de manera
que solamente se estudió la concordancia o discordancia
entre observadores sin estándar de referencia (gold están-
dar).
Resultados
Participaron un total de 13 hospitales, 6 en la ronda de
citología líquida ThinPrep, 5 en la ronda de citología con-
vencional con triple toma y 2 en la ronda de citología líquida
con SurePath.
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
4 F. Alameda et al.
Tabla1 Concordancia global
Concordancia Global (%)
SurePath 73
ThinPrep 64
Convencional 72
Media 69,7
Concordancias y discordancias
La concordancia media global fue del 69,7%, superior en el
grupo con SurePath (tabla 1).
La tabla 2 muestra el total de concordancias y discordan-
cias. Para este estudio se han distribuido el total de casos
estudiados, por diagnóstico inicial y por tipo de citología. Así
por ejemplo, como preparaciones negativas, se revisaron un
total de 20 de SurePat, 60 de ThinPrep y 52 de convencional.
Se observa pues que si bien todos los participantes aportaron
el mismo total de casos, no todos aportaron exactamente
el mismo número de casos para cada diagnóstico. En la
tabla se muestran el total de casos concordantes y discor-
dantes organizados por diagnósticos iniciales y por tipo de
citología.
La concordancia media en diagnósticos negativos fue
del 78,1%, y fue superior en el grupo con citología
ThinPrep. La media de discordancias en casos negativos
fue de un 21,9%. La mayoría de los casos discordan-
tes se agruparon en el grupo de ASCUS 14,6% de casos
(tabla 2).
La concordancia en ASCUS fue del (41,3%), Las discordan-
cias alcanzaron un 58,7% de casos. El diagnóstico inicial de
ASCUS fue interpretado como negativo en un 23,9% de los
casos y como LSIL en un 20,5% de casos (tabla 2).
En LSIL, la media de concordancia fue de 58,9%. Las
discordancias alcanzaron un 41,1% de casos. El diagnóstico
inicial de LSIL fue interpretado como ASCUS en un 21,1% de
casos (tabla 2).
La media de concordancia en ASCH fue del 19,8%. Las
discordancias alcanzaron un 80,2% de casos. El diagnóstico
inicial de ASCH, como ASCUS en un 44,3% de casos y como
HSIL en un 29,4% de casos fue el responsable de esta baja
concordancia interobservador (tabla 2).
La media de concordancia en el diagnóstico de HSIL fue
del 64,2%, por tanto las discordancias alcanzaron un 35,8%
de casos. EL diagnóstico inicial de HSIL fue interpretado
como negativo en un 5,6% de casos, como ASCUS en un 7,7%
de casos, como ASCH en un 11,9% de casos y como LSIL en
un 10,6% de casos (tabla 2).
En cuanto a la distribución de las discordancias según las
categorías previamente definidas, los resultados fueron los
siguientes: la media de discordancias severas (HSIL o ASCH
versus negativo) fue de un 3,8%. La media de discordancias
mayores (LSIL o ASCUS versus negativo) fue de un 13,7%, la
media de discordancias menores (HSIL versus ASCH o LSIL
Tabla 2 Estudio de concordancias-discordancias en negativos y por tipo de lesión
NEG (%) ASCUS (%) ASCH (%) LSIL (%) HSIL (%)
Negativos (N)
SurePath (20) 13 (65) 4 (20) 1 (5) 1 (5) 1 (5)
ThinPrep (60) 52 (86,7) 5 (8,3) 2 (3,3) 1 (1,7) 0
Conven (52) 43 (82,7) 8 (15,4) 1 (1,9) 0 0
Media (78,1) (14,6) (3,4) (2,2) (1,7)
ASCUS (N)
SurePath (38) 4 (10,5) 15 (39,4) 2 (5,3) 10 (26,3) 7 (18,5)
ThinPrep (85) 36 (42,4) 25 (29,4) 5 (5,9) 16 (18,8) 3 (3,5)
Conven (80) 15 (18,8) 44 (55) 3 (3,7) 13 (16,3) 5 (6,2)
Media (23,9) (41,3) (4,9) (20,5) (9,4)
ASCH (N)
SurePath (3) 0 2 (66,7) 1 (33,3) 0 0
ThinPrep (31) 4 (12,9) 5 (16,1) 3 (9,7) 2 (6,5) 17 (54,8)
Conven (6) 0 3(50) 1 (16,7) 0 2 (33,3)
Media (4,3) (44,3) (19,8) (2,2) (29,4)
LSIL (N)
SurePath (20) 2 (10) 4 (20) 4 (20) 10 (50) 0
ThinPrep (60) 4 (6,7) 11 (18,3) 0 38 (63,3) 7 (11,7)
Conven (52) 2 (3,8) 13 (25) 0 33 (63,5) 4 (7,7)
Media (6,8) (21,1) (6,7) (58,9) (6,5)
HSIL (N)
SurePath (19) 1 (5,3) 0 4 (21,1) 2 (10,4) 12 (63,2)
ThinPrep (62) 5 (8,1) 6 (9,7) 6 (9,7) 3 (4,8) 42 (67,7)
Conven (60) 2 (3,3) 8 (13,3) 3 (5) 10 (16,7) 37 (61,7)
Media (5,6) (7,7) (11,9) (10,6) (64,2)
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
Control de calidad de la citología ginecológica. Programa de Calidad de la Socie 5
Tabla 3 Estudio de discordancias
SEV (%) MAY (%) MED (%) MEN (%)
SurePath 3/62(4,8) 11/98(11,2) 17/160(10,6) 18/80(22,5)
ThinPrep 11/213(5,2) 46/265 (17,4) 31/476 (6,5) 50/258 (19,4)
Convencional 3/168(1,8) 25/236 (10,6) 33/396 (8,3) 32/198 (16,2)
Media 17/443(3,8) 82/599 (13,7) 81/1032 (7,8) 100/536 (18,7)
MAY: discordancia mayor; MED: discordancia intermedia; MEN: discordancia menor; SEV: discordancia severa.
versus ASCUS) de un 18,7%, y la media de discordancias
intermedias de 7,8% (tabla 3).
Discusión
El control de calidad de la citología ginecológica es una de
las recomendaciones de las guías de cribado de cáncer de
cérvix que efectúan las distintas sociedades, entre ellas la
SEAP, la SEGO, la AEPCC y la SEC1.
Además, se recomienda la implementación de contro-
les de calidad internos dentro de los servicios de anatomía
patológica y de los laboratorios de citología, dirigidos princi-
palmente a reducir la tasa de falsos negativos y a establecer
una correlación citohistológica. Se han publicado diversos
sistemas y estrategias en la literatura2---5,7,10 pero el con-
trol de calidad interno no es objeto de este trabajo. Las
guías recomiendan también la participación en controles de
calidad externos a los propios servicios, dirigidos fundamen-
talmente a la reproducibilidad de la orientación diagnóstica
de la citología1. Existen pocos trabajos publicados en rela-
ción con el control de calidad externo y hacen referencia a
distintas estrategias adoptadas por los organismos oficiales
de salud14,15. La SEC ha procedido a la implementación de un
programa de control de calidad de la citología ginecológica,
dirigido por la propia Sociedad y con participación voluntaria
de distintas instituciones hospitalarias. En una primera fase
se ha procedido al estudio de la reproducibilidad diagnóstica
entre cada una de las instituciones participantes sin acordar
previamente cuál era el diagnóstico «verdadero» en cada
caso. Debido a que los distintos procedimientos técnicos
existentes para el procesamiento de la muestra citológica
introducen diferentes artefactos en las extensiones, y que
ello puede teóricamente inducir a errores de interpretación,
se decidió organizar la primera ronda del programa en fun-
ción del tipo de método citológico utilizado. De esta forma
se organizó el intercambio de casos sin mezclar los tipos de
preparación citológica.
Los resultados expresados en este trabajo hacen refe-
rencia a tres tipos de citología y a la media global entre
ellos.
La SEC ha orientado la primera fase de control de cali-
dad comparando los equipos diagnósticos, ya que es de esta
forma como se trabaja usualmente en los distintos labora-
torios de citología.
Otros estudios publicados respecto a control de cali-
dad externo, evalúan la presencia de células endocervicales
y metaplásicas6, la calidad de la muestra, la calidad
tintorial14, así como el índice de falsos negativos en
carcinomas6. Rara vez se han realizado controles de cali-
dad en relación con la correlación diagnóstica, comose
expresa en el presente trabajo. En algunos estudios la corre-
lación diagnóstica llega al 96%13. Otros trabajos observan un
incremento de la correlación diagnóstica a lo largo de los
años en relación con la participación en controles de cali-
dad externos12. Este dato aboga en favor de la participación
sistemática en programas de control de calidad externos,
ya que la participación en los mismos, puede incrementar
la calidad diagnóstica, y servir como formación continuada
a los participantes.
Solamente hemos encontrado en la literatura una expe-
riencia de intercambio de preparaciones similar al descrito
en este trabajo15. En él definían también discordancia seria
o grave cuando se observaba una lesión de alto grado, cán-
cer o neoplasia glandular que no había sido informado. Es lo
que ha sido llamado una discordancia severa en el presente
trabajo. El estudio referido no definía los demás tipos de
discordancias.
Es importante también evaluar los aspectos de forma-
ción continuada que tiene el control de calidad. En general
se establece una relación entre el esfuerzo de participa-
ción y el beneficio obtenido. En el sistema de intercambio
de preparaciones no se puede revisar la preparación con
diagnóstico discordante dado que la misma se devuelve al
hospital de origen. De esta forma, no es posible establecer
discusión ni un proceso de aprendizaje a partir de los casos.
En consecuencia, este sistema tiene poco valor educativo.
Algo similar sucede con experiencias anteriores15.
Nuestros porcentajes en concordancias son similares a los
ya expresados en la literatura8,20. En el caso de diagnósticos
negativos, nuestra concordancia es del 78,1% siendo en la
literatura del 77,6 y del 73,1%18,20.
La concordancia en ASCUS (41,3%), es similar a la obser-
vada en otros estudios (36,4 a 42,9%). Ello probablemente
radica en el hecho de que los criterios que definen el diag-
nóstico de ASCUS, si bien son precisos23, no se aplican de
forma estricta y esta categoría diagnóstica frecuentemente
se utiliza como cajón de sastre. Existen algunos trabajos que
aportan concordancias interobservador en ASCUS de aproxi-
madamente un 95%,19 y otros de hasta un 97,2%2 pero este
dato no se reproduce en nuestra casuística. La mayoría de
los casos discordantes lo eran en relación con los diagnós-
ticos de negativos y LSIL de acuerdo también con los datos
recogidos en la literatura18,20.
La concordancia en LSIL es, en nuestro estudio, del 58,9%,
oscilando en la literatura18 entre un 52,9 y un 68,1%. La
mayoría de casos discordantes lo eran en relación con el
diagnóstico de ASCUS como se ha citado en la literatura18, si
bien algunos autores20 muestran mayores discordancias con
el diagnóstico de HSIL.
En cuanto a la concordancia en ASCH, que en este trabajo
es la menor, creemos que es de difícil evaluación dada la
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
6 F. Alameda et al.
cantidad de casos que se remitieron con este diagnóstico.
Llama la atención la discrepancia diagnóstica con ASCUS.
La concordancia en HSIL es la más variable en la mayor
parte de los estudios, que la sitúan entre un 47,118 y un
83,4%20, y alcanza un 64,2% en nuestro estudio. Los casos
discordantes se agrupan en el diagnóstico de LSIL tal y como
se muestra también en otros trabajos18,20. En la presente
serie las discordancias de los HSIL, también se agrupan en
el diagnóstico de ASCH.
Después de este análisis cabría decir que la formación
continuada debería hacer énfasis en el diagnóstico citológico
de ASCUS para mejorar su reproducibilidad.
En cuanto a las discordancias con HSIL, este es un hecho
ya descrito en la literatura. En un estudio de 100 casos con
CIN 3 diagnosticados con biopsia, se valoró el diagnóstico
citológico previo, hallando falsos negativos en 26 casos de
HSIL. De estos, se observó retrospectivamente que en 16
casos se podría haber realizado el diagnóstico de HSIl21.
Se ha estudiado también la frecuencia de concordancias
interobservador en los distintos tipos de muestras citológi-
cas, resultando bastante similares (tabla 2). Creemos que la
evaluación precisa de esta concordancia no es posible dada
la diferencia de experiencia entre los distintos observado-
res y el escaso número de participantes en algunas de las
categorías. La tabla 3 muestra las discordancias, agrupadas
en severas, mayores, intermedias o menores. La crítica que
se puede hacer a este modo de agrupar las discordancias es
clasificar como discordancia mayor a las discordancias entre
ASCUS y negativo o LSIL y negativo. Aunque la definición de
una discordancia ASCUS- negativo definida como «mayor»
pudiera parecer dudosa, cabe recordar que detrás del diag-
nóstico de ASCUS existe un porcentaje variable (entre el 5 y
el 10%) de HSIL según las publicaciones en este campo. Algo
parecido sucede con el diagnóstico de LSIL. Si aplicamos las
recomendaciones actuales en caso de usar la citología como
cribado inicial ante un diagnóstico de ASCUS está recomen-
dado realizar un test de VPH mientras que el manejo clínico
recomendado en una mujer con un diagnóstico citológico
negativo es el control citológico a los tres años1.
La media de discordancias severas es del 3,7%. La media
de discordancias mayores es de un 11,9%. Aunque las discor-
dancias intermedias pueden conllevar distintos manejos de
las pacientes, este grupo de discordancias no implica que se
deja de controlar a las pacientes durante un periodo de tres
años tal y como sucedería en el caso de las discordancias
mayores y severas. Las discordancias menores deben infor-
marse, fundamentalmente con un objetivo académico, pero
probablemente revisten poca importancia clínica.
Las principales debilidades de este estudio radican en
el escaso número de participantes por cada tipo citológico,
impidiendo un análisis profundo de su impacto y en la ausen-
cia de un estándar de referencia potente como la biopsia o
el diagnóstico citológico consensuado.
Conclusiones
Los controles de calidad externos, si bien representan un
esfuerzo adicional para el personal del laboratorio de cito-
logía, pueden aportar beneficios. Nuestros datos de este
estudio son similares a los recogidos en la literatura, desta-
cando nuestro bajo porcentaje de discordancias «severas».
Sin embargo el método descrito carece de valor en el
aspecto de la formación continuada. Para futuras rondas del
control de calidad externo de la SEC, deberían establecerse
cambios metodológicos que permitan valorar y detectar
otros aspectos relacionados con la calidad, y que puedan
ser causas de errores diagnósticos.
Responsabilidades éticas
Protección de personas y animales. Los autores declaran
que para esta investigación no se han realizado experimen-
tos en seres humanos ni en animales.
Confidencialidadde los datos. Los autores declaran que
han seguido los protocolos de su centro de trabajo sobre
la publicación de datos de pacientes.
Derecho a la privacidad y consentimiento informado. Los
autores declaran que en este artículo no aparecen datos de
pacientes.
Conflicto de intereses
Los autores declaran no tener ningún conflicto de intereses.
Bibliografía
1. Torné A, del Pino M, Cusidó M, Alameda F, Andia D, Castellsagué
X, et al. Guia del cribado de cáncer de cérvix en España, 2014.
Rev. Esp. Patol. 2014;47 supl:1---43.
2. Crasta JA, Chaitra V, Simi C, Correa M. An audit of cervico-
vaginal cytology in a teaching hospital: Are atypical glandular
cells under-recognised on cytological screening? J.Cytol. 2009
Apr;26:69---73.
3. Sodhani P, Sinh V, Das DK, Bhambhani S. Cytohistological correla-
tion as a measure of quality assurance of a cytology laboratory.
Cytopathology. 1997;8:103---7.
4. Shield PW, Cox NC. The sensitivity or rapid (Partial) review of
cervical smears. Cytopathology. 1998;9:84---92.
5. Al-Nafussi A, Rebello G, al-Yusif R, McGoogan E. The borderline
cervical smear: colposcopic and biopsy outcome. J.Clin Pathol.
2000;53:439---44.
6. Lazcano-Ponce EC1, de Ruiz PA, Lopez-Carrillo L, Vazquez-
Manriquez ME, Hernandez-Avila M. Quality control study on
negative gynecologicalcytology in Mexico. Diagn Cytopathol.
1994;10:10---4.
7. Feoli F, Renard C, Abouyahia M, de Wind R, Larismont D, Arbyn
M. Retrospective rescreening of negative cervical cytology sam-
ples preceding histologically proven CIN2-3 and squamous cell
carcinoma: An educational opportunity to understand and pre-
vent laboratory errors. Acta Cytologica. 2015;59:262---72.
8. Smith AE, Sherman ME, Scott DR, Tabbara SO, Dworkin L, Olson
J, et al. Review of the Bethesda Systrem Atlas does not improve
reproducibility or accuracy in the classification of atypical
squamous cells of undetermined significance smears. Cancer
Cytopathol. 2000;90:201---6.
9. Kardum-Skelin I, Mahovlic V, Mozetic-Vrdoljak D, Ovanin-Rakic
A. Organization of cervical cytology screening in Croatia: past,
present and future. Cell Antropol. 2007;31 Suppl 2:47---54.
10. Alves VA1, Lima MA, Utagawa ML, Maeda MY. Program of quality
control in gynecologic cytology at the Adolfo Lutz Institute: stra-
tegies and critical analysis of results of its pilot implementation.
AMB Rev Assoc Med Bras. 1991;37:36---42.
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0120
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0125
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0130
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0135
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0140
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0145
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0150
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0155
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0160
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0165
Cómo citar este artículo: Alameda F, et al. Control de calidad de la citología ginecológica. Programa
de Calidad de la Sociedad Española de Citología. Resultados de la primera ronda. Rev Esp Patol. 2016.
http://dx.doi.org/10.1016/j.patol.2016.12.002
ARTICLE IN PRESS
+Model
PATOL-435; No. of Pages 7
Control de calidad de la citología ginecológica. Programa de Calidad de la Socie 7
11. GulloCE, Dami AL, Barbosa AP, Marques AM, Palmejani MA,
Bonilha JL. Results of a control quality strategy in cervical cyto-
logy. Einstein (Sao Paulo). 2012;10:86---91.
12. De Freitas HG, Thuler LC. External quality control for cervi-
cal cytology exams performed in the Brazilian Public Health
System of Mato Grosso do Sul State. Rev Bras Ginecol Obstet.
2012:34---40.
13. Flisser A, García-Malo F, Canepa Mde L, Doncel S, Espinoza R,
Moreno R, et al. Implementation and evaluation of a national
external quality control program for cervical cytology in Mexico.
Salud Publica Mex. 2002;44:431---6.
14. Boucher NA. Technical external quality assessment for SurePath
stained liquid-based cytology gynaecological cervical sam-
ples using control material. A novel approach. Cytopathology.
2009;20:169---75.
15. Brown JM. The Yorkshire slide exchange external quality assess-
ment (EQA) scheme. Cytopathology. 1996;7:90---8.
16. Kldiashvili E, Schrader T. Reproducibility of telecytology dia-
gnosis of cervical smears in a quality assurance program. The
Georgian experience. Telemed J E Health. 2016;17:565---7.
17. Lee ES, Kim IS, Choi JS, Yeom BW, Kim HK, Han JH, et al.
Accuracy and reproducibility of telecytopathology diagnosis of
cervical smears. Am.J.Clin Pathol. 2003;119:356---60.
18. Stoler MH, Schiffman M. Interobserver reproducibility of
cervical cytology and histologic interpretations. Jama.
2001;285:1500---5.
19. Maksem JA, Berdossian CWM, Kurtycz D, Sewall S, Shalkham J,
Dhanwada V, et al. Resolving ASCUS without recourse of HPV
testing. Diagn Cytopathol. 2005;33:343---440.
20. Chhieng DC, Talley LI, Roberson J, Gatscha RM, Jhala NC, Elgert
PA. Interobserver agreement. Comparison between liquid based
and conventional preparations in gynecologyc cytology. Cancer
Cytopathol. 2002;96:67---73.
21. Gupta S, Sodhani P. Why is high grade squamous intraepithelial
neoplasia under-diagnosed on cytology in a quarter of cases?
Analysis of smear chararcteristics in discrepant cases. Indian J
Cancer. 2004;41:104---8.
22. Gatscha RM, Abadi M, Babore S, Chhieng D, Miller MJ, Saigo PE.
Smears diagnosed as ASCUS. Interobserver variatins and follow-
up. Diagn. Cytopathol. 2001;25:138---40.
23. Abdul-Karim FW, Powers CN, Berek JS, Sherman ME, Tabbara
SO, Sidaw MK. Atypical squamous cells, capítulo 4. En: Nayar R,
Wilbur DD, editores. The Bethesda System for reporting cervical
cytology. 3.rd ed. Nueva York: Springer; 2015.
Documento descargado de http://www.elsevier.es el 11/01/2017. Copia para uso personal, se prohíbe la transmisión de este documento por cualquier medio o formato.
dx.doi.org/10.1016/j.patol.2016.12.002
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0170
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0175
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0180
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0185
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0190
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0195
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0200
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0205
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0210
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0215
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0220
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225
http://refhub.elsevier.com/S1699-8855(16)30082-4/sbref0225