Validation of “TesTactico for F7”: A tool to analyse Declarative Tactical Knowledge based on a Football Competence Observation System
Authors: Sánchez-López Rubén , Echeazarra Ibon , Castellano Julen 
Published: June 2023

This study aimed to design and validate a multi-response test with images of football game-play situations to evaluate the player's declarative tactical knowledge (DTK). “TesTactico for F7” (seven-a-side football) is made up of 62 game-play situations related to the criteria (phases, roles, actions of the acquired subroles, operational and core/specific principles) of the Football Competence Observation System (FOCOS), analysing a total of 67 variables. The content validity coefficient (9.63 out of 10) was estimated via expert group (n=13), calculating the averages of the degree of agreement and acceptance of the experts. The construct validity was calculated using Student's T-test for independent samples. 155 young football players participated according to their football competence (high-level=80; low-level=75). The post-hoc sample size calculation using G*Power revealed .93 of power (d=0.5, p=0.5). Bonferroni correction was used to control the family-wise error rate in each criterion. The results reflected that the high-level group was better in the 67 variables, with significant differences (p ≤ .008) in 38 of them. Cohen’s d-effect size was also calculated to assess the magnitude of the difference between both groups, which were large (d = 1.38) for the Total Average. The reliability of the tool was determined at the inter-observer level using the Fleiss kappa index of concordance (k = .882), and at the intra-observer level through the test-retest method using the Cohen kappa index (k = 1.000). Internal consistency was estimated through Cronbach's alpha coefficient (α = .925). The generalizability analysis also showed excellent reliability (G = .985) and perfect representativeness (r2 = 1.00), showing that the variability is explained by the game-play situations that make up the test. It is concluded that the instrument shows optimal validity and reliability values.

Este estudio tuvo como objetivo diseñar y validar una prueba de respuesta múltiple con imágenes de situaciones de juego del fútbol para evaluar el conocimiento táctico declarativo (CTD) del jugador. “TesTactico para F7” (fútbol-7) está compuesto por 62 situaciones de juego relacionadas con los criterios (fases, roles, acciones de los subroles adquiridos, principios operacionales y fundamentales/específicos) del Sistema de Observación de la Competencia Futbolística (FOCOS), analizando 67 variables. El coeficiente de validez de contenido (9.63/10) se estimó mediante grupo de expertos (n=13), calculando grado de acuerdo y aceptación. La validez de constructo se calculó mediante la prueba T-Student para muestras independientes. Participaron 155 jóvenes futbolistas organizados según su competencia futbolística (alta=80; baja=75). El cálculo del tamaño de la muestra post-hoc usando G*Power reveló .93 de poder (d=0.5, p=0.5). Se utilizó la corrección de Bonferroni para controlar la tasa de error familiar en cada criterio. Los resultados reflejaron que el grupo de alto nivel fue mejor en las 67 variables, con diferencias significativas (p ≤ .008) en 38 de ellas. También se calculó el tamaño del efecto d-Cohen para evaluar la magnitud de diferencias que fueron grandes (d = 1.38) para el Promedio Total. La fiabilidad de la herramienta se determinó a nivel inter-observador mediante el índice de concordancia kappa de Fleiss (k = .882), y a nivel intra-observador mediante el método test-retest utilizando kappa de Cohen (k = 1.000). La consistencia interna fue estimada a través del coeficiente alfa de Cronbach (α = .925). El análisis de generalizabilidad mostró también una excelente fiabilidad (G =.985) y una representatividad perfecta (r2 = 1.00), evidenciándose que la variabilidad es explicada por las situaciones de juego que componen el test. Se concluye que el instrumento presenta valores óptimos de validez y confiabilidad.

Este estudo teve como objetivo validar um teste de múltipla escolha com imagens de situações de jogo de futebol para avaliar o conhecimento tático declarativo (CTD) do jogador. O "TesTactico F7" (futebol-7) é composto por 62 situações de jogo relacionadas com os critérios do Sistema de Observação da Competência Futebolística (FOCOS) , analisando 67 variáveis. O coeficiente de validade de conteúdo (9,63/10) foi estimado por um grupo de especialistas (n=13), calculando o grau de concordância e aceitação. A validade de construto foi calculada usando a T-Student para amostras independentes. Participaram 155 jovens jogadores de futebol, organizados de acordo com sua competência futebolística (alta=80; baixa=75). O cálculo do tamanho da amostra post-hoc usando G*Power revelou poder de 0.93 (d=0.5, p=0.5). A correção de Bonferroni foi usada para controlar a taxa de erro em cada critério. Os resultados mostraram que o grupo de alto nível foi melhor nas 67 variáveis, com diferenças significativas (p ≤ .008) em 38 delas. O tamanho do efeito d-Cohen também foi calculado para avaliar a magnitude das diferenças entre os dois grupos, que foram grandes (d = 1.38) para o Escore Total. A confiabilidade do instrumento foi determinada no nível interobservador pelo índice de concordância Fleiss kappa (k = .882), e no nível intraobservador pelo método teste-reteste usando o kappa de Cohen (k = 1.000). A consistência interna foi estimada por meio do coeficiente alfa de Cronbach (α = 0,925). A análise de generalização também apresentou excelente confiabilidade (G = .985) e representatividade perfeita (r2 = 1.00), mostrando que a variabilidade é explicada pelas situações de jogo que compõem o teste. Conclui-se que o instrumento apresenta valores ótimos de validade e confiabilidade.