본 연구의 주목적은 유아기 실행기능을 평가하기 위해 개발된 유아기 일상의 실행기능 척도(Ratings of Everyday Executive Functioning [REEF])의 타당도를 다각적으로 검증함으로써 척도의 심리측정적 특성(psychometric properites)을 확인하는 것이다. 즉, 국외에서 만 3~5세를 대상으로 제작된 REEF를 국내 유아를 대상으로 타당화하고 기존의 척도나 과제 수행을 통해 측정해왔던 유아의 실행기능의 측정 방식에 새로운 부모보고용 척도를 추가하여 추후 유아기 실행기능 연구의 활성화에 기여하고자 하였다. 이를 위해 본 연구에서는 세 가지 표본을 활용하여 REEF의 타당도(구인타당도, 수렴타당도, 공인타당도, 교차타당도)를 검증하였다.
REEF의 구인타당도, 수렴타당도 및 공인타당도를 검증하기 위하여 모집된 연구대상 1은 수도권 지역(서울, 인천, 경기 등)에 거주하는 만 3~5세 유아의 어머니 300명으로, 질문지법을 통해 유아의 일상의 실행기능, 실행기능, 문제행동, 마음이론 및 어머니의 양육행동에 대한 자료를 수집하였다. 유아의 실행기능은 Nilsen 등(2017)이 제작한 일상의 실행기능 척도(Ratings of Everyday Executive Functioning [REEF])와 Isquith 등(2004)의 유아용 실행기능 행동평정척도(Behavior Rating Inventory of Executive Function-Preschool Version [BRIEF-P])를 사용하여 측정하였으며, 어머니의 양육행동은 박주희(2001)가 개발한 부모 양육행동 척도를 사용하여 측정하였다. 유아의 문제행동은 Reid, Hong과 Wade(2009)가 사용한 문제행동 척도를 김미정(2010)이 번안하고 수정하여 전문가 검토를 거친 질문지를 사용하여 측정하였다. 유아의 마음이론은 Tahiroglu 등(2014)이 개발한 아동의 사회적 이해 척도(Children''s Social Understanding Scale [CSUS])를 윤선영(2019)이 타당화한 척도를 사용하여 측정하였다.
다음으로, REEF의 수렴타당도와 공인타당도를 검증하기 위해 모집된 연구대상 2는 서울과 인천 지역에 거주하는 만 3~5세 유아 및 어머니 총 57쌍이다. 유아의 실행기능은 REEF 척도를 사용하였으며, 실행기능 과제는 억제를 측정하는 낮/밤(day/night) 과제(Gerstadt, Hong, & Diamond, 1994), 속삭이기(whisper) 과제(Kochanska, Murray, Jacques, Koenig, & Vandegeest, 1996)와, 작업 기억을 측정하는 숫자 바로/거꾸로 따라하기(forward/backward digit span) 과제(곽금주, 오상우, 김청택, 2011), 인지적 유연성을 측정하는 차원 변경 카드 분류(Dimensional Change Card Sort [DCCS]) 과제(Frye, Zelazo, & Palfai, 1995), 그리고 계획 및 조직화를 측정하는 하노이의 탑(Tower of Hanoi [TOH]) 과제(Welsh, 1991; Welsh, Pennington, & Groisser, 1991)를 사용하였다. 유아의 수용어휘능력은 김영태, 홍경훈, 김경희, 장혜성과 이주연(2009)이 제작한 수용·표현 어휘력 검사(Receptive Expressive Vocabulary Test [REVT]) 중 수용 어휘력 검사(REVT-R)를 사용하여 측정하였다.
마지막으로, 교차타당도를 검증하기 위해 모집된 연구대상 3은 수도권(서울, 인천, 경기)에 거주하는 만 3~5세 유아의 어머니 총 300명을 포함한다. 연구대상 3은 연구대상 1과 다른 대상으로, 인구학적 특성에서의 차이는 나타나지 않았다. 참가한 어머니들은 자녀의 실행기능에 대한 REEF 문항에 응답하였다.
REEF의 타당도를 확인하기 위한 구체적 절차와 결과를 요약하면 다음과 같다. 첫째, REEF 문항에 대한 번역-역번역 및 국문학자의 감수 과정을 거치고, 예비조사를 진행하여 문항의 명확성과 적절성을 확인하였다. 또한, REEF의 문항 분석을 실시한 결과, 문항들의 양호도가 확인되어 최종 문항을 확정하였다. 둘째, 구인타당도를 검증하기 위해 탐색적 요인분석을 실시한 결과, 총 76문항 중 1문항을 제외한 75문항이 적절한 수준의 요인부하량을 보여, 원척도를 개발한 연구와 같이 단일요인이 적합한 것으로 나타났다. 최종 문항 간 신뢰도를 살펴본 결과, 우수한 수준의 신뢰도 계수가 산출되었다. 셋째, 수렴타당도 검증을 위해 REEF와 BRIEF-P 그리고 REEF와 실행기능 수행과제를 통해 측정한 실행기능 간의 상관을 각각 분석하였다. 그 결과, REEF를 통해 측정한 실행기능은 BRIEF-P 및 실행기능 과제를 통해 측정한 실행기능과 모두 유의한 상관을 보여 수렴타당도가 확보되었다. 넷째, 공인타당도를 검증하기 위해 선행 연구들에서 실행기능과의 관련성이 증명된 어머니의 양육행동, 유아의 마음이론, 문제행동 및 언어능력과의 상관을 살펴보았다. 그 결과, REEF와 몇몇 하위 변인들 간 유의한 상관이 나타나지 않은 부분도 있으나, 전반적으로 유의한 상관을 보여 공인타당도가 확보되었다. 마지막으로, 탐색적 요인분석의 결과가 새로운 연구대상에게도 동일하게 나타나는지 교차타당도를 확인한 결과, 두 문항을 제외한 모든 문항의 요인부하량이 유사하게 나타났다.
종합하면, 본 연구는 유아기 일상의 실행기능을 평가하는 REEF의 타당도를 검증함으로써 주로 기존의 척도 및 실험과제를 통해 측정되었던 실행기능에 새로운 추가적인 도구를 제공하였다는 데 의의가 있다. 다각적인 측면에서 타당화된 REEF는 추후 실행기능의 개인차 및 실행기능에 영향을 미치는 요인, 실행기능의 발달적 결과를 밝히는 연구 등에 다양하게 활용되어 유아의 실행기능 연구의 확장 및 활성화에 기여할 수 있을 것이다.

The main purpose of this study was to investigate the psychometric properties of the Ratings of Everyday Executive Functioning (REEF), which was developed and validated by Nilsen and her colleagues(2017) to evaluate the executive function of preschoolers, In other words, The REEF developed overseas for 3-5 years old was validated for domestic preschoolers, and a new parent-reporting scale was added to the existing scale or task performance measurement method for preschoolers'' executive function. It was intended to contribute to the activation of research on executive function of preschoolers. In this study, the validity (construct validity, convergent validity, concurrent validity, cross validity) of REEF were examined using three samples. This study included Korean mothers and their children who ranged in age from 3 to 5 years old.
First, in order to examine the validity of REEF (construct validity, convergent validity, and concurrent validity), the final questions were completed through translation-back translation, review from a Korean language and literature expert and preliminary research. And then a total of 300 pairs (Study Subject 1) of mothers and preschoolers aged 3-5 years living in the metropolitan area (Seoul, Incheon, Gyeonggi, etc.) completed a questionnaire regarding mothers’parenting behavior, children’s everyday executive function, executive function, problem behaviors and mind theory. The executive function of preschoolers was measured by the Ratings of Everyday Executive Functioning [REEF] developed by Nilsen et al. (2017) and the Behavior Rating Inventory of Executive Function-Preschool Version [BRIEF-P] by Isquith et al. (2004). Mothers'' parenting behavior was measured using the Parenting Behavior Scale developed by Park Joo-hee (2001). The problem behaviors of preschoolers were measured using a questionnaire that by Mijeong Kim (2010), which was a adapted and modified version of the problem behavior scale by Reid, Hong, and Wade (2009). The theory of mind was measured as validated by Sunyoung Yoon (2019) on the Children''s Social Understanding Scale (CSUS) developed by Tahiroglu et al. (2014).
Next, in order to examine the convergent validity of the construct validity of the REEF scale and the concurrent validity of the criterion-related validity, a total of 57 pairs of preschoolers (ages 3-5) and mothers living in Seoul and Incheon (Study Subject 2) were subjected to data. The preschoolers'' executive function was measured using the REEF scale confirmed through Study Subject 1, and the day/night task (Gerstadt, Hong, & Diamond, 1994) and the whispering task (Kochanska, Murray, Jacques, Koenig, & Vandegeest, 1996) were used for the executive function task to measure inhibition. Working memory was measured by a forward/backward digit span task (Geumju Kwak, Sangwoo Oh, and Cheongtaek Kim, 2011), and cognitive flexibility was measured by a Dimensional Change Card Sort (DCCS) task (Frye, Zelazo, & Palfai, 1995), planning and organizing were measured using the Tower of Hanoi [TOH] task (Welsh, 1991; Welsh et al., 1991). In addition, among children''s language ability, the receptive vocabulary ability was measured by the Receptive Expressive Vocabulary Test (REVT-R) developed by Young-Tae Kim, Kyung-Hoon Hong, Kyung-Hee Kim, Hye-Sung Chang, and Ju-Yeon Lee (2009). Finally, in order to examine the cross validity, a total of 300 mothers living in the metropolitan area (Seoul, Incheon, Gyeonggi) reported on the executive function of their preschoolers (ages 3-5). Study subject 3 was different from study subject 1, but there was no difference in demographic characteristics. The mothers who participated in the study responded to the REEF questions confirmed earlier.
The results of the validity of REEF confirmed through three samples are summarized as follows. First, after going through the translation-reverse translation and the review process by a Korean writer, a preliminary survey was conducted to confirm the clarity and appropriateness of the REEF questions. As a result of the item analysis of REEF, the quality of the items was confirmed and then the final questions were confirmed. Second, as a result of conducting exploratory factor analysis to examine construct validity, all items except for one item showed an acceptable fit of factor loading, indicating that a single factor was suitable as in the study that developed the original scale. Third, to demonstrate convergent validity among construct validity, correlations between REEF and BRIEF-P, REEF and executive function measured by the execution function performance task were analyzed, respectively. As a result, the executive function measured through REEF showed a significant correlation with the executive function measured through the BRIEF-P and the executive function task, and convergent validity was confirmed with this result. Fourth, in order to examine concurrent validity of the criterion-related validity, the correlation between mother''s parenting behavior, preschoolers’ theory of mind, problem behavior and language ability which have been previously proven to be related to executive function was investigated. Fifth, as a result of cross validity testing whether the results examined through study subject 1 appear the same to the new subject, factor loadings of all items except for the two items were found to be similar.
In conclusion, the current study is meaningful in that it provided a new and additional tool to the executive function. This was mainly measured through existing scales and experimental tasks, by examining the validity of REEF, which evaluates preschoolers’everyday executive functions, through the mother''s report. REEF validated from various aspects can be used in various ways in the future. For example, it can be used in research that reveals individual differences in executive function, factors affecting executive function, and developmental results of executive function, etc., thereby contributing to the expansion and activation of research on executive function in preschoolers.