Xun,                        05/01/2018 

It is my pleasure to report on Ms. Julie Boino’s completed internship with the Federal Aviation Administration’s 
(FAA) Designee Standardization Branch (AFS‐640). The branch is responsible for providing training to citizen 
representatives of the FAA Administrator (more commonly referred to as designees). Designees have widely 
varying roles within the FAA ‐ from pilot and mechanic examiners to engineering and airworthiness 
representatives. AFS‐640 is charged with providing training to designees that emphasizes a standardized 
approach to examination, evaluation, and assessment by appointed designees. 

As Julie’s internship supervisor, I discussed with her those aspects of AFS‐640’s training that needed the most 
attention and would be best served by her efforts. We agreed that she would concentrate her work in two main 
areas: The Interactive Plan OF Action Development Guide (aka “POA Builder”) and training objectives revision. 

The soon‐to‐be implemented POA builder is an interactive, online training module that guides applicant 
Designated Pilot Examiners (DPEs) through the process of developing an FAA mandated written plan of action all 
DPEs must use while performing examinations. I briefed Julie on the intended structure and necessary 
components and provided her a storyboard with which to work. After an initial meeting between Julie, a pilot 
SME, and myself, Julie worked independently to bring the POA Builder concept to reality. During that time, she 
periodically consulted with the SME and briefed me on the outcomes. The finished product is exactly as I had 
envisioned; it will greatly enhance DPE understanding of proper POA construction and assist them in creating 
functional POAs of their own.  

Julie also did a tremendous job “renovating” our various course objectives. The legacy objectives did not 
accurately reflect nor represent knowledge, skills and abilities students should possess at course completion. 
Falling wholly within the cognitive domain, few of the objectives addressed the appropriate level of learning. 
While evaluation is a primary function of designees, AFS‐640 actually trains to the application level, that is, we 
teach them how to evaluate in a standardized manner. The knowledge that forms the basis for evaluating 
(evaluation‐level knowledge) comes from prior learning and experience.  Across 25 discrete courses, Julie 
revised 102 deficient and/or defective objectives. Our course objectives now properly and effectively convey 
training intent and expectations to students and provide a solid framework to guide future revision work and 
development of test items that accurately assess learning outcomes.    

Work performed is generally judged on quantity and/or quality. While not necessarily mutually exclusive 
measures, within a fixed completion time period there is often a tradeoff:  quantity may be, to some degree, 
sacrificed in order to produce quality results or vice versa. The quantity of work Julie did over a relatively short 
period of time is, in and of itself, nothing short of phenomenal, and the quality exceptional. 

I conclude with my thanks for allowing Julie to assist AFS‐640 to satisfy her internship requirements. 

Very best regards, 

Tony Marci 
Instructional Systems Specialist 
Designee Standardization Branch 
405.954.0544 
 
Itibbi Hopaii Tvshkachilita