JLTA Newsletter No. 44
日本言語テスト学会
The Japan Language Testing Association

JLTA Newsletter No. 44
発行代表者：渡部良典
2018 年 (平成 30 年) 3 月 31 日発行
発行所：日本言語テスト学会 (JLTA) 事務局〒270-1695 千葉県印西市平賀学園台 1-1 順天堂大学さくらキャンパス
小泉利恵研究室 TEL: 0476-98-1001（代表） FAX: 0476-98-1011（代表）e-mail: rie-koizumi@mwa.biglobe.ne.jp URL: http://jlta.ac＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊＊

第21回研究大会を終えてOrganizing committee chair of the 21st Annual Conference
Emiko Kaneko (Aizu University)
第21回全国研究大会実行委員長
金子 恵美子（会津大学）
去る 9 月 9 日（土）、10 日（日）に会津若松という中央から遠く離れた地で、第 21 回全国研究大会が開催された。大会実行委員長という身に余る大役だったが、発表者の皆様、実行委員としてご協力いただいた研究会運営委員の先生方、福島大学の髙木先生、そして、渡部良典会長をはじめ、事務局の小泉先生、
片桐先生、横内先生、深澤先生のお力添えにより、無事に終了することができた。また、遠方まで電車を乗り継いで参加してくださった皆様にも、ここで改めて心より感謝の意を表したい。
本当に会津大学で全国研究大会を開催するのかと念を押したのは、今から数年前、私が研究会運営委員の副委員長を打診された時のこと。裏磐梯に代表される美しい自然、歴史、温泉、美味しいお米と日本酒に恵まれ、観光で訪れるには楽しいところだが、仕事で来るにはあまりにも不便過ぎる。開催したところで、参加者には迷惑なのではないかという危惧の念が拭いきれなかった。第 20 回記念大会が成功裏に終了すると、その危惧とともに自分一人でできるのかという不安は更に増大していったが、手探りの中、テーマを決めるところから始めた。
2015 年、2016 年が受験に関することがテーマであったため、今回は受験から離れたいと思い、会津大学で
task-based のカリキュラム改変をしている最中であったこともあり、Task-based assessment という大会テーマで実施することを決めた。運よく、ETS の John Norris 先生に基調講演をご承諾いただき、Norris 先生を説得してくださった香港中文大学の Moonyoung Park 先生には、シンポジウムのパネリストを依頼する運びとなった。後日、Norris 先生は TBLT 2017 の基調講演もされることを知り、そのような方が本当に会津若松まで来てくださるのか、再び不安になった。
会津大学は教員の 40%が非日本人で占められ、海外の大学とのつながりが強く、海外の研究者を招へいしたり、国際学会を開催することに対する経済的援助は比較的寛大な方であろう。JLTA2017 も会津大学の国-1-

際会議助成金を受けて開催されたため、海外から

curriculum,

2 名の講演者を招待することが可能であった。大学

assessment 開発のご自分の経験に基づくご発

からの経済的支援に加え、多くは福島県職員の事

表で、その大変さを認めながらも、タスクを使う意義

務担当者が、看板や無線などの使用を快く承諾しを説得力をもってご説明くださった。圧巻だったのはてくださった。無線がなかったら私の当日の移動距

Norris 先生のコメントで、基調講演よりもさらにエ離は倍増していたに違いない。また、非常勤の大ネルギーに溢れていた。お手元にはパネリストの発学事務員が 2 名受付に終日入ってくださったのも、表に対するコメントが所狭しと記入された紙を数枚

大きな助けとなった。今から振り返ると、JLTA のメンお持ちで、コメントを述べるため、どれだけ集中してクバーは私一人だったが、大学からのサポートは普通

リティカルに発表を聞いてくださったのかが察せられた。

以上だったのかもしれない。

シンポジウムで洞察に溢れたご質問をしてくださった

山に囲まれた会津盆地は、天候が悪くなるとあっ

並

び

に

task-based

参加者にも感謝したい。

けなく陸の孤島になってしまうが、天気に恵まれ、あ実行委員長になることが決まってから、他の学会とは来場者を待つのみとなった。最終的には 99 名の運営スタッフを観察するようになった。実際にやっの参加となったようで、やはりこれは「旬」のスピーカてみると自分の処理能力の限界を感じるほど、ー、Norris 先生の集客力だったのだろう。Norris

様々なことが同時進行で発生し、致命的な間違い先生のご講演は、エネルギーに溢れたものだった。

もなく開催できたのは、偏に至らない実行委員長をTBLT の基本から説明してくださったが、コンピュータ

サポートしてくださったスタッフの努力の賜物である。

による自動設問で進む会話のやり取りの映像は、また、基本的にシャイな性格の会津大学の学生が、スピーキングテストの自動化が現実のものになる日

一日よく頑張ってくれたと思う。今ではどの学会も実を予感させた。Kuschak 先生のご発表では、ご所行委員には深く感謝の念を持って参加するようにな属の大学での task-based curriculum の詳細った。

をご説明いただき、使用されているタスクやその評価

今後、言語能力の評価はさらに重要性を増す

基準は実務者にとって非常に貴重な情報で参考であろう。20 年という節目の年が過ぎ、言語テストになるものであった。Park 先生は、修士の指導教を専門とするプロ集団として、研究活動に加え情報官 が Norris 先 生 、 博 士 の 指 導 教 官 は発信をする責任をどのように果たして行くか、思案のJTLA2015 の招待講演者の Carol A Chapelle

時を迎えていると思う。2018 年の全国研究大会

先生という JLTA にはゆかりの深い先生だが、陸軍は札幌の北海学園大学で開催される。研究大会というコンテクストや仮想現実を使ったタスクは多くのならびに JLTA のさらなる充実化を願いたい。

日本人参加者には目新しいものに移ったのではな
い で あ ろ うか 。 お 二 人 の 先 生 と も task-based- 2-with special attention paid to “intended

Reports on
The 21 Annual Conference of
JLTA
Sept. 9 (Sat) & 10 (Sun), 2017use” of tests. Assessment needs to inform
us of various aspects of learners’
knowledge and ability measured by how
they have performed and to be deeply
linked with “decision-making, classroom
feedback, and program evaluation.” In thissense, traditional testing methods arelimited, and tasks come to play a vital roleindesigning
effective
languageassessment.
Traditional assessment tends to put ast

University of Aizu

Theme: Aligning Task-based
Assessment to Curriculum
Objectives

Keynote Speech
Task-based
Language
Assessment:
Aligning Designs with Intended Uses andConsequences
John NORRIS(Educational Testing Service)
The keynote address of 21st Annual
Conference of the Japan Language Testing
Association was given by Dr. John Norris in
the Center for English Language Learning

primary focus on language knowledge,
which often causes negative washback
effects such as gaps among what learners
have been taught, have learned, and havebeen tested. To prevent these negative
consequences,many
different
assessments have been proposed, andtasks make it feasible to provide beneficial
and productive information about what
learners can do (i.e., language use) inand Assessment at Educational Testing
Service. Dr. Norris’s valuable and insightful
keynote address provided excellent
opportunities to reconsider not only what
language assessment was, but also how
and why assessment was administered invarious contexts where the intended goals
for assessment were different. Instead ofseverely criticizing or defocusing on
traditional testing methods, Dr. Norris
pointed out the importance andmeaningful and interactive settings withintended purposes and objectives.
However, this does not necessarily meanthat all test items should be task-based,
nor does task-based language assessment
completely evaluate learners’ total
languageabilities.
If
learners’communication skills are the target ofassessment, some tasks are at least
incorporated into the test, or if learners’
simple grammatical knowledge needs topossibilities of tasks that could be
successfully incorporated into language
assessment.
Dr. Norris first discussed the natureand necessity of language assessment

be evaluated, traditional testing methods
such as gap filling may be adequate toachieve the test objective. It is thus
important that assessment be createdbased on the intended use of tests.
-3-

To develop effective assessment, we

scoring methods, it is important toalso have to take into account the needs
and purposes of test takers. For example,
the English for Academic Purposes (EAP)TOEFL test must accurately measure test
takers’ general English proficiency
required to successfully carry out
academic tasks in classroom. Assessmentin the English for Specific Purposescontext
demands
genuineanddomain-specific tasks that test takers are
expected to deal with in particularconsider how the scores would be
employed since the purposes for scoring
reports may be different, depending on
what evaluation methods are adopted(e.g., formative vs summative, or analytic
vs holistic).
Finally, Dr. Norris discussed fivequestions related to the validity oftask-based language assessment andcarefully answered them to support thevalidity and reliability. One example was

occupational
fields.
Appropriately
designed tasks can be employed even inassessment of the early grade inelementary school (e.g., scenario-based
andlearning-oriented
assessment
introduced in the keynote address).
Task-based language assessment should
entail communicative language use which
focuses on meaning rather than on form
in a meaningful, authentic situation withthat without any task performance, itwould be difficult to evaluate test takers’
abilityrequiredtocompletedomain-specific,
tasks
such
as
aviation-related tasks, and thus tasks wereindispensable to make assessment valid.
In conclusion, task-based language
assessment can provide much information
not only about language learners’
language knowledge and communicative

clearly defined goals.
Dr. Norris also discussed which tasks
should be selected, how task-based
performance can be obtained, whichaspects in performance should be
evaluated, and how task performance
should be scored. For example, he pointed
out that based on needs analysis in EAP,
representative and challenging tasks forinternational university learners were
carefully chosen, which also had someabilities to accomplish tasks but also about
evaluation of language programs andinstructions with positive washback, all ofwhich can motivate learners to further
pursue their goals.
In the current Japanese English as a
Foreign Language setting, task-based
language teaching is gradually becoming
widespread, and related university
entrance
examinations
will
also
dramatically change. At this importantdiagnostic purposes for them to further
improve language proficiency. Moreover,such tasks can be used as the final
achievement
assessment.
Anotherinteresting point was before choosing

stage, Dr. Norris’s keynote address abouttask-based language assessment was very
informative and valuable for all of theaudiences.
-4-

Reported by Tsutomu KOGA

reflects their performance in target(Tokai University)

language use (TLU) domains. However, it
is not easy to generalize the task
assessment because the real world is socomplex and diverse that the task
assessment cannot be a reliable predictor
in some cases. Sato emphasized theimportance of needs analysis and domain
analysis. A careful survey helps task
developers to identify language use needs
in a specific TLU domains.
Next, we were given a chance toSymposium
Theme: Task Development in EAP and
ESP Contexts: Application of Theories andChallenges
Coordinator:
Takanori SATO (Sophia University)
Panelists:
Claudia KUNSCHAK(Ritsumeikan University)
Moonyoung PARK
(Chinese University of Hong Kong)
Discussant:John NORRIS (Educational Testing Service)
The theme of the symposium istask-based language assessment (TBLA) in
EAP and ESP contexts. TBLA has been
widelyimplemented
invariouseducational contexts since the early 1990s

listen to two forerunners in this field. Firstone was Kunschak. She reported atask-based
curriculum
development
project at a College of International
Relations in Ritsumeikan University. The
program offers instructions that put astrong emphasis on English and studying
abroad. In order to evaluate students’achievement in this program, 4 levels in
CFER were chosen (A1, B1, B2 C1). Afterwith the prevalence of task-based
language teaching (TBLT). It could be said
that EAP and ESP have been frontrunners
in TBLA because these two fields havebeen gaining great benefits of preparing
learners for a real world application of
their language skills through TBLT.
Sato began his part with the aim of
TBLA. TBLA aims to evaluate what
test-takers are able to do with language
rather than what they know about

defining program goals, learning outcome
indicators and tasks were developed for
all levels and skills across the different
class types. Then, sample rubrics were
designed for the four different proficiency
levels. This program that combines TBLT
and TBLA can gives language teachers andcourse designers great hints to conduct
TBLT-centered courses.
The other panelist Park talked aboutdeveloping tasks for English for aviation

language. Task development for thesummativeassessment
has
beenconsidered a challenging issue. Tasks need
to be developed in a way that test-takers
performance on the assessment tasks

specific purposes assessment. Aviation
English is a field of ESP, and is a key
component of air traffic control (ATC)communication. ATC communication
requires clear mutual understanding;-5-

miscommunication can threat aviation

拝聴させていただいた研究発表やシンポジウムでsafety. Traditional paper-based testing
may not be suitable to predict test-takers
performance in ATC communication. Park
demonstrated the process of developing
virtual aviation English assessment, which
is based on Evidence-Centered Design(ECD). ECD can function not only as a task
design and construction blueprint, but as apriori validity evidence. Next, he discussed
findings from a task-based needs analysis
survey and document analysis on various

は，参加者を含む教室全体で研究や今大会のテーマであるタスクの開発やその使用について建設的な議論が行われ，とても有意義な時間を過ごすことができました。また，発表が終わってからも議論を続けていた先生方がたくさんいらっしゃったのも印象的でした。
どの先生方もご自身の研究をとことん追求していて，とても良い刺激になりました。来年度以降も継続して参加したいと思います。

crucial aspects of TBLA.
In the end, Norris summarized theissues of introducing TBLA. He argued that
it is possible to generalize the results of
TBLA by referring to the curriculum ofdriving schools and driving tests. It is
crucial to build robust valid definitions of
the constructs we would like to measure.
Other important things to consider arenecessary aspects to evaluate and task

Report on
JLTA Workshop
Sept. 9 (Sat), 2017,
Aizu University「テキストマイニングを使った自由記述式ア
ンケートの分析」

difficulty. Moreover, we have to consider
how to evaluate fluency. Measuring taskcompletion time is another important
aspect in TBLA.
Reported by Kiwamu KASAHARA(Hokkaido University of Education)

大木 俊英（白鴎大学）
2017 年 9 月に会津大学で開催された言語テスト学会の、ワークショップ「テキストマイニングを使った自由記述式アンケートの分析」に参加した。自分の研究のテーマに関連して、自由記述のアンケートを扱うことが多く、その際にその解釈にどのように客観性を保証するべきか日ごろから関心があったこと

大会の印象がそのきっかけである。

報告者 前田 啓貴（筑波大学大学院）

ワークショップは、主にテキストマイニングに関す

会津大学で開催されました日本言語テスト学会

る理論や研究例を紹介する前半と、実際のデータ

第２１回全国研究大会に参加させて頂きました。

をソフトを使いながら分析する演習から構成された。

私自身，今回が初めての参加であり，筑波大学

前半の講義は、研究を大きく「量的研究の平井明代先生を中心に行った共同研究の発表（ quantitative research ） 」 と 「 質 的 研 究もあったため，楽しみもあり緊張もありの参加でし（qualitative research）」にわけ、それぞれのた。

特徴から、両者はトレードオフの関係になりやすく、-6-

両立が難しいこと、そして、両者のアプローチを組み限定すると良いと思う。必要に応じて論文等に記合わせた研究アプローチが必要であると問題提起載する。

がなされた。その後、テキストマイニングに関して定

今後も、テキストマイニングを使った研究は増え

義やその他の類似した研究分野との比較、長所とていくことが予想される。また、自分自身もテキスト

短所など理論的な解説が詳細になされた。私にとっマイニングを使ってデータ分析をする可能性も同様て、テキストマイニングがすでに多くの研究で活用さに増加するであろう。そのため、今回のようなワーク

れていることは大きな驚きであった。

ショップは、多くの研究者・教育者にとって非常に有後半は、実際のデータを使っての演習であった。

意義なものであった。最後に、ワークショップの講演

KH Coder というテキストマイニングソフトを使って者の先生、また、企画運営された関係者の皆様に実際に分析をするという形式であった。使用したデ対して感謝の意を示し締めくくりとさせていただきまータとしては、私立高校の 1・2・3 年生計 500 名す。

のもので、質問内容としては「英語の授業でどのよう報告者 佐藤 剛（弘前大学）

な力を付けたいか」、「大学入試を受験する予定はあるか」であり、そこから「大学入試を予定する高校生と、その予定がない高校生は、授業を通して身出、コンセプトの取り出し、回答の分類、外部変数

Report on
The 46th JLTA Research
Seminarとの関連分析というものであった。はじめてのソフトのOct. 28 (Sat)

操作とデータの分析であったので、戸惑う部分も多

於：桃山学院大学（静岡市）に着けたい能力はことなるのか」について分析を行った。流れとしては、データ収集とクリーニング、語の抽かったが、丁寧な説明と解説、参加者同士の協力などもあり、全員がソフトの扱い方を十分に理解し、「ダイナミックアセスメント：指導と評価の一
体化」

習熟したように感じた。
最後に、質疑応答の時間では、多くの質問が寄せられ、それについて話し合いがなされた。すべてを挙げることはできないが、その一部を示す。
●クラスター分析の際に、頻度が低かったために分析対象として扱わなかったデータの扱いはどうするの報告者 島田 勝正（桃山学院大学）

か。→このようなケースのために、原文を検討する。

2017年10月28日（土）桃山学院大学にてその上で必要があれば取り入れる。

「第46回日本言語テスト学会研究例会」が「第４●今回紹介した以外に、できることを紹介してほし

回中部地区英語教育学会近畿地区研究会」とい。→大学のレポートで「この授業で何を学んだか」

共同開催された。現職教員の参加も想定し、「ダイという問いに対する回答の分析を行っている。一般

ナミックアセスメント(DA)」をテーマに取り上げ、サブテ

的には非常に煩雑であるが、テキストマイニングを活ーマを「指導と評価の一体化」と設定した。DAは足用することでよりスムーズに分析を進めることができ

場掛けを与えることによって伸びる能力の将来の可る。

能性をも射程に入れているという意味で、指導に●元データに手を加えることは許容されるのか？→

一番近い評価であると考えたからである。

読んでも意味が分からないものや、明らかな誤字に第一部は、西本有逸先生（京都教育大学）に「英語教員のためのダイナミック・アセスメント入門」-7-

と題した講演を頂いた。西本先生はヴィゴツキー学

いなどの問題点を明らかにした。

を専門としており、DA の思想的始源であるヴィゴツ

第三部では、住 政二郎先生（関西学院大学）

キーの文化歴史的理論から講演を始められた。そに、「Computerized Dynamic Assessmentの本質はスピノザの一元論的世界観であり、教育(C-DA): Learning Possibility Score と指導への世界では教授と学習を統体的に捉えるの応用」と題して、どのように DA の理論的な枠組Обучение（ロシア語のオブチェーニエ、英語訳はみを指導へと応用するのか、という点について講演

Teaching-Learning）が大切であり、DA とは教を頂いた。DA は、新しい評価の枠組みとして魅力

授と学習が同時進行するなかで学習者の「伸びし的でありながらも，指導者育成のコストが高く、まろ」すなわち学習可能性を見極めることであるとされた、クラスルーム単位での導入には敷居が高い。住た。DA は心理学の分野ではすでに市民権を得た

先生は、DA が抱えるこうした潜在的な課題に対し評価概念であり、特別支援教育においても研究とて、コンピュータを活用することで解決を図っていた。

実践が積み重ねられているが、英語教育では発展

また、項目反応理論の多段階反応モデルを活用途上にある。西本先生はご自身の研究を紹介されして適合学習システムを開発し、指導への応用を（西本, 2005）、Kozulin & Garb（2002）

試みていた。興味深かったのは、受験者の反応パタの公式が汎用性が高いとされた。最後は文学テクーンから、Actual Score，Mediated Score，

ストを使ったワークショップが行われ、教授や支援のLearning Possibility Score の 3 種類のスコア

質が大切であると結ばれた。

を算出し、多角的に受験者の学習状況を描き出

第二部で私（島田）は「多肢選択式語彙・文そうとしていた点である。未だ試行の段階でテストデ法テスト作成上の留意点」と題して、ワークショップ

ザイン等には課題は残されてはいるものの、今後のをもった。まず、「よい」テストの条件を妥当性、信C-DA の可能性を十二分に感じる講演であった。

頼性、実用性の3つの観点から考察し、一般的に台風 22 号接近の心配をよそに、フロアとの議論

は項目数を増やせば信頼性が上がるが、悪い項目

は白熱し、ある参加者からは「研究会ってこういうを取り除けば（項目数が減っても）信頼性は上が場だよ」という感想を頂いた。講演を引き受けて下ることを示し、良い項目を確保することが大切であさったお二人の先生方はもとより、遠方よりご来学ると主張した。そして、「よい」項目であるか否かは、頂いた先生をはじめ、15 名すべての参加者にお礼

事後の項目分析（項目困難度や項目弁別度）

申し上げる。

により量的に判断できるが、「よい」テストが「よい」
項目の集合体であると考えれば、「ガチャガチャ」（青木, 1989, p.c.）とPCを使って統計分析す
る前に、一つひとつの項目をもっと近くで見る

海外の学会・研究会（Briendly, 1999, p.c.）必要があると、質的参加報告
World Conference Report

な項目形式分析の重要性を指摘した。そして、ワークショップでは、11の具体的な事例について各項
目の問題点を検討し、改善策を参加者全員で考えた。問題文にヒントが含まれている、選択肢を問ALTAANZ 2016 報告
報告者 安間 一雄（獨協大学）

題文に入れると文法的に間違っている、選択肢の頻度や分野が不揃いである、テスティングポイントが複数あると受験者の弱点に関する情報が得られな-8-

大会名 The Association for Language
Testing and Assessment of Australia and
New Zealand
開催日 201６年 1１月 1７日～19 日
開催場所 The University of Aucklandがあったのはヨーロッパでよくある学会の一連のイベントです．ビュッフェ形式のランチは参加費に含まれ，
毎日ホールに結構な量の食べ物が提供されました．
ただ，ランチもティータイムもほぼ同じものが並んではいましたが。Welcome reception では地元の昨年 11 月 17～19 日にニュージーランド・オークラ

小学生たちがマオリ族の伝統舞踊と歌謡を披露しンド大学で開催された言語評価の国際学会 Theてくれ，好評でした．

Association for Language Testing andワークショップは次の 4 件のタイトルで行われました

Assessment（括弧内は発表者）．

ofAustralia

and

New

Zealand•(ALTAANZ; http://www.altaanz.org/) にclassroom activities to understand and参加しました．たまたま会場であるオークランド大学

support learner language development”にサバティカルで半年間滞在していましたので，“気(Matthew Poehner)

軽に”参加し，研究発表も行ってきました。

• “Introduction to Rasch measurement

この学会は名称が示すようにオセアニア地域で主

using Winsteps” (Ute Knoch)

催・開催される学会ですが，シンガポール・インドネ• “Using free online resources to develop

シア・中国など東南アジアからの参加者が多く，日reading texts for classroom assessment”

本からも数名が発表に来ていました。2012 年に設(Barry O’Sullivan)

立されたばかりの若い学会で，大会は隔年開催の• “Introduction to many-facet Rasch

ため今回が第 3 回でした。参加者は見たところざっmeasurement” (Ute Knoch)“DynamicAssessment:

Leveragingと 150～200 名程度で，ランチタイムや午後のティ

このうち第 2 件と第 4 件の発表者である Uteーブレイクには皆がホールで歓談でき，また，時間

Knoch 氏はオークランド大学で学位を取得し，外に目当ての研究者に質問したり初めての人と情

現在はメルボルン大学をベースにライティングの評価

報交換したりと，小規模な学会ならではの集約感を中心に活躍されている方です。タイトルが示すようを味わうことができました．小振りではあるものの，に統計にも詳しく，この学会の閉会式ではそれにま

大会準備委員にはオーストラリア・ニュージーランド

つわる逸話が紹介されていました．また，オークラの錚々たる研究者が名を連ね，スポンサーもたくさ

ン ド 大 学 で 現 在 行 わ れ て い る Post-entry

ん集めていて，主催者側の力の入れようが分かり

Language Assessment（入学後の英語力診ます。会場は大学内の経済学部関係の施設で，断）プログラムにも関わっています。私自身は最新の設備が整っていました．小さな教室でも 4O’Sullivan の ワ ー ク シ ョ ッ プ に 参 加 し ，～5 列の半円形階段教室となっていて，発表者

Coh-Metrix などのテキスト特性測定ツールの活はともかく聴衆には参加しやすい環境でした。

用方法を学ばせてもらいました．

プログラムは Plenary Address が 4 件，ペーPlenary address は次の 4 件のタイトルで行わ

パー発表が 40 件（パラレルセッション 4 室），れました（括弧内は発表者）。

Work in Progress が 4 件で，この他に初日に(1)

ワークショップが 4 件（2 室）ありました。また，

Vygotsky’s

初日晩に welcome reception，2 日目にディdevelopmental

ナー，3 日目の閉会式後に写真撮影，さらに翌Poehner)

日希望者で対岸のデボンポートという町へのツアー-9-“DynamicAssessment

unrealised
education”

visionandof(Matthew

(2)“Maorilanguagetesting

and

れるのは社会生活に必要な言語能力で，後者でassessment in Aotearoa: past, present,

は学習指導要領を反映したものになります。さらにand future prospects” (Peter Keegan)

妥当性検証に際しても明確なモデルが必要である(3) “Measuring L2 language writingと論じていました。

development: implications for research

ペーパー発表は評価と測定に関するものが殆どで，and pedagogy” (Ute Knoch)

個人的には興味深いものでした。基礎領域から応(4) “Making consequence happen” (Barry

用的なものまで幅広いテーマが含まれていたと思い

O’Sullivan)

ます。手前味噌ですが，私も最終日の最後のスロ(1) は作文指導に当たり教師による適度な中途ットをもらい，“Partial scoring of sequencing

介入が学習者の課題克服に効果的であるとする

tasks with distance penalty” という題で発表

Dynamic Assessment が定着しない原因を，させてもらいました。発表時のみならず終了後も質作業過程からのフィードバック体制の未整備とスキ問やコメントをもらい，手応えがありました．蛇足なル中心の学習観にあると論じたものです。(2) はニ

がら，このペーパー発表では厳密な時間管理が行ュージーランドの公用語であるマオリ語指導の現状

われ，何かとアバウトなニュージーランドの生活に慣を報告し，言語測定への試みを紹介したものです。

れた者には少し意外な気がしました。

これに関連して，この学会の後じきにテレビのニュー

2 日目の昼前，パラレル 2 回分の枠を使ってス番組で，マオリ語を小学校での必修外国語にすWork in Progress というセッションがありました。

べきかどうかの議論が報道されていました。現在マオ

これは未完成で研究の展開に課題を抱えているテリ族には母語として必修ですが英語を含む他の母ーマを持ち込んで，親切な参加者からアドバイスを語話者には選択言語です．マイノリティー言語のもらうというものでした。4 人の発表者はそれぞれテ

複雑な事情を垣間見ました．(3) は談話構造やーブルに陣取り，25 分区切りで参加者がテーブル

内容理解を中心とした新しい作文評価法を論じたを回って説明を受けるという形でした．参加者は各

もの で， accuracy/fluency/complexity など

テーブル数名でしたので，濃い内容の議論が行わの伝統的・静的価値観からの脱却を求める動きをれました．このやり方は今後の学会運営の上で興感じました．(4) の発表者 Barry O’Sullivan

味深い試みでした。ただ，能動的研究者が多く参氏 (British Council) は本学会の 2014 年度

加した大会だからこそできたとも言えます。

全国研究大会での基調講演者です

何れのパートも内容が濃く，深い議論が交わされ（Newsletter, No. 18 参照）。この発表は言ていたことが印象的でした．発表者のみならず聴

語テスティングの中核的領域である構成概念妥当

衆からも活発な意見が出て，建設的にして発展性の中でも特に議論の揺れがある結果妥当性性のある学会であると感じました。この学会はオンラ

consequential validity に関わる発表者の最イン学会誌の発行のほか，ワークショップの開催や新のモデルを紹介するもので，テスト使用の文脈が奨学金の支給も行っています．しかし年会費はな

この妥当性に重要な役割を果たすとしています。例

く，大会の参加費が運営原資になっています．最

えば，同じ面接による言語テストでも移民局での大の特徴はスポンサーの確保でしょう．今回も開

入国審査と文部科学省依頼の英語力調査事業

催 校 の ほ か IELTS, ETS, British Council,とでは受験者の切迫感が違うと考えたら如何でしょ

Pearson といった大きな組織から資金援助を得うか？前者は生計を左右しますが，後者は学校のていることで潤沢な運営が可能になり，それが参成績には全く影響しません。また，これがテストの加者の満足感にも繋がっていると感じました．また，構成概念の設定にも関係してきます。前者で問わ準備委員会には多くの研究者が関わっていますが，- 10 -

隔年開催にすることによりその負担を軽減している「第 5 章 妥当性，信頼性を考慮した問題作

ことは賢明であると思います．

成，第 6 章 多岐選択問題に関して，第 7 章（日英・英語教育学会ニューズレター掲載記事を評価の信頼性について，第 8 章 避けるべきテスト

一部加筆修正）問題・テスト形式」の中盤部分は英語テスト作成における注意すべき点が具体的に書いてある。過去数年内に実際に出題された大学入試センター
試験問題や私立大学入試問題や都道県公立高書評Book Review

校入試問題から一部抜粋し，どういう問題点があってどう改善したらよいのかを具体的に示している。
「第 9 章 語彙テストの作成，第 10 章 文法テストの作成，第 11 章 リーディングテストの作成，『英語テスト作成入門：効果的なテストで授第 12 章 リスニングテストの作成，第 13 章 ライを変える』

ティングテストの作成，第 14 章 スピーキングテスト

笠原究・佐藤臨太郎 2017 年 金星堂の作成，第 15 章 定期考査の作成」の終盤部
分は具体的な英語テストの作成方法が書いてある。

本書は，英語教員や英語教員志望学部生向

執筆者二人とも長く教諭として高校で英語を教え

けの英語テスト作成入門書である。

られたご経歴があり，そのご経験が存分に本書に「第 1 章 テストの目的・テストの種類，第 2 章

生かされている。つまり，日本の中学・高校での英テストの基礎概念（妥当性・信頼性），第 3 章

語教育におけるテストを常に念頭に置いて説明がテストの基礎概念 2（波及効果・実用性），第4 章 テスト結果の処理：その解釈と分析に関して」までの序盤部分は英語テスト理論の入門書でもあなされ論じられているということである。
数式が書かれているのは標準偏差や偏差値や識別力くらいなもので，全章を通して基本的に数る。大学院生・研究者向けの入門書や学術書と式はほとんど出てこない。数式や統計アレルギーでは違って，一般人向けに専門用語を優しく噛み砕

嫌厭されてしまうことがないようになっている。統計はき説明しており，文章も平易ですらすらと読める。

ともかく数式ですら過度に苦手な文系学生や英語

いや，それ以上である。一例を挙げる。「2.信頼性

教員が多い実態を踏まえると，「最初に読んでもらみなさんはいつも昼食はどのように召し上がっていま

いたい英語テスト理論の入門書」は本書のようなすか。筆者は時間があれば大学近くの某釜揚げう
どんのチェーン店かカレーチェーン店に行くことが多く，出張先でもこのうどん店，カレー店に行くことが多い

書き方で数式がほとんどないものも望まれるような気がした。国内外の言語テスティングの入門書には，
抽象化・理論化された精緻な学術書も少なくなく，のですが，感心するのは全国のどこのお店にいつ行

どうしても英語教員や英語教員志望学生にとってっても味や辛さはほぼ同じで，期待を裏切られたこ

は敷居が高いが，本書はその敷居が取り払われたとがないということです。この『味に変わりがない，一感じの本である。

貫している』ということは『信頼性』があるということに本書において評者と見解が異なる点がいくつかあなります。テストの信頼性とは～」（p. 25）。こうるが紙幅の関係上一つだけ挙げると，局所独立にいった一般の生活感覚に直球で迫る説明が，信関してである。「項目と項目が独立するよう気をつけ

頼性の説明に限らず随所に見られる。なお，信頼る」ように書かれていて，そうでなければならない前性の説明のところではその分，クロンバックのアルファ提で書かれている（pp. 83-88）。「項目と項目係数すら出てこない。

が独立しなければならない」と主張している言語テ- 11 -

スト研究者は少なくないように思う。本書でも成 31 年度から始まる新課程では，外国語［英Haladyna, T. M. (2004) から引用されている。

語］コアカリキュラムの中の「英語科の指導法【８しかし評者の認識だと，局所独立は，テストや言単位程度を想定】」において，「言語能力の測定

語テストにおいて必ずしも必要条件ではない。局所と評価の方法についても併せて理解する。」と記さ

独立でないほうがよい場合もある。たとえばある程

れ，評価法も扱うことが求められている。）。大学

度の分量のパッセージの理解度を推定するにあたっ

研究者にとっては，中学・高校教員向けの英語テて，前半の問 A が正答できないと後半の問 B も必スト作成関連のワークショップを行う時の参考として

然的に正答できないというテストにおいては，問 A

頼りになる本である。

と問 B は互いに独立していない。しかし，日常生

片桐一彦（専修大学）

活におけるリスニングにおいてもリーディングにおいても，前半（問 A）が理解できないもしくは間違って理解すると後半（問 B）はさっぱりわからないもしくは間違って理解するということはごく普通に日常生

JLTA 講師派遣

活で起こることなので，問 A が正答できなければ問実施報告書（派遣先より）B も正答できないテスト項目は，必ずしも悪いテス
ト項目とは言えない。むしろ実生活における言語運
用パフォーマンスをうまく推定しているとさえ言えるか

報告者 国際交流基金日本語国際センターもしれない。項目応答理論を使用する時には，そ専任講師 柴原智代の数理的前提から，局所独立が必要条件となっている。（X という事象が起こる確率[70%]と Y と講習テーマ：スピーキング評価と学習者対話テスト

いう事象が起こる確率[60%]とが同時に起こる確の研究動向率[0.7×0.6=0.42]を求めるとき，X と Y が独立

講師名：小泉利恵氏（順天堂大学）した事象でないと，その確率を簡単には［つまり単実施日：2018 年 3 月 7 日（水）純な積では］算出することができない。項目応答

14：00～16：00

理論では，ある能力の人がテスト項目 1 と 2 に正

開催地：独立行政法人国際交流基金日本語

解する確率をそれぞれ P1 と P2 とすると，テスト項目

国際センター16 研修室

1 と 2 の両方に正解する確率（P1*P2）は，積算して算出している。）しかし項目応答理論を使

当日は、日本語教育を専門とする専任講師及用しない場合にも，テスト理論一般においてあたか

び職員を含め 35 名ほどが参加した。90 分の講演も局所独立が必要条件であるがごとくに過剰般化の後に 30 分の質疑応答が行われたが、どちらも時されているように思う。一方で，「項目と項目が独間が短く感じられた。その理由は、理論面は聞き手

立するよう気をつけて作成した場合の利点」についの専門性にちょうどよい深さを備え、それに実例を巧ては本書にも書かれている通りで大いにあり，評者

みに組み合わせて話してくださったことが大きい。そも大いに推奨する（その際，上述問 A と B のようれに加え、当センターで開発している JF 日本語教

なテスト項目も全体の 1～2 割とかあっても特に問育スタンダードに基づくロールプレイテストについて、題ないと思う。）。

専門家の観点から検討し、専任講師が日ごろ感じ

教職課程で英語教員養成に携わっている大学ている疑問に答えてくれたために、満足度が高かっ教員にとっては，英語科教育法や類似の授業でたと思われる。｢評価領域は食わず嫌いだったが、扱ったり紹介したりするのにぴったりな本である（平

今日の講演は大変面白かった｣というベテラン講師- 12 -

の感想が聞けて、企画者としてもうれしい限りであJ- STAGE における『日本言語テスト学会誌』

る。小泉氏に感謝申し上げたい。

のアクセス状況（2017 年 11 月～2018 年
2 月）は、日本からが 427 件、中国からが452 件、アメリカ 330 件と海外からのアクセスも多くなっております。集計期間は短くなってお

JLTA 事務局より連絡
Messages from JLTA Secretariat

りますが、昨年に比べ、韓国、フランス、ロシア、
ドイツ、オーストラリアからのアクセスが増加傾向にあります。今後さらに学会誌の閲覧が増える
ように努力してまいります。

JLTA の活動にご理解とご協力をいただき、誠にありがとうございます。ご質問・ご意見等ございました『日本言語テスト学会誌』は、狭義のテステ

らお寄せください。

ィングに関するものだけではなく、広く評価に関する論文を募集しています。教育実践やプログ(1) 2018 年 9 月 8～9 日に JLTA 第 22 回全ラム評価に関するものなど、評価全般に関わる

国研究大会が北海学園大学で開催されます。

実験・知見を含みますので、どうぞふるってご応

田中洋也全国研究大会実行委員長、藤田

募ください。第 21 号投稿締め切りは 2018 年

智子研究会運営委員長、金子恵美子研究4 月 30 日（月）です。

会運営委員会アドバイザー、印南洋研究会

尚，執筆要項に修正があり，執筆用テン

運営会副委員長が中心となって準備を進めてプレートも作成いたしました。提出先も以下にいます。4 月に発表募集の案内を出します。

変更になりましたので，ご注意ください。

最 新 の 情 報 は JLTA の ウ ェ ブ サ イ ト

原稿提出先：学会誌編集委員長 松本佳(http://jlta.ac/) をご覧ください。

穂子 mkahoko@tsc.u-tokai.ac.jp
最新情報は以下へ：http://jlta2016.

(2) 2017 年 10 月 28 日（土）に第 46 回日

sakura.ne.jp/?page_id=62

本言語テスト学会研究例会/第４回中部地区英語教育学会 (CELES) 近畿地区研究(4) JLTA 研修講師派遣事業が 2017 年度から

会が，中部地区英語教育学会近畿地区と始まりました。本事業は，テスト利用・作成に合同で，桃山学院大学で開催され，活発な関わる研修を行う機関・団体に JLTA より講議論がなされました。 今後の例会の情報は，師派遣を行うものです。JLTA 研修講師派遣

以 下 をご 参 照 くだ さい （ http://jlta2016.

委員会を中心に進めましたところ、2017 年度

sakura.ne.jp/?page_id=21）。

は 1 件依頼があり、スタッフ・セミナーへの派遣を行いました。今後もお知り合いの方などにご(3) 『日本言語テスト学会誌』第 20 号が発行され，紹介いただければ幸いです。

11 月中にはお手元に届いたと思います。第ウェブサイト：http://jlta2016.sakura.

20 号 ま で 過 去 の 号 す べ て が J-STAGE

ne.jp/?p=929(https://www.jstage.jst.go.jp/browse/jltajournal/-char/ja/) で一般公開され(5) 2017 年 9 月 9 日に開かれた役員会から，ています。

日本言語テスト学会賛助会員の資格につい- 13 -

ての議論を重ねています。まとまり次第 JLTA

これからの方は早急によろしくお願いいたします。

のウェブサイト (http://jlta.ac/) でお知らせ

2016 年度分のお支払いがない場合には，いたします。

2018 年 4 月より送付物の発送がなくなり，マイページの使用もできなくなります。

(6) JLTA 最優秀論文賞は JLTA Journal 発行●

残念ながら，本会の退会を希望される方後に決定し、表彰は翌年の全国研究大会では ， 事 務 局 （ jlta-post@bunken.co.jp ）行っています。

へご連絡をお願いいたします。

2017 年度の受賞者は、ポール・ウィキン氏（名城大学准教授・名古屋大学大学院博

文責：

士後期課程在籍）です。受賞おめでとうござ

JLTA 事務局長 小泉利恵 (順天堂大学)

います。

JLTA 事務局次長 片桐一彦 (専修大学)
横内裕一郎 (弘前大学)

2017（平成 29）年度日本言語テスト学

深澤真 (琉球大学)

会最優秀論文賞

日本言語テスト学会（JLTA) 公式

著者：ポール・ウィキン氏

Twitter アカウント: @JLTA_official

論文タイトル：The Assessment Beliefs

https://twitter.com/JLTA_official

and Practices of English Teachers inJapanese

Universities(https://www.jstage.jst.go.jp/article

Messages from the Secretariat/jltajournal/20/0/20_76/_article/-ch

We are thankful for your support of andar/ja 参照)

commitment to JLTA’s activities. Please
send us any comments or inquiries you(7) その他

may have.

● 会員情報や会費納入状況の確認・修正ができる「マイページ（https://www.bunken.

(1) The 22nd Annual Conference of theorg/jlta/mypage/Login）」はご利用いた

Japan Language Testing Association

だいていますでしょうか。ログインに必要な会員

will

番号やパスワードを紛失された方は以下からおUniversityon

問 い 合 わ せ く だ さ い （ https://www.

(Saturday)

andbunken.org/jlta/mypage/Contact ） 。

appreciate the deep commitment of

マイページ内の会員向けページにおいて，ジャHiroya TANAKA (Conference Chair),ーナル・ニュースレター等の掲載があります。

Tomoko FUJITA (Committee Chair),● 所属や書類発送先など登録情報にご変更

Emikoがある場合，マイページでの登録情報の変更

Committee),を 3 月末までにお願いいたします。学生会員の(Committee Vice Chair). We will send

方には，毎年学生証のコピーをご提出いただ

a call for papers in April. The latest

いています。

information● 2016・2017 年度の会費振込について，

http://jlta.ac/- 14 -

be

held

at

KANEKO

9

September

8(Sunday).

We(AdvisorandcanHokkai-Gakuen

Yo

be

to

the

IN’NAMIfoundatbroader(2) The 46th JLTA Research Meeting/The

sense,

classroom-based

such

as

practiceand

4th Kinki Area Research Meeting of

program assessment that deal withtheLanguageissues and topics on testing and

Education Society (CELES) was held

assessment. The next submission

atdeadline is April 30, 2018 (Monday).

Chubu
St.

EnglishAndrew’s

University(Momoyama Gakuin University) on

We

October 28 (Saturday), at which

Guidelines

there was a lively discussion. It was

templates.

jointly hosted by the Kinki Area

address has been changed as follows:

Research Group of the Chubu English

Kahoko MATSUMOTO, Chair of theLanguage Education Society (CELES).

JournalPleasesee

http://jlta2016.

theJournalandcreatedjournalThesubmission

email

Editorial

Committee:

Please see http://jlta2016.sakura.

meetings.
JLTA

revisedmkahoko@tsc.u-tokai.ac.jp

sakura.ne.jp/?page_id=21 for future(3) Thehave

ne.jp/?page_id=62 for details.
20was(4) We have started the JLTA Training

November.

This

Lecturer Dispatch project, which aims

volume as well as previous volumes

to send a lecturer from JLTA towasinstitutions and organizations thatpublished

Journallast

uploaded

Vol.

onto

J-STAGE(https://www.jstage.jst.

would like to hold a training session

go.jp/browse/jltajournal).

or meeting on test development andReaders from around the worlduse. Thanks to the efforts of the JLTA

have accessed JLTA journal articles

Training

via J-STAGE. In the last four months

Committee, one institution used this(November 2017 through February

system2018),

dispatched to their staff meeting.

there

have

been

427

Lecturerandand 330 from the U.S. In addition,

information to those who may beaccess actions from Korea, France,interested.

Australia,

and

to

conveywas

PleaseGermany,

freelecturer

retrievals from Japan, 452 from China,

Russia,feelone

Dispatch

this

Website: http://jlta2016.sakura.

other countries are on an upward

ne.jp/?p=929

trend. We will try to obtain more pageviews of our journal.

(5) Since the JLTA official meeting on
September 9, 2017, JLTA officials

The JLTA Journal is inviting various

have discussed qualifications for JLTA

types of contributions that include

institutional

studies related to evaluation in aprovide information on the outcome- 15 -

members.

Wewill

of this discussion on the JLTA website

other(http://jlta.ac/).

members on the “My Page” site.
●(6) JLTA determines a winner for thematerials

specificallyfor

If you have changes in youraffiliation,

address,

and

other

JLTA Best Paper award chosen frominformation,pleaseupdateyourpapers published in the latest issue ofregistered information on “My Page”

the JLTA Journal. The award isby the end of March. We annuallyconferred at the annual conference insend student members a message

the following year. We are pleased toasking them to submit a copy of aannounce the award recipient for the

student certificate.

2017 JLTA Best Paper Award.

● If you have not yet paid the yearly

The 2017 recipient is Paul WICKING

membership fee for 2016 and 2017,(AssociatepleaseProfessorofUniversity/Nagoya

Meijo

do

so

at

your

earliest

University

convenience. If you do not pay theInternational

fee for 2016, you will receive no

Development). Congratulations, Mr.

shipment from JLTA and will not be

WICKING.

able to use the “My Page” site after

Graduate

Schoolof

April 2018.
Title: The Assessment Beliefs and● If you plan to leave JLTA, please let

Practicesus know by sending a message toJapaneseofEnglishTeachers

Universities

in

(see

jlta-post@bunken.co.jp

https://www.jstage.jst.go.jp/article/
jltajournal/20/0/20_76/_article/-cha(https://www.bunken.org/jlta/mypa

JLTA Secretary General
Rie KOIZUMI (Juntendo University)
JLTA Vice Secretary General
Kazuhiko KATAGIRI (Senshu University)
Yuichiro YOKOUCHI (Hirosaki University)
Makoto FUKAZAWA

ge/Login), where you can check and(University of the Ryukyus）

r/en)(7) Other information● Have you visited the “My Page” site

modify your membership informationand check your yearly membership

JLTA Official Twitter account:fee payment status? Please contact@JLTA_official

us (https://www.bunken.org/jlta/

https://twitter.com/JLTA_official

mypage/Contact) if you need your＜編集後記＞
今春，センター試験の後を受けて実施される大学入学共通テスト英語試験の試行問
題が新聞紙上で公開されました。紙と鉛筆による発音問題や明示的な文法知識を問う

membership number and password,
which are necessary details for thelogin. You can access recent JLTA
Journals, previous newsletters, and- 16 -

問題はなく，英語を読む力・聞く力の測定に重点を置いていたところは評価できるのではないでしょうか。一方，4 技能テストとして導入される民間テストの候補も発表されました。懸念されるのは，スピーキングテストの導入に伴い，検定料が上がる試験が多いことです。
地域や経済状況よって結果が左右されないことが求められますが，なにやら暗雲漂う状
況です。 「いかに悪い結果につながったとされる事例でも，それがはじめられた当時にまでさかのぼれば，善き意志から発していたのであった」（ユリウス・カエサル）。「4 技能導入」という「善意」が，「悪い結果」にならないことを願っています。(KK)
次のような原稿を募集しておりますのでどうぞ
お寄せください。1) 海外学会報告， 2) 書評，3) 研究ノート，4) 意見，またその他当学会員の興味関心に沿うもの。

日本言語テスト学会事務局〒270-1695 千葉県印西市平賀学園台 1-1
順天堂大学さくらキャンパス
小泉利恵研究室 TEL: 0476-98-1001（代表）FAX: 0476-98-1011（代表）e-mail: rie-koizumi@mwa.biglobe.ne.jp
URL: http://jlta.ac
編集：
委員長
副委員長

広報委員会
笠原究（北海道教育大学旭川校）
宮崎啓（東海大学）委員
飯村英樹（熊本県立大学）
古賀功 （東海大学）
齋藤英敏（茨城大学）
長沼君主（東海大学）- 17 -