[:ja]テスト理論と言語テストの課題

講演者: 中村 洋一

日時: 2018年2月3日 (土) 13:00-16:00 (50分3回の150分の講演・ワークショップ,10分休み2回)

場所: 名古屋大学全学教育棟・北棟406号室 http://www.nagoya-u.ac.jp/access-map/ 地図のB4①

 

言語テストのはじまりは、/ʃ/ の発音ができるかできないかで、敵味方を見分けるために使われたShibboleth test だと言われている (旧約聖書『士師記』12章 ギレアデ人 [シボレテ] – エフライム族 [セボレテ] )。しかし、「科学的な」テスト理論や言語テストの研究が始まったのは20世紀になってからで、その歴史は未だ100年ぐらいだと言われている。そもそも、テストすべき「言語能力」の解明も完了してはいない。本講演は、そのような歴史の中で研究が進められてきたふたつのテスト理論を概観し、言語テストの課題と将来的な研究の方向性を考える。

 

  1. 古典的テスト理論 (Classical Test Theory: CTT)

古典的テスト理論では、正答数に基づく得点 (number right score) を使用し、真の得点と誤差得点が含まれることを前提に、基礎統計量、標準得点、信頼性、項目分析といった統計処理を行う。従来から広く使用されており、結果の検討が比較的容易であるという長所もあるが、受験者の得点がテストに依存する、あるいは、テストやテスト項目の特性が受験者に依存するために、いくつかの欠点や限界も指摘されている。

 

  1. 項目応答理論 (Item Response Theory: IRT)

項目応答理論では、得点間の間隔のゆがみを補正するために、素点を基に自然対数を使用して変換したロジット得点を使用し、テスト項目の特性と受験者の能力との関係性を、確率論として捉える。データの解釈に専門的な知識を要するといった課題もあるが、受験者集団に依存しないテスト項目特性の算出・テストに依存しない受験者能力推定値の算出・受験者個々の項目ごとの情報量算出が可能になるといった利点がある。

 

  1. 言語テストの課題

今後の言語テスト研究における課題としては、「言語能力」の解明へ向けての継続的な追求がまずあげられる。また、スタンダードセッティングにおける分割点 (Cut Score) の設定方法についても、潜在クラス分析 (Latent Class Analysis: LCA)・潜在ランク理論 (Latest Rank Theory: LRT)・混合ラッシュモデル (Mixture Rasch Model: MRM) といったテスト理論の新たな観点を検討しながら、より良い方法を見つけ出していかなければならない。さらに、コンピュータ技術との連携によるコンピュータ適応型テストの開発や、そのために必要なアイテムバンキングについても検討が必要である。

 

中村 洋一の略歴:

清泉女学院短期大学教授・国際コミュニケーション科長、youichi@seisen-jc.ac.jp 神奈川大学外語学部卒業後、長野県の高等学校で英語の教員を務め、その間、1993年に上越教育大学にて MA (教育学) を取得。常磐大学 (2000年〜2008年) を経て2009年から現職に至る。専門は言語テスト (項目応答理論・コンピュータ適応型テスト・アイテムバンキング・スタンダードセッティング)。著書・論文は『テストで言語能力は測れるか』 (2002、桐原書店)、「言語テストにおけるテスト理論とデータ分析」(2006、『世界の言語テスト』、くろしお出版)、「コンピュータ適応型テストの可能性」(2004、『日本語教育』、148 号)、「第11章 コンピュータ化された項目バンキング」の訳出 (2008、『テスト作成ハンドブック』、教育測定研究所)、「Standard Setting におけるCAN-DOリスト作成とCut Score 設定の課題」(2016、『言語研究と量的アプローチ』、金星堂) など。日本言語テスト学会事務局長を経て現在は理事。

 

連絡:玉岡 賀津雄 (tamaoka@nagoya-u.jp) or 三輪晃司(kojimiwa@nagoya-u.jp)

 [:]

Similar Posts

  • [:ja]【終了しました】日本第二言語習得学会・第17回年次大会(J-SLA2017)発表者募集[:]

    [:ja]日本第二言語習得学会・第17回年次大会(J-SLA 2017)発表者募集 日時:2017年6月3日(土)・4日(日) 場所:静岡文化芸術大学 (http://www.suac.ac.jp/) 招待講演: Dr. Holger Hopp (University of Braunschweig) J-SLA2017での研究発表を募集します。研究発表には「口頭発表」または「ポスター発表」および「学生ワークショップにおける口頭発表」があります。発表を希望される方は、以下の要領で、ご応募ください。積極的なご応募をお待ちしています。 ★「口頭発表」または「ポスター発表」について (「学生ワークショップにおける口頭発表」については、この下をご覧ください。) 1. 応募資格 応募者は、2017年6月3日の時点でJ-SLAの会員でなければならない。ただし、共同発表者については、会員でなくてもよい。 2. 募集する研究の領域 第二言語習得の理論的・実証的研究 (当学会のHP(http://www.j-sla.org/)の学会発足の趣旨を参照してください。) 3. 申し込み方法 発表要旨を電子メールで送付する(書式に関しては9を参照してください。) 件名は「J-SLA2017 abstract」とする 送付先: jsla2017abstracts@gmail.com 発表要旨は、必ず以下の二点を添付ファイルでお送りください。 ① 指定の書式に従った発表要旨をWORDのフォーマットで保存したもの ② 指定の書式に従った発表要旨をPDFで保存したもの *不備がある場合、審査に時間を要し結果報告などが遅れることにもなりますので、必ず両方をお送りください。 4. 締め切り 2017年2月28日(火) 5. 発表要旨受け取り確認のメールについて 担当者に電子メールにて発表要旨を添付ファイルで送付した場合、一両日中に担当者から受け取りメールが来ることになっています。万が一、受け取りのメールが来ない場合は、お手数ですが速やかに担当者までご連絡ください。誤って迷惑メールとして処理されてしまうことがあるかもしれませんので、よろしくお願いします。 6. 審査結果の発表 2017年3月末ごろまでに、本人にメールにて報告する。 7. 口頭発表の時間について 口頭発表は20分で行うこととし、その後に10分間の質疑応答の時間を設ける。 8. 使用言語:日本語または英語 9. 要旨の書式 (不備がある場合、審査結果が遅れる原因にもなりますので、必ず以下の書式に従ってください。) (1) 英語のフォントはCentury 10.5 pt、日本語のフォントはMS明朝10.5 pt を使う。 (2)(2) 発表の言語と要旨に使用する言語を同一にする。 (3) 要旨の長さについては、日本語の場合には1600字以内、英語の場合には1000 words以内とする。なお、図や表を加えてもよいが、最終的な原稿がA4で2枚に収まるようにする。 (4) 以下のイ〜ハの内、いずれを希望するかを要旨の右上に明記する。 イ. 口頭発表のみを希望する。 ロ. ポスター発表のみを希望する。 ハ. 口頭発表を希望するが(選考の結果)口頭発表できない場合には、ポスター発表を希望する。 (5) タイトルを、要旨の最初の部分に記入する。 (6) 審査を無記名の状態で行うため、要旨には氏名を記入しない。 (7) 要旨の最後の部分に、それぞれの長さ(日本語の場合: 文字数、英語の場合: 語数)を記入する。 (8) 添付ファイル送付の際、電子メールの本文に以下のことを明記する。 *氏名(日本語)*氏名(英語)*所属(日本語)*所属(英語) *郵便番号 *住所 *電話番号 *電子メールアドレス *発表言語(日本語か英語のいずれか) 10. 応募と発表に関する注意事項 (1) 二重投稿は認めない。 (2) 未発表のものに限る。口頭発表、ポスター発表のいずれにも代理発表は認めない。 (3) 「口頭発表」は、個人研究・共同研究に関わらず、応募者ひとりについて一件とする。ただし、「ポスター発表」、「学生ワークショップ」(学生会員のみ)への同時応募はさまたげない。その場合、発表内容は異なること。 <その他の問い合わせ先> J-SLA事務局 柴田美紀 shibatam@hiroshima-u.ac.jp 電話: (082)424-6430 ★「学生ワークショップにおける口頭発表」について 学生ワークショップは、第二言語習得研究を行っている大学生・大学院生のためのワークショップで、大会第1日目の午前中に行います。このワーク ショップは、なるべく多くの人に発表してもらうため、いくつかのセッションを並行して行います。また、各セッションにはその分野の専門の研究者が参加し て、助言を行います。発表内容は、現在進行中の研究についてでも構いません。他大学の学生との意見交換を通して、研究の幅を広げましょう。 1. 応募資格 応募者は、2017年6月3日の時点でJ-SLAの学生会員でなければならない。ただし、共同発表者については、会員でなくてもよい。 2. 募集する研究の領域など 第二言語習得の理論的・実証的研究(学会発足の趣旨を参照してください。)現在進行中の研究でも構いません。 3. 申し込み方法 発表要旨を電子メールで送付する (書式に関しては10を参照してください)。 件名は「J-SLA2017…

  • [:ja][終了しました]NINJAL Open House 12/22[:]

    [:ja] 既にご存知の方もおられるかと思いますが、国立国語研究所では、本年12月22日午後(13:00-15:45)に「国立国語研究所オープンハウス2018」を開催いたします。 これは国立国語研究所創立70周年・共同利用機関法人移管10周年の記念行事の一環として開催するもので、国語研で働いている研究者がどのような問題に興味をもって研究をおこなっているかを研究者以外の方々に広く知っていただくための企画です。 今回は来年度の本格実施にむけての「お試し」的開催となりますが、研究者ひとりひとりの顔がみえる行事をめざして、38件のポスター展示にくわえ、研究図書室の見学ツアーも開催します。 主な聴衆としては、日本語に学問的な興味をもつ大学生・大学院生を想定していますので、先生方が指導されている学生のみなさんに周知していただければ幸いです。   オープンハウス関係の情報は以下に掲載されています。   ■オープンハウス2018   http://www2.ninjal.ac.jp/openhouse2018/   ■創立70周年記念関連行事サイト   http://www2.ninjal.ac.jp/70shunen   ■オープンハウスのポスター   https://www.ninjal.ac.jp/event/public/p-others/ [:]

  • [:ja](終了しました)東北大学大学院国際文化研究科 附属言語脳認知総合科学研究センター&応用言語研究講座 2018年度第1回講演会[:]

    [:ja] 東北大学大学院国際文化研究科 附属言語脳認知総合科学研究センター&応用言語研究講座 2018年度第1回講演会6月12(火)18:00-:19:00川内キャンパスマルチメディア教育研究棟6階 M601講演者  Dr. Lourdes Ortegaタイトル Reenvisioning English Competence 概要Two thirds of the world’s speakers of English are second-languageusers and thus by definition bi/multilingual. All too often, theircompetence is construed as deficient and their multilingual prowess iserased. A wealth of knowledge from language acquisition by childrenand adults and from social theories in education can help us envisiona new kind of multilingual English competence. This kind of competenceis continuous, probabilistic andgradient, and it is not limited by strictly linguistic or purelymonolingual standards. I then explore pedagogical strategies that canhelp educators reaffirm multilinguals’ English competence and success.講師紹介Lourdes Ortega is a Professor of second language acquisition atGeorgetown University. A widely published scholar and…

  • [:ja]【終了しました】Dr. Shigeru Miyagawa 公開講義(3/13.14 )のご案内[:]

    [:ja]Dr. Shigeru Miyagawa  公開講義(参加無料)のご案内です。(メールの重複ご容赦ください) Agreement Beyond Phi 宮川繁博士(MIT / University of Tokyo) 2017年3月13-14日 両日とも13:00~18:30 東京大学駒場キャンパス 18号館1F メディアラボ2(予定) http://www.u-tokyo.ac.jp/campusmap/cam02_01_17_j.html (講義はLecture 1~4からなり、日本語で行われます。講義概要は以下をご覧下さい。) 会場は上記のとおりを予定していますが、参加人数によっては教室変更となる可能性があります。 そのため、お越しになるご予定の方は3月7日までに以下のフォームにてご登録いただけると助かります。 (登録なしでも参加できますが、椅子がないかも知れません) https://docs.google.com/forms/d/e/1FAIpQLSeEuyT_chl3X8bztbCb0kaxFM4PjSubgiCJnGVhh2x7UUznFg/viewform?c=0&w=1 Lecture Series (March 13-14) Shigeru Miyagawa, MIT/UTokyo   These lectures are based on Agreement Beyond Phi, Linguistic Inquiry Monograph, MIT Press (February 2017).   March 13 (13:00-15:30) Lecture 1: Allocutive Agreement and the Root   I will take up agreements that agree with a discourse participant — hearer or speaker. A typical case is found in the Souletin dialect of Basque, in which, along with the regular agreement with the subject and other arguments, there is an agreement that agrees with the addressee, such as feminine, singular, colloquial….

  • [:en]【Done】CFP: ICPLJ (July 8(Sat)-9(Sun)@NINJAL, deadline March 10 (Fri))[:ja]【終了しました】CFP: ICPLJ (July 8(Sat)-9(Sun)@NINJAL, deadline March 10 (Fri))[:]

    CALL FOR PAPERS TENTH INTERNATIONAL CONFERENCE ON PRACTICAL LINGUISTICS OF JAPANESE   JULY 8 (Sat.) & 9 (Sun.), 2017 NATIONAL INSTITUTE FOR JAPANESE LANGUAGE & LINGUISTICS   The International Conference on Practical Linguistics of Japanese (ICPLJ) aims to stimulate research in Japanese linguistics. The scope of this endeavor, as a matter of fact, covers a wide area, including linguistics – phonology, morphology, syntax, semantics, lexicon, pragmatics, discourse analysis, applied linguistics, corpus linguistics, psycholinguistics, sociolinguistics, second language acquisition, bilingualism, Japanese language education/instruction, Computer Assisted Language Learning (CALL) technology, and language production, etc. ICPLJ invites proposals for the tenth international conference, ICPLJ10, which will be held at the National Institute for Japanese Language & Linguistics in Tachikawa, Tokyo, Japan.   AIMS & SCOPE The theme of ICPLJ10 is “Improving Japanese-Language Teaching through Studies in  Analyzing the Communication of Japanese Language Learners or Applied Linguistics.” The theme of the conference will also be inclusive of a broad spectrum of papers and panels. It will bring together researchers on the cutting edge of Japanese linguistics and to offer a forum in which their research results can be presented in a form that is useful to those desiring practical applications in the fields of teaching Japanese as a second/foreign language.   PUBLICATION   “Selected papers” presented at the conference will be published in a special issue of the Journal  of Japanese Linguistics http://japancenter.sfsu.edu/pages/journal-japanese-linguistics. The publication of the papers enables the ideas from the conference to reach an even larger audience around the world, further benefiting countless researchers, teachers, and their students. Please note that some conditions may apply for the publication of the presented papers (e.g., the paper length, language).   CONFERENCE LANGUAGE   Each author is only allowed to submit one proposal as…

  • [:ja][終了しました]ことばの科学会オープンフォーラム2017[:]

    [:ja]ことばの科学会オープンフォーラム2017 ■テーマ「ことばの認知研究と外国語教育への応用」 ■2017年10月15日 (日) 12:50-17:30 ■関西学院大学大阪梅田キャンパス10階1004教室 ■内容 【I.音読ワークショップ】 『「英語授業自己診断テスト・音読指導編」で授業改善 ―音読の主な手法と実施上の留意点』 ・講師:鈴木寿一 京都教育大学名誉教授/京都外国語大学大学院非常勤講師 (無料、参加は会員のみ、事前申し込み必要、申し込み方 法は後日会員メーリングリストでお知らせします) 【II.シンポジウム】 ・森下美和・神戸学院大学 「統語的プライミングの促進と英語学習」 ・鳴海智之・兵庫教育大学 「タスクが日本人英語学習者の文理解時における 言語情報処理に与える影響」 ・杉浦香織・立命館大学 「第二言語音声の暗示的学習―可能性と限界を探る」 ・三木浩平・関西学院大学 「日本人英語学習者の語彙アクセス: 同綴異義語を用いた心理言語学的実験より」 (シンポジウム参加費:会員無料、非会員2000円) ■詳細情報: http://www.jsssmjk.org/ ■問合せ:事務局 野村潤 <kotobanokagaku@gmail.com>[:]