TOEIC 第140回 2008年7月27日(日) Part2

>>947
thx
ここも独自のノウハウなのね。
高得点者のレスを見る限り、試験難易度の差が結構あっても妥当なスコアが出てる気がする。

あと、基本は偏差値方式で〜とか言っていたのも君だろ？
勝手な推測と決め付けばかりだよね。

Aｌｌ aboutに色々点数の事が書いてあるけど、
問いごとや答え方によって配点が変わるとは書いてないね。

TOEICには採点されない「悪問」があった！
http://allabout.co.jp/study/toeic/closeup/CU20061005A/
TOEICに点数が取りやすい月があるって本当?
http://allabout.co.jp/study/toeic/closeup/CU20051121A/index.htm

こんなのまであったｗ
TOEICで問題用紙への書き込みはやめよう！
http://allabout.co.jp/study/toeic/closeup/CU20060601A/

項目応答理論使ってるなら確かに
鉛筆ころがし君と
まじめに２５％しか正解できない君の
区別は付きそうだ。

まだ続けるのかい？

>>951
では、なんでランダム解答を排してるのだい？
>>940ではないが、あまりにも字面だけを解釈してるよ。

>>928での、そもそもランダム解答での２５０点を避ける理由について話で、それに対する公式ソースを出しただけなんだが。
それには、しっかり避ける理由が書いてあったと思うのだが。

それに対して、>>930のような「鉛筆転がしたランダム回答ではない」だの、「それはランダムでは６分の１になるだけ」だの言ってきたのでしょう。

そもそも、俺が証明すべきは、「ETSはランダムに解答したかどうかを判断して、それに対して低いスコアにする」
だけなんだが。

>>955
結局、試験間難易度調整も鉛筆ころがし排斥も、項目応答理論のみで出来るのかな？

>>933でも>>939でも読めば？ETS自身が正答数をスコアにコンバートするって書いてあるじゃん。

どっちでも良いが、ヒロ前田と神崎さんが>>929読んでどう答えるのか知りたいｗ

>>958

あの、その説明でも単純に正答数からスコアに換算するんじゃなくて、試験間難易度調整のため、
統計処理するって書いてある。

それプラス、公式Q&Aでいう鉛筆転がし君排斥処理だろって。

このスレ終わりそうだし、神崎さんのスレで聞いといたよ。

>>961
thx!
有名なFAQだから、彼が知らないわけはないと思うけど、答えが楽しみ。

「基本は偏差値方式」(猛苦笑)

>>960
各sectionごとに同じスケールでって書いてあるし、どの回でも同じスコアが得られるように
するためにする手順って書いてあるじゃん。
同一回で回答の内容によって得点調整するとかは一切書いていないよ。

>>951
ランダム君と英語苦手君の２５％が同じ得点なわけないだろ！
両者が区別できる時点で、苦手君も６分の１に貶める必要性が全くない。

苦手君は、他の受験者と同様に統計処理されるだけ。そして、難易度によってもちろん前後するが、２５０点近辺になる。

>>964
もうループになるだろうが、公式FAQにランダム解答者は点数を落とすと書いてある。
あとは、難易度調整の処理の記述とランダム解答者対策処理の記述をしっかりわけて考えろとしか言えない。

前者だけの説明だと、ランダム排斥処理（４分の１から６分の１へ減点）ができないのは自明。

じゃあ、総合５０とか取るヤツって一体・・・。
適当に書いた方がよほどいいってことか？

>>955の言うとおり、項目応答理論で説明できるなら、おなじ統計処理で鉛筆転がし君と同得点率者の区別、
それと試験間調整は同時にできると思う。ETSの説明では、試験間調整の事しか触れてないから、”まぐれ解答で２５０点とれますか？”
という質問をしたんだと思う。

その質問に対して”そちらも得点調整していますよ”という回答なのでは？

項目応答理論

項目応答理論は、評価項目群への応答に基づいて、
被験者の特性(認識能力、物理的能力、技術、知識、態度、人格特徴等)や、
評価項目の難易度・識別力を測定するための試験理論である。
この理論の主な特徴は、個人の能力値、項目の難易度といったパラメータを、
評価項目への正誤のような離散的な結果から確率論的に求めようとする点である。

より古典的なテスト理論（素点方式、偏差値方式）と比べると、
試験者が評価項目の信頼性の改善に役に立つ情報を提供し得る、
標本(受験者)依存性・テスト依存性にとらわれずに
不変的に受験者の能力値とテスト項目の難易度を求められる、という利点がある。



「項目応答理論を使用する主な試験」

情報処理技術者試験（多肢選択式問題で使用）
TOEIC
TOEFL
BJTビジネス日本語能力テスト

で、鉛筆君と初学者君の区別は付くということでいいのね？

最後まで終わらなかったり、わからない問題が出たときは勘で答えるより答えないほうが点数が高くなるって事か

最後の10問とかを全部Bにすると良くないとか言ってたのはそれか。

そんな事どうだっていいじゃん。
ちゃんとお勉強して沢山正解すること。

ランダムペナルティか

>>973
たくさん正解しても、回答の仕方によっちゃ減点もあり得るよ？

>>972
確率論的な点数は期待できなくても、ちょっとはくれるんだろ？
んじゃあ、残りできない問題があっても塗りつぶしたほうがちょっとは点数もらえるんじゃね？
真面目君残り10問のうち4問当たって25点
鉛筆君残り10問のうち4問当たって15点

やっぱ塗りつぶした方がいいんじゃね？

どうせ全部解き終わるからどっちでもいいや

澄子の緑本はそんなにいい？
「正解が見える」とどっちがいい？

なんで実力以外でスコアを上げようと考えるの？

「なんで実力以外でスコアを上げようと考えるの？」(猛苦笑)

>>979
また一昨日の釣り野郎か？

実力なんかあっても意味ないし

三流企業に勤めてれば、英語の実力なんかあっても意味ないよな。

お邪魔します。TOEIC Blitz Blogの神崎です。
考えて解いたか、鉛筆を転がして解いてかというのを判別は採点する側には不可能だと思います。
どうやって見分けるのでしょうか。

また、実際のテストでは「勘」と「実力」の中間もあります。
わからない問題があった場合、「なんとなくこれがよさそう」と感じたものを選ぶことが多いと思いますが、
その確信度はばらばらです。
７５％の確信をもって選んだ回答（２５％は勘）と２５％の確信をもって選んだもの（７５％は勘）の差はマークシート上には現れません。

ある受験者は1番の問題、ちゃんと聞き取れてＡを選んだ。
ある受験者は選択肢4つとも聞き逃してしまって、「いいや、Ａにしちゃえ」としてＡを選んだ。
ある受験者はＡは聞き逃したが、ＢＣＤが違うのでＡを選んだ。
マークシート読み取り機ではすべて同じ扱いです。

ある人は何も考えずに全問Ａを塗って提出した。
ある人はちゃんと考えてやったらたまたま全問Ａになった。
そういうことも可能性としてはあります。
この二人のスコアは同じです。
「田中さんは考えないで全部Ａを塗った。佐藤さんは考えた結果がたまたま全問Ａだった。
だから佐藤さんに高い点を上げよう。」なんてことはできませんよね。

すべての解答欄をランダムに塗った場合のスコアが250点ではなく、
それより低く出るのは偏差値（母集団中の位置）に関係しているからです。
たとえば平均点から遠い部分（正解数が少ないまたは多い）では1問の差による偏差値の変動幅が小さいのに対して
平均点に近い部分では1問の差で偏差値の動く幅が大きくなります。

>>947
リンク先見ました。内容に誤りがあります。
TOEICは典型的なNorm-Referenced Testで、スコアは母集団中の位置によって決まります。
スコア表を見ていいただくと、Percentile rankが記載されていますよね。
これは母集団中の位置を表すものです。
ただし、「母集団」が「その回のＴＯＥＩＣの受験者」ではなく、過去のテストの受験者になっています。
たとえば2008年6月の公開テストの場合、母集団は、2005年1月から2007年12月に世界中で実施したTOEIC公開テストの全受験者です。
よって、同リンク先の説明にあるとおり、ある回のテストで全員が全問正解した場合、全員990点が出ます。

つまり、1/4程度の正解数では150-200点程度の偏差値ということですか？

>>983
それを見分けるのが項目応答理論でしょ。

あてずっぽの正解を排除するために作られたんだから。

結局最後の１０問テキトーに選んでマークするのと、そこは何もマークしないで出すのでは
前者の方が点数高いよね？もちろん

>>986
項目応答理論にどんな夢見てるのか知らないけど、そんなすごい力は持ってないよ。
単に複数のテストで難易度に差があっても、同じ実力であれば同じ点数が出るように調整する為の理論でしかない。

神崎さん、ご回答ありがとうございます。
神崎さん的には、やはり、ETSはランダム回答と真面目回答と見分けるようなことはしていないというわけですね。

ランダム回答は点が低い、と主張している人の根拠である>>929についてはどうですか？
一見その主張が正しいようにも見えるよう書いてあります。

目応答理論は1回の受験でも、なるべく正確な絶対評価をできるようにするための理論。
ランダム回答とか真面目回答とかを見分ける力なんてありません。

>>969読んでもパッと来ない人は、これがわかりやすい。
http://www.nurs.or.jp/~lionfan/irt.pdf

てか見分けることなんてできないから。

TOEIC受験料高杉。
TOEFLはもっと高杉。

受験者が適当に回答したか
真面目に回答したかを見分ける試験？

じゃあ、受験者は真面目に考えてＡを選んだ。
でもマークミスをしてＢを塗ってしまった。
正解はマークミスしたＢだった。
これはランダム回答として処理されるの？

1000

>>993こういう屁理屈言ってる間は点数期待できなそ〜-.-

お前らこんな得点の理論話してる暇があったら
英語の勉強でもしろよ

>>929の引用には一言も
ランダム回答と真面目回答を見分けてるとは書いてないし。

>>995
900後半ですが何か？ｗ

てか、>>966はさんざん偉そうに話しているけど>>929には
> 前者だけの説明だと、ランダム排斥処理（４分の１から６分の１へ減点）ができないのは自明。

何度も言うが、こんな事どこにも書いてない。
ランダム回答（chance score）に対応する為に、正答数が4分の1になっても
スコアは6分の1ににも満たない、とあるだけで、ランダム回答と非ランダム回答を
分けて考えるとか、配点を別にするなんて全く書いてないのに、勝手に想像を膨らませているだけ。

真面目回答ならスコアは4分の1で出す、とも、Chance scoreと分けるとも
書いてない。

>>993
見分けられると言ってるのは一部の馬鹿だから
鵜呑みにしないほうがいいよ。

1000げっと

このスレッドは１０００を超えました。
もう書けないので、新しいスレッドを立ててくださいです。。。