In Testing, One Size May Not Fit All
By TAMAR LEWIN
Published: March 18, 2002
Kyle Stofle, a 10th grader at Pittsburg High School who has dyslexia and virtually unreadable handwriting, has been in special education since second grade. But Kyle, 15, has always expected to get his diploma along with the rest of the class of 2004.
So he and his mother became worried when they learned that, starting with his class, every California student would have to pass a statewide language and math test to graduate.
''When the exit exam first came up, last year, I went to a meeting and asked what would happen to kids with learning disabilities,'' said Kyle's mother, Karen Bruno. ''They kept saying that they didn't know, that it would end up in court.''
So it has. An Oakland-based advocacy group challenged the graduation exam under federal disability laws.
On Feb. 21, two weeks before Kyle and other 10th graders were to take the test, Judge Charles R. Breyer of Federal District Court ruled that students with learning disabilities had the right to special treatment, through different assessment methods or accommodations like the use of a calculator or the chance to have test questions read aloud.
It was the first time a state had been ordered to adjust the conditions for its graduation exams for students with learning disabilities, most of whom are dyslexics with reading problems.
The question of how far to accommodate students with learning disabilities on college entrance tests like the SAT has become a familiar one, as requests for special accommodations proliferate, especially from affluent white families.
But with more than a dozen states putting graduation exams into effect in the next three years -- and others requiring new tests for promotion to the next grade -- the debate has become broader and more urgent, with some education experts predicting that new legal challenges are inevitable.
''As these laws are phased in and kids really start to be denied diplomas, it'll go to lots of courts, and lots of legislatures,'' Robert Schaeffer of FairTest, a group in Cambridge, Mass., that is critical of standardized testing. ''This is a great unexplored weakness of the whole high-stakes testing thing.''
Some education experts say they worry, however, that as more students seek special accommodations, the whole notion of standardized testing may break down. What is a diploma worth, they add, if students who cannot read, write or do arithmetic are allowed to pass academic tests?
With more than 12 percent of the nation's schoolchildren now identified as disabled -- some with physical problems, but most with learning disabilities -- concern is growing that some students say they have learning disabilities just to win easier testing conditions.
In recent years, half the states have enacted laws requiring that high school students pass standardized exams to graduate. High failure rates on the tests have prompted some states to delay putting them into effect or lower the score for passing.
These so-called exit exams create a particularly tough hurdle for students with learning disabilities. When California gave its first exit exam last year, on a voluntary basis, 9 of 10 students with learning disabilities failed.
Kyle failed the language and math sections, and because his handwriting was so bad, his essay questions were never scored.
''A lot of the questions made no sense to me,'' Kyle said. ''Some of the math was on things I've never learned.''
Kyle said he thinks he did better this year because his teacher, apparently on her own decision, read the questions to him. To earn his diploma, Kyle must pass the test by his senior year.
Many states, including New York, already allow a broad range of options for disabled students. Instead of taking the regular test, they can give oral presentations or present portfolios of their work.
But the clash between disability rights and educational standards is profound. States devised graduation exams to measure all students by the same yardstick. In contrast, the disability laws were designed to ensure that disabled children receive educations tailored to their needs. Moreover, there is little scientific data on precisely which accommodations help which learning disabilities.
''The equities here are not clear,'' said Lawrence Feinberg, assistant director of the group that administers the National Assessment of Educational Progress, the federal test that rates school performance.
''Standardized tests came in because of variations in testing and grading and the notion that it's only fair if you test everyone the same way,'' he said. ''It turns that whole idea on its head, if you treat some people differently because it's fairer to them.''
Many state education officials say that including disabled students in statewide testing is a good thing.
''A student who's tested is a student who's taught,'' said Kit Viator, an assessment official in the Massachusetts education department.
Advocacy groups for the disabled do not disagree. But they say that making a learning disabled student take a standardized test without accommodations is as unfair as requiring a physically disabled child to run a race without a wheelchair.
''Standardized tests test students' disabilities, not their abilities,'' said Sid Wolinsky, a lawyer with Disability Rights Advocates, the Oakland group that challenged the California law. ''No matter how well they master the content that's being tested, they will fail the exam if they have real problems with reading or handwriting.''
As enacted, California's graduation exam policy prohibited calculators or test readers on the grounds that reading and calculating were so fundamental that students should not graduate without demonstrating those skills.
In December, that policy was amended to let disabled students who used such accommodations receive a diploma if their district won a waiver from the state, a process the judge said was still too restrictive.
While the judge's order allowed students to use accommodations on the latest exam, it left open, until a later hearing, the question of whether scores earned with such accommodations will be treated the same as those earned under regular conditions. So students who used accommodations do not yet know if a passing score will earn them a diploma.
''The dilemma we find ourselves in is this fairness issue, where to draw the line with students who have some disability that makes it impossible to pass this test,'' said Phil Spears, director of California Department of Education's Standards and Assessments Division.
''If you say that a student who doesn't have the ability to read or compute can still pass, that sends a message that isn't acceptable to the world out there,'' he said. ''When special ed kids get out of school, they don't go to special ed town, they go out and compete with all the rest of us.''
Mr. Spears added that California and other states had not yet resolved a basic question. ''There's no clear understanding of what we're supposed to be doing,'' he said. ''Are we creating tests of different content, at a lower level of rigor, for kids with disabilities? Or are we seeking other ways to assess their mastery of the same skills? I don't know the answer.''
For now, California's learning disabled 10th graders remain confused about how to handle the test. In Fair Oaks, at Del Campo High School, Katie Culpepper, who has a neuroprocessing disorder, skipped it altogether. But at Petaluma's Casa Grande High School, another learning disabled student, Sabrina Shired, took it with no accommodations.
''It's been kind of tense and awful,'' Sabrina said. ''But I wanted to try the test under regular conditions, since it would be even worse if I took it with accommodations and passed, and then later they said that invalidated the test and I still couldn't get my diploma. If I pass this way, I'll feel great.''
Many parents of disabled 10th graders hope the state will delay the exit-exam requirement -- but are quietly making backup plans.
''If she hasn't passed by senior year, we'll think about a transfer to a Catholic school, where the exam isn't required,'' said Sabrina's mother, Eileen Shired. ''Somehow, she's going to get a diploma.''
Hiển thị các bài đăng có nhãn the testing cycle. Hiển thị tất cả bài đăng
Hiển thị các bài đăng có nhãn the testing cycle. Hiển thị tất cả bài đăng
Thứ Sáu, 8 tháng 8, 2008
Thứ Bảy, 28 tháng 6, 2008
"If we keep doing things like this, the 'physics test incident' will happen again!"
Nguồn: Tuổi Trẻ Online
Thứ Ba, 24/06/2008, 20:03 (GMT+7)
http://www.tuoitre.com.vn/Tianyon/Index.aspx?ArticleID=265219&ChannelID=13
GS Lâm Quang Thiệp:
"Nếu không thay đổi cách làm, sự cố “đề vật lý” sẽ còn lặp lại!"
GS Lâm Quang Thiệp
TTO - Sai sót trong đáp án đề thi trắc nghiệm (TN) môn vật lý của kỳ thi tốt nghiệp THPT tuy đã được Bộ GD-ĐT giải quyết nhưng vẫn để lại dư âm là những ý kiến tranh luận chưa có hồi kết về “đáp án đúng” cùng những băn khoăn, lo lắng cho các đề thi TN trong kỳ thi tuyển sinh ĐH, CĐ sắp tới.
>> Đáp án đề thi vật lý là phù hợp
>> Bộ GD-ĐT chính thức điều chỉnh đáp án môn vật lý
>> Về đáp án đề thi vật lý: Nếu sai sẽ điều chỉnh, không ảnh hưởng đến tiến độ chấm thi
Với tư cách là một chuyên gia đã có nhiều năm nghiên cứu về phương thức thi TN, GS LÂM QUANG THIỆP - nguyên Vụ trưởng Vụ Đại học - đã có cuộc trao đổi với Tuổi Trẻ Online xung quanh chủ đề làm thế nào để nâng cao chất lượng, đảm bảo độ chính xác của các đề thi TN và khi xảy ra sự cố sẽ ảnh hưởng như thế nào đến kết quả thi của TS…
* Sau khi Bộ GD-ĐT công bố hướng dẫn chấm đối với đề thi môn vật lý trong kỳ thi tốt nghiệp THPT, đáp án của một câu TN đã gây nhiều tranh luận. Theo GS đó là một việc bình thường hay bất thường trong thi TN? Có thể xem một đề thi TN phải chỉnh sửa đáp án, khó xác định đáp án nào thật sự phù hợp như vậy là không đạt hay không?
- Tôi có theo dõi tranh luận về đề thi vật lý trên báo chí, nhiều giáo viên chuyên dạy môn vật lý phát hiện ra câu hỏi không phải chỉ có 1 mà là 2, 3 phương án đúng. Cuộc tranh luận rất lý thú và có nhiều ý kiến hợp lý. Điều này là bình thường và dễ xảy ra đối với một câu hỏi TN nói chung, vì người viết và người đọc duyệt một câu hỏi dù có chăm chú đến đâu cũng khó nhìn được toàn diện nên dễ sơ suất, chỉ có những người làm bài với các trình độ khác nhau, suy nghĩ về câu hỏi theo nhiều cách khác nhau mới phát hiện được mọi khía cạnh của nó.
Việc tranh luận về các câu hỏi TN theo kiểu này nếu diễn ra trong phạm vi một lớp học thì rất tốt, vì nó giúp học sinh hiểu kiến thức sâu hơn. Tuy nhiên, đối với một đề thi quốc gia thì sự có mặt những câu hỏi như vậy là bất thường. Và tất nhiên đề thi có các câu hỏi như vậy phải xem là không đạt, chính vì vậy nên Cục Khảo thí và Kiểm định chất lượng giáo dục mới phải tốn công sức để đưa ra các phương án xử lý và điều chỉnh cách chấm. Một đề thi quốc gia cho hàng trăm nghìn thí sinh làm phải đảm bảo tính tiêu chuẩn hóa cao nhằm đạt sự công bằng cao khi chấm thi, và các câu hỏi có vấn đề như vậy lẽ ra phải được loại trừ trước, không đưa vào đề chính thức.
* Vậy một đề thi như vậy có thể ảnh hưởng đến kết quả thi như thế nào, thưa GS?
- Đề thi TN là một cái thước đo, dùng để đo năng lực của thí sinh. Phép đo nào cũng có sai số, nhưng đối với các phép đo quan trọng như kỳ thi tốt nghiệp THPT hoặc kỳ thi tuyển sinh ĐH thì phải cố gắng tạo ra thước đo càng chính xác càng tốt, vì kết quả phép đo đó quyết định số phận của nhiều người. Đề thi chứa các câu hỏi có vấn đề như vậy là một thước đo không chính xác, hiển nhiên kết quả đo bị ảnh hưởng xấu.
Đối với đề thi vật lý lần này tôi chưa thể nói nó ảnh hưởng như thế nào đến mức chính xác của kết quả đo, vì riêng câu hỏi được tranh cãi đã lộ rõ nhược điểm, nhiều người phát hiện được là lời giải không đơn trị, còn các câu hỏi khác của đề chưa biết chất lượng thế nào. Chỉ sau khi phân tích thống kê từng câu hỏi bằng các phần mềm xây dựng trên khoa học TN thì mới có thể đánh giá chính xác chất lượng của từng câu hỏi và của đề thi.
Tôi đã phân tích tất cả các đề thi tuyển sinh ĐH năm ngoái, một số đề có nhiều câu hỏi chất lượng kém, tuy không thấy có tranh luận trên báo chí vì không thật lộ liễu, chẳng hạn đề tiếng Anh. Tôi rất mong có dịp trao đổi với Cục Khảo thí và Kiểm định chất lượng giáo dục về điều đó. Có thể ví một đề thi có nhiều câu hỏi chất lượng kém như một cái thước đo bằng dây cao su, kết quả đo sẽ rất kém chính xác. Tôi hi vọng đề thi vật lý vừa rồi không đến nỗi như vậy.
Để đề TN đạt chất lượng cao các nước tiên tiến đều tuân theo qui trình xây dựng đề TN nghiêm túc. Việt Nam ta hoàn toàn có khả năng xây dựng các đề TN tiêu chuẩn hóa có chất lượng cao, vì có nhiều chuyên gia hiểu biết về qui trình này và cũng có nơi đã xây dựng được phần mềm phân tích theo lý thuyết TN hiện đại.
Sở dĩ đề thi vật lý còn có câu hỏi kém chất lượng một cách lộ liễu như thế có lẽ vì Cục Khảo thí không tuân thủ theo đúng qui trình xây dựng các đề thi quốc gia theo công nghệ TN hiện đại. Trong đó, khâu quan trọng nhất là đảm bảo sao cho mọi câu hỏi trước khi đưa vào đề TN chính thức phải được thử nghiệm trên một số lượng nhất định đối tượng tương tự như thí sinh, trong trường hợp này là học sinh lớp 12.
* Theo GS, làm thế nào để trong đề thi không còn các câu hỏi kém chất lượng? Một trong những nguyên tắc của Bộ GD-ĐT đối với đề thi là không ra đề vào những phần còn đang gây tranh cãi, quá khó hoặc đánh đố TS. Đề thi TN có thể tuân thủ được những qui định này không?
- Trước đây khi góp ý cho bản trưng cầu ý kiến của Cục Khảo thí và Kiểm định chất lượng giáo dục về việc có nên sử dụng chủ yếu phương pháp TN hay không cho kỳ thi quốc gia, tôi đã trả lời là tôi không ủng hộ TN nếu làm đề TN không đúng qui trình, và ủng hộ TN nếu làm đúng. Chính công nghệ TN hiện nay cho phép đưa ra một qui trình xây dựng các đề thi TN có chất lượng cao, loại bỏ hoàn toàn hoặc phần lớn các câu hỏi kém chất lượng.
Một ưu điểm quan trọng của phương pháp TN là có thể sử dụng một qui trình dài ngày và có nhiều người tham gia để viết, thử nghiệm, chỉnh sửa, lựa chọn từng câu hỏi TN tốt nhằm tạo nên một đề TN chất lượng cao mà vẫn giữ được bí mật của đề thi. Kết quả thử nghiệm được phân tích bằng phần mềm TN hiện đại sẽ cho biết chất lượng của từng câu hỏi TN để chỉnh sửa hoặc loại bỏ hẳn không đưa vào đề thi chính thức.
* Nhưng thưa GS, đề thi mà chúng ta nói đến trong trường hợp cụ thể này là đề của những kỳ thi cực kỳ quan trọng như tốt nghiệp THPT, tuyển sinh ĐH, CĐ, được coi như tài liệu bí mật quốc gia. Có thể thử nghiệm trước mà vẫn giữ được bí mật đề thi quốc gia không?
- Cái hay của phương pháp TN chính là ở chỗ từng câu hỏi của đề TN đều được thử nghiệm trước khi đưa vào đề chính thức, nhưng đề thi vẫn giữ được bí mật. Nếu làm đề TN cho các kỳ thi đại trà theo đúng qui trình cần thiết thì vấn đề lộ đề hầu như không bao giờ xãy ra.
Thật vậy, đối với phương pháp tự luận muốn giữ được bí mật đề thi phải hạn chế tối đa số người tham gia làm đề, cách ly họ khi làm đề và thực hiện trong một thời gian rất ngắn, điều đó dễ dẫn đến sơ suất của đề thi. Ngược lại, phương pháp TN tuy cho phép triển khai xây dựng đề TN theo một quy trình dài ngày và thu hút sự đóng góp của nhiều người nhưng đề thi vẫn không hề bị lộ, bởi vì mỗi người chỉ liên quan đến một số rất ít câu hỏi TN, và họ không được lưu giữ bất kỳ câu hỏi nào.
Chẳng hạn, một số lớp 12 được chọn làm đại diện để thử nghiệm các đề kiểm tra nhỏ 10, 15 câu TN trong một kỳ kiểm tra của lớp học, học sinh làm bài phải tuân theo một nội qui nghiêm ngặt cấm sao chép đề, đề kiểm tra làm xong được thu lại toàn bộ. Tổ chức thử nghiệm bằng nhiều đề kiểm tra nhỏ như vậy ở nhiều trường thì toàn bộ các câu hỏi trong ngân hàng câu hỏi TN sẽ được thử nghiệm. Qui trình thử nghiệm như vậy đảm bảo không làm lộ các câu TN.
Giả sử một học sinh nào đó tham gia thử nghiệm có nhớ được một vài câu hỏi thì xác xuất để các câu đó rơi vào đề thi chính thức cũng rất bé. Vì đến giờ phút cuối cùng trước kỳ thi một đề TN năm bảy chục câu hỏi mới được thiết kế tự động và in ra từ một ngân hàng gồm hàng nghìn câu hỏi. Cũng chính nhờ qui trình như vậy mà ngay trong khi ở nước ta chưa có nhiều chuyên gia viết câu TN giỏi thì vẫn có thể chọn lựa được các câu có chất lượng cao để làm một đề TN tốt cho kỳ thi chính thức.
Tôi rất mong những người trực tiếp quản lý việc làm đề TN cho các kỳ thi quốc gia sắp tới thực hiện việc làm đề TN đúng qui trình cần thiết. Bởi vì nếu không làm đúng như vậy thì sẽ không tận dụng một ưu điểm lớn của phương pháp TN, và chắc chắn đề TN chất lượng sẽ kém, và những trường hợp tương tự như đề vật lý vừa qua sẽ còn lặp lại!
THANH HÀ thực hiện
Thứ Ba, 24/06/2008, 20:03 (GMT+7)
http://www.tuoitre.com.vn/Tianyon/Index.aspx?ArticleID=265219&ChannelID=13
GS Lâm Quang Thiệp:
"Nếu không thay đổi cách làm, sự cố “đề vật lý” sẽ còn lặp lại!"
GS Lâm Quang Thiệp
TTO - Sai sót trong đáp án đề thi trắc nghiệm (TN) môn vật lý của kỳ thi tốt nghiệp THPT tuy đã được Bộ GD-ĐT giải quyết nhưng vẫn để lại dư âm là những ý kiến tranh luận chưa có hồi kết về “đáp án đúng” cùng những băn khoăn, lo lắng cho các đề thi TN trong kỳ thi tuyển sinh ĐH, CĐ sắp tới.
>> Đáp án đề thi vật lý là phù hợp
>> Bộ GD-ĐT chính thức điều chỉnh đáp án môn vật lý
>> Về đáp án đề thi vật lý: Nếu sai sẽ điều chỉnh, không ảnh hưởng đến tiến độ chấm thi
Với tư cách là một chuyên gia đã có nhiều năm nghiên cứu về phương thức thi TN, GS LÂM QUANG THIỆP - nguyên Vụ trưởng Vụ Đại học - đã có cuộc trao đổi với Tuổi Trẻ Online xung quanh chủ đề làm thế nào để nâng cao chất lượng, đảm bảo độ chính xác của các đề thi TN và khi xảy ra sự cố sẽ ảnh hưởng như thế nào đến kết quả thi của TS…
* Sau khi Bộ GD-ĐT công bố hướng dẫn chấm đối với đề thi môn vật lý trong kỳ thi tốt nghiệp THPT, đáp án của một câu TN đã gây nhiều tranh luận. Theo GS đó là một việc bình thường hay bất thường trong thi TN? Có thể xem một đề thi TN phải chỉnh sửa đáp án, khó xác định đáp án nào thật sự phù hợp như vậy là không đạt hay không?
- Tôi có theo dõi tranh luận về đề thi vật lý trên báo chí, nhiều giáo viên chuyên dạy môn vật lý phát hiện ra câu hỏi không phải chỉ có 1 mà là 2, 3 phương án đúng. Cuộc tranh luận rất lý thú và có nhiều ý kiến hợp lý. Điều này là bình thường và dễ xảy ra đối với một câu hỏi TN nói chung, vì người viết và người đọc duyệt một câu hỏi dù có chăm chú đến đâu cũng khó nhìn được toàn diện nên dễ sơ suất, chỉ có những người làm bài với các trình độ khác nhau, suy nghĩ về câu hỏi theo nhiều cách khác nhau mới phát hiện được mọi khía cạnh của nó.
Việc tranh luận về các câu hỏi TN theo kiểu này nếu diễn ra trong phạm vi một lớp học thì rất tốt, vì nó giúp học sinh hiểu kiến thức sâu hơn. Tuy nhiên, đối với một đề thi quốc gia thì sự có mặt những câu hỏi như vậy là bất thường. Và tất nhiên đề thi có các câu hỏi như vậy phải xem là không đạt, chính vì vậy nên Cục Khảo thí và Kiểm định chất lượng giáo dục mới phải tốn công sức để đưa ra các phương án xử lý và điều chỉnh cách chấm. Một đề thi quốc gia cho hàng trăm nghìn thí sinh làm phải đảm bảo tính tiêu chuẩn hóa cao nhằm đạt sự công bằng cao khi chấm thi, và các câu hỏi có vấn đề như vậy lẽ ra phải được loại trừ trước, không đưa vào đề chính thức.
* Vậy một đề thi như vậy có thể ảnh hưởng đến kết quả thi như thế nào, thưa GS?
- Đề thi TN là một cái thước đo, dùng để đo năng lực của thí sinh. Phép đo nào cũng có sai số, nhưng đối với các phép đo quan trọng như kỳ thi tốt nghiệp THPT hoặc kỳ thi tuyển sinh ĐH thì phải cố gắng tạo ra thước đo càng chính xác càng tốt, vì kết quả phép đo đó quyết định số phận của nhiều người. Đề thi chứa các câu hỏi có vấn đề như vậy là một thước đo không chính xác, hiển nhiên kết quả đo bị ảnh hưởng xấu.
Đối với đề thi vật lý lần này tôi chưa thể nói nó ảnh hưởng như thế nào đến mức chính xác của kết quả đo, vì riêng câu hỏi được tranh cãi đã lộ rõ nhược điểm, nhiều người phát hiện được là lời giải không đơn trị, còn các câu hỏi khác của đề chưa biết chất lượng thế nào. Chỉ sau khi phân tích thống kê từng câu hỏi bằng các phần mềm xây dựng trên khoa học TN thì mới có thể đánh giá chính xác chất lượng của từng câu hỏi và của đề thi.
Tôi đã phân tích tất cả các đề thi tuyển sinh ĐH năm ngoái, một số đề có nhiều câu hỏi chất lượng kém, tuy không thấy có tranh luận trên báo chí vì không thật lộ liễu, chẳng hạn đề tiếng Anh. Tôi rất mong có dịp trao đổi với Cục Khảo thí và Kiểm định chất lượng giáo dục về điều đó. Có thể ví một đề thi có nhiều câu hỏi chất lượng kém như một cái thước đo bằng dây cao su, kết quả đo sẽ rất kém chính xác. Tôi hi vọng đề thi vật lý vừa rồi không đến nỗi như vậy.
Để đề TN đạt chất lượng cao các nước tiên tiến đều tuân theo qui trình xây dựng đề TN nghiêm túc. Việt Nam ta hoàn toàn có khả năng xây dựng các đề TN tiêu chuẩn hóa có chất lượng cao, vì có nhiều chuyên gia hiểu biết về qui trình này và cũng có nơi đã xây dựng được phần mềm phân tích theo lý thuyết TN hiện đại.
Sở dĩ đề thi vật lý còn có câu hỏi kém chất lượng một cách lộ liễu như thế có lẽ vì Cục Khảo thí không tuân thủ theo đúng qui trình xây dựng các đề thi quốc gia theo công nghệ TN hiện đại. Trong đó, khâu quan trọng nhất là đảm bảo sao cho mọi câu hỏi trước khi đưa vào đề TN chính thức phải được thử nghiệm trên một số lượng nhất định đối tượng tương tự như thí sinh, trong trường hợp này là học sinh lớp 12.
* Theo GS, làm thế nào để trong đề thi không còn các câu hỏi kém chất lượng? Một trong những nguyên tắc của Bộ GD-ĐT đối với đề thi là không ra đề vào những phần còn đang gây tranh cãi, quá khó hoặc đánh đố TS. Đề thi TN có thể tuân thủ được những qui định này không?
- Trước đây khi góp ý cho bản trưng cầu ý kiến của Cục Khảo thí và Kiểm định chất lượng giáo dục về việc có nên sử dụng chủ yếu phương pháp TN hay không cho kỳ thi quốc gia, tôi đã trả lời là tôi không ủng hộ TN nếu làm đề TN không đúng qui trình, và ủng hộ TN nếu làm đúng. Chính công nghệ TN hiện nay cho phép đưa ra một qui trình xây dựng các đề thi TN có chất lượng cao, loại bỏ hoàn toàn hoặc phần lớn các câu hỏi kém chất lượng.
Một ưu điểm quan trọng của phương pháp TN là có thể sử dụng một qui trình dài ngày và có nhiều người tham gia để viết, thử nghiệm, chỉnh sửa, lựa chọn từng câu hỏi TN tốt nhằm tạo nên một đề TN chất lượng cao mà vẫn giữ được bí mật của đề thi. Kết quả thử nghiệm được phân tích bằng phần mềm TN hiện đại sẽ cho biết chất lượng của từng câu hỏi TN để chỉnh sửa hoặc loại bỏ hẳn không đưa vào đề thi chính thức.
* Nhưng thưa GS, đề thi mà chúng ta nói đến trong trường hợp cụ thể này là đề của những kỳ thi cực kỳ quan trọng như tốt nghiệp THPT, tuyển sinh ĐH, CĐ, được coi như tài liệu bí mật quốc gia. Có thể thử nghiệm trước mà vẫn giữ được bí mật đề thi quốc gia không?
- Cái hay của phương pháp TN chính là ở chỗ từng câu hỏi của đề TN đều được thử nghiệm trước khi đưa vào đề chính thức, nhưng đề thi vẫn giữ được bí mật. Nếu làm đề TN cho các kỳ thi đại trà theo đúng qui trình cần thiết thì vấn đề lộ đề hầu như không bao giờ xãy ra.
Thật vậy, đối với phương pháp tự luận muốn giữ được bí mật đề thi phải hạn chế tối đa số người tham gia làm đề, cách ly họ khi làm đề và thực hiện trong một thời gian rất ngắn, điều đó dễ dẫn đến sơ suất của đề thi. Ngược lại, phương pháp TN tuy cho phép triển khai xây dựng đề TN theo một quy trình dài ngày và thu hút sự đóng góp của nhiều người nhưng đề thi vẫn không hề bị lộ, bởi vì mỗi người chỉ liên quan đến một số rất ít câu hỏi TN, và họ không được lưu giữ bất kỳ câu hỏi nào.
Chẳng hạn, một số lớp 12 được chọn làm đại diện để thử nghiệm các đề kiểm tra nhỏ 10, 15 câu TN trong một kỳ kiểm tra của lớp học, học sinh làm bài phải tuân theo một nội qui nghiêm ngặt cấm sao chép đề, đề kiểm tra làm xong được thu lại toàn bộ. Tổ chức thử nghiệm bằng nhiều đề kiểm tra nhỏ như vậy ở nhiều trường thì toàn bộ các câu hỏi trong ngân hàng câu hỏi TN sẽ được thử nghiệm. Qui trình thử nghiệm như vậy đảm bảo không làm lộ các câu TN.
Giả sử một học sinh nào đó tham gia thử nghiệm có nhớ được một vài câu hỏi thì xác xuất để các câu đó rơi vào đề thi chính thức cũng rất bé. Vì đến giờ phút cuối cùng trước kỳ thi một đề TN năm bảy chục câu hỏi mới được thiết kế tự động và in ra từ một ngân hàng gồm hàng nghìn câu hỏi. Cũng chính nhờ qui trình như vậy mà ngay trong khi ở nước ta chưa có nhiều chuyên gia viết câu TN giỏi thì vẫn có thể chọn lựa được các câu có chất lượng cao để làm một đề TN tốt cho kỳ thi chính thức.
Tôi rất mong những người trực tiếp quản lý việc làm đề TN cho các kỳ thi quốc gia sắp tới thực hiện việc làm đề TN đúng qui trình cần thiết. Bởi vì nếu không làm đúng như vậy thì sẽ không tận dụng một ưu điểm lớn của phương pháp TN, và chắc chắn đề TN chất lượng sẽ kém, và những trường hợp tương tự như đề vật lý vừa qua sẽ còn lặp lại!
THANH HÀ thực hiện
Thứ Hai, 16 tháng 6, 2008
Pretesting
What are pretests?
As part of Cambridge ESOL's commitment to accuracy and quality, we submit all the materials in our exams to a number of procedures to ensure they are accurate and reliable. One of these is pretesting.
Testing materials before they are used in exams allows us to make certain our exams are accurate and fair.
How can they help teachers and students?
Pretests give students a chance to practise taking a Cambridge ESOL exam using genuine questions under exam conditions.
After taking the Reading, Listening and Use of English papers, the pretesting students are given scores. Writing papers are marked by genuine Cambridge ESOL examiners and candidates receive information about how they performed in the writing test (note: Pretests are not available for Speaking papers.)
This helps students to know which areas they need most practice in, and gives them experience and confidence in taking tests. For teachers, it helps highlight areas where their students might need more help.
How do they help Cambridge ESOL?
Pretests are an essential part of the exam production process. Statistical data is obtained for each task, which allows us to construct our exams to a prescribed level of difficulty. This ensures, for example, that an FCE Reading paper produced for June 2008 is at the same level of difficulty as the same exam produced in December 2008.
When can pretests be taken?
Exams with fixed dates(such as PET, KET and FCE) usually have a pretest window of about three weeks. Exams which are 'on demand' (such as IELTS) usually have an open pretest date. The Pretesting Calendar (PDF 44Kb) gives the pretest dates available for this year as well as information about the length of the pretest.
It is best if students take pretests about six to eight weeks before their real test. This means that they are nearly ready for the exam, and so are at the right level. It also means that teachers will get the scores back in time to focus on any particular language areas in need of practice.
What else should I know?
- All test papers and DHL despatch costs are paid by Cambridge ESOL.
- Pretest papers are marked in Cambridge, and scores are returned to schools within three weeks. (Writing papers are sent to examiners, so these scores and reports may take a little longer.)
- Students take the pretests under exam conditions: pretest centres simulate the real exam, so that students not only experience the kind of questions they will face in their live exam, but also complete the answer sheets in a 'test-like' environment.
- After the pretest, all materials must be sent back to Cambridge ESOL. Materials cannot be kept for classroom practice.
How can we become involved?
To take part in pretesting, your school must either be a Cambridge ESOL test centre or be a 'Pretest Approved Institution'. If your school is not yet approved, your exam administrator needs to complete the Pretesting Institution Pre-Approval Form (PDF 472Kb), and this needs to be signed by the Local Secretary of the centre at which your students will take the real exam. Once the form is returned to Cambridge ESOL and has been checked and approved, your school may then be invited to participate in pretesting one or more of the Cambridge ESOL exams that your students sit.
How can I find out more?
You can find more information about the purpose and practice of pretesting from the Pretesting Guide (PDF 40Kb).
For more information on 'pretesting windows' as well as information about the length of pretests, see the Pretesting Calendar (44Kb).
If you have any further questions about participation in Cambridge ESOL pretesting, please contact: pretesting@CambridgeESOL.org
Please note: pretests are not available for YLE or for Speaking papers.
Đăng ký:
Bài đăng (Atom)