markdown:
## Thứ Bảy, 28 tháng 6, 2008
###
["If we keep doing things like this, the 'physics test incident' will happen again!"](http://bloganhvu.blogspot.com/2008/06/we-keep-doing-things-like-this-test_27.html)
Thứ Ba, 24/06/2008, 20:03 (GMT+7)
http://www.tuoitre.com.vn/Tianyon/Index.aspx?ArticleID=265219&ChannelID=13
GS Lâm Quang Thiệp:
"Nếu không thay đổi cách làm, sự cố “đề vật lý” sẽ còn lặp lại!"
GS Lâm Quang Thiệp
TTO - Sai sót trong đáp án đề thi trắc nghiệm (TN) môn vật lý của kỳ thi tốt nghiệp THPT tuy đã được Bộ GD-ĐT giải quyết nhưng vẫn để lại dư âm là những ý kiến tranh luận chưa có hồi kết về “đáp án đúng” cùng những băn khoăn, lo lắng cho các đề thi TN trong kỳ thi tuyển sinh ĐH, CĐ sắp tới.
>> Đáp án đề thi vật lý là phù hợp
>> Bộ GD-ĐT chính thức điều chỉnh đáp án môn vật lý
>> Về đáp án đề thi vật lý: Nếu sai sẽ điều chỉnh, không ảnh hưởng đến tiến độ chấm thi
Với tư cách là một chuyên gia đã có nhiều năm nghiên cứu về phương thức thi TN, GS LÂM QUANG THIỆP - nguyên Vụ trưởng Vụ Đại học - đã có cuộc trao đổi với Tuổi Trẻ Online xung quanh chủ đề làm thế nào để nâng cao chất lượng, đảm bảo độ chính xác của các đề thi TN và khi xảy ra sự cố sẽ ảnh hưởng như thế nào đến kết quả thi của TS…
* Sau khi Bộ GD-ĐT công bố hướng dẫn chấm đối với đề thi môn vật lý trong kỳ thi tốt nghiệp THPT, đáp án của một câu TN đã gây nhiều tranh luận. Theo GS đó là một việc bình thường hay bất thường trong thi TN? Có thể xem một đề thi TN phải chỉnh sửa đáp án, khó xác định đáp án nào thật sự phù hợp như vậy là không đạt hay không?
- Tôi có theo dõi tranh luận về đề thi vật lý trên báo chí, nhiều giáo viên chuyên dạy môn vật lý phát hiện ra câu hỏi không phải chỉ có 1 mà là 2, 3 phương án đúng. Cuộc tranh luận rất lý thú và có nhiều ý kiến hợp lý. Điều này là bình thường và dễ xảy ra đối với một câu hỏi TN nói chung, vì người viết và người đọc duyệt một câu hỏi dù có chăm chú đến đâu cũng khó nhìn được toàn diện nên dễ sơ suất, chỉ có những người làm bài với các trình độ khác nhau, suy nghĩ về câu hỏi theo nhiều cách khác nhau mới phát hiện được mọi khía cạnh của nó.
Việc tranh luận về các câu hỏi TN theo kiểu này nếu diễn ra trong phạm vi một lớp học thì rất tốt, vì nó giúp học sinh hiểu kiến thức sâu hơn. Tuy nhiên, đối với một đề thi quốc gia thì sự có mặt những câu hỏi như vậy là bất thường. Và tất nhiên đề thi có các câu hỏi như vậy phải xem là không đạt, chính vì vậy nên Cục Khảo thí và Kiểm định chất lượng giáo dục mới phải tốn công sức để đưa ra các phương án xử lý và điều chỉnh cách chấm. Một đề thi quốc gia cho hàng trăm nghìn thí sinh làm phải đảm bảo tính tiêu chuẩn hóa cao nhằm đạt sự công bằng cao khi chấm thi, và các câu hỏi có vấn đề như vậy lẽ ra phải được loại trừ trước, không đưa vào đề chính thức.
* Vậy một đề thi như vậy có thể ảnh hưởng đến kết quả thi như thế nào, thưa GS?
- Đề thi TN là một cái thước đo, dùng để đo năng lực của thí sinh. Phép đo nào cũng có sai số, nhưng đối với các phép đo quan trọng như kỳ thi tốt nghiệp THPT hoặc kỳ thi tuyển sinh ĐH thì phải cố gắng tạo ra thước đo càng chính xác càng tốt, vì kết quả phép đo đó quyết định số phận của nhiều người. Đề thi chứa các câu hỏi có vấn đề như vậy là một thước đo không chính xác, hiển nhiên kết quả đo bị ảnh hưởng xấu.
Đối với đề thi vật lý lần này tôi chưa thể nói nó ảnh hưởng như thế nào đến mức chính xác của kết quả đo, vì riêng câu hỏi được tranh cãi đã lộ rõ nhược điểm, nhiều người phát hiện được là lời giải không đơn trị, còn các câu hỏi khác của đề chưa biết chất lượng thế nào. Chỉ sau khi phân tích thống kê từng câu hỏi bằng các phần mềm xây dựng trên khoa học TN thì mới có thể đánh giá chính xác chất lượng của từng câu hỏi và của đề thi.
Tôi đã phân tích tất cả các đề thi tuyển sinh ĐH năm ngoái, một số đề có nhiều câu hỏi chất lượng kém, tuy không thấy có tranh luận trên báo chí vì không thật lộ liễu, chẳng hạn đề tiếng Anh. Tôi rất mong có dịp trao đổi với Cục Khảo thí và Kiểm định chất lượng giáo dục về điều đó. Có thể ví một đề thi có nhiều câu hỏi chất lượng kém như một cái thước đo bằng dây cao su, kết quả đo sẽ rất kém chính xác. Tôi hi vọng đề thi vật lý vừa rồi không đến nỗi như vậy.
Để đề TN đạt chất lượng cao các nước tiên tiến đều tuân theo qui trình xây dựng đề TN nghiêm túc. Việt Nam ta hoàn toàn có khả năng xây dựng các đề TN tiêu chuẩn hóa có chất lượng cao, vì có nhiều chuyên gia hiểu biết về qui trình này và cũng có nơi đã xây dựng được phần mềm phân tích theo lý thuyết TN hiện đại.
Sở dĩ đề thi vật lý còn có câu hỏi kém chất lượng một cách lộ liễu như thế có lẽ vì Cục Khảo thí không tuân thủ theo đúng qui trình xây dựng các đề thi quốc gia theo công nghệ TN hiện đại. Trong đó, khâu quan trọng nhất là đảm bảo sao cho mọi câu hỏi trước khi đưa vào đề TN chính thức phải được thử nghiệm trên một số lượng nhất định đối tượng tương tự như thí sinh, trong trường hợp này là học sinh lớp 12.
* Theo GS, làm thế nào để trong đề thi không còn các câu hỏi kém chất lượng? Một trong những nguyên tắc của Bộ GD-ĐT đối với đề thi là không ra đề vào những phần còn đang gây tranh cãi, quá khó hoặc đánh đố TS. Đề thi TN có thể tuân thủ được những qui định này không?
- Trước đây khi góp ý cho bản trưng cầu ý kiến của Cục Khảo thí và Kiểm định chất lượng giáo dục về việc có nên sử dụng chủ yếu phương pháp TN hay không cho kỳ thi quốc gia, tôi đã trả lời là tôi không ủng hộ TN nếu làm đề TN không đúng qui trình, và ủng hộ TN nếu làm đúng. Chính công nghệ TN hiện nay cho phép đưa ra một qui trình xây dựng các đề thi TN có chất lượng cao, loại bỏ hoàn toàn hoặc phần lớn các câu hỏi kém chất lượng.
Một ưu điểm quan trọng của phương pháp TN là có thể sử dụng một qui trình dài ngày và có nhiều người tham gia để viết, thử nghiệm, chỉnh sửa, lựa chọn từng câu hỏi TN tốt nhằm tạo nên một đề TN chất lượng cao mà vẫn giữ được bí mật của đề thi. Kết quả thử nghiệm được phân tích bằng phần mềm TN hiện đại sẽ cho biết chất lượng của từng câu hỏi TN để chỉnh sửa hoặc loại bỏ hẳn không đưa vào đề thi chính thức.
* Nhưng thưa GS, đề thi mà chúng ta nói đến trong trường hợp cụ thể này là đề của những kỳ thi cực kỳ quan trọng như tốt nghiệp THPT, tuyển sinh ĐH, CĐ, được coi như tài liệu bí mật quốc gia. Có thể thử nghiệm trước mà vẫn giữ được bí mật đề thi quốc gia không?
- Cái hay của phương pháp TN chính là ở chỗ từng câu hỏi của đề TN đều được thử nghiệm trước khi đưa vào đề chính thức, nhưng đề thi vẫn giữ được bí mật. Nếu làm đề TN cho các kỳ thi đại trà theo đúng qui trình cần thiết thì vấn đề lộ đề hầu như không bao giờ xãy ra.
Thật vậy, đối với phương pháp tự luận muốn giữ được bí mật đề thi phải hạn chế tối đa số người tham gia làm đề, cách ly họ khi làm đề và thực hiện trong một thời gian rất ngắn, điều đó dễ dẫn đến sơ suất của đề thi. Ngược lại, phương pháp TN tuy cho phép triển khai xây dựng đề TN theo một quy trình dài ngày và thu hút sự đóng góp của nhiều người nhưng đề thi vẫn không hề bị lộ, bởi vì mỗi người chỉ liên quan đến một số rất ít câu hỏi TN, và họ không được lưu giữ bất kỳ câu hỏi nào.
Chẳng hạn, một số lớp 12 được chọn làm đại diện để thử nghiệm các đề kiểm tra nhỏ 10, 15 câu TN trong một kỳ kiểm tra của lớp học, học sinh làm bài phải tuân theo một nội qui nghiêm ngặt cấm sao chép đề, đề kiểm tra làm xong được thu lại toàn bộ. Tổ chức thử nghiệm bằng nhiều đề kiểm tra nhỏ như vậy ở nhiều trường thì toàn bộ các câu hỏi trong ngân hàng câu hỏi TN sẽ được thử nghiệm. Qui trình thử nghiệm như vậy đảm bảo không làm lộ các câu TN.
Giả sử một học sinh nào đó tham gia thử nghiệm có nhớ được một vài câu hỏi thì xác xuất để các câu đó rơi vào đề thi chính thức cũng rất bé. Vì đến giờ phút cuối cùng trước kỳ thi một đề TN năm bảy chục câu hỏi mới được thiết kế tự động và in ra từ một ngân hàng gồm hàng nghìn câu hỏi. Cũng chính nhờ qui trình như vậy mà ngay trong khi ở nước ta chưa có nhiều chuyên gia viết câu TN giỏi thì vẫn có thể chọn lựa được các câu có chất lượng cao để làm một đề TN tốt cho kỳ thi chính thức.
Tôi rất mong những người trực tiếp quản lý việc làm đề TN cho các kỳ thi quốc gia sắp tới thực hiện việc làm đề TN đúng qui trình cần thiết. Bởi vì nếu không làm đúng như vậy thì sẽ không tận dụng một ưu điểm lớn của phương pháp TN, và chắc chắn đề TN chất lượng sẽ kém, và những trường hợp tương tự như đề vật lý vừa qua sẽ còn lặp lại!
THANH HÀ thực hiện
## Thứ Sáu, 27 tháng 6, 2008
###
[Adopt, adapt, or develop?](http://bloganhvu.blogspot.com/2008/06/adopt-adapt-or-develop_27.html)
Before you read, think about your own situation. Do you always use ready-made tests for important testing events, and if so, what kind? Or do you sometimes adopt, or develop new tests? And how do you decide what to change? What criteria do you use in developing new tests?
Phuong Anh
## Thứ Sáu, 20 tháng 6, 2008
###
[Language Testing Course Syllabus](http://bloganhvu.blogspot.com/2008/06/language-testing-course-syllabus_19.html)
Lecturers:
- Vu Thi Phuong Anh (PhD), email: anhvukim@yahoo.com or vtpanhgmail.com
- Nguyen Bich Hanh (MA), email: bichhanh56@yahoo.com
Course objectives
- to provide ss with an understanding of the basic distinction between two families of tests, ie norm-referenced and criterion-referenced tests, and their respective characteristics
- to equip language program administrators and classroom teachers with practical and useful tools for making correct decisions in their jobs such as admission, placement, certification, making comparisons between students, judging the effectiveness of teaching techniques, materials, curriculum, or assessing learners' growth.
Required text
Brown, J, D. (2005) Testing in Language Programs - Comprehensive Guide to English Language Assessment (2nd ed). Singapore, McGrawHill.
Recommended text
Hughes, A. (2003) Testing for Language Teachers (2nd ed). Cambridge, CUP.
Week 1 - Types and Uses of Language Tests
Week 2 - Adopting, Adapting and Developing Language Tests
Week 3 - Developing Good Quality Language Test Items
Week 4 - Item Analysis in Language Testing
Week 5 - Describing Language Test Results
Week 6 - Interpreting Language Test Scores
Week 7 - Correlation in Language Testing
Week 8 - Language Test Reliability
Week 9 - Language Test Dependability
Week 10 - Language Test Validity
Week 11 - Language Testing in Reality
## Thứ Hai, 16 tháng 6, 2008
Measurement, Assessment, and Evaluation in Education
Dr. Bob Kizlik
Updated May 29, 2008
In my years of teaching undergraduate courses, I was continuously reminded each semester that many education students who had the requisite course in "educational tests and measurements" or a course with a similar title as part of their professional preparation, had confusing ideas about fundamental differences in terms such as measurement, assessment and evaluation as they are used in education. When I asked the question, "what is the difference between assessment and evaluation," I usually got a lot of blank stares. Yet, it seems that understanding the differences between measurement, assessment, and evaluation is fundamental to the knowledge base of teaching, and certainly to the processes employed in the education of future teachers.
In many places on the ADPRIMA website the phrase, "Anything not understood in more than one way is not understood at all" appears after some explanation or body of information. That phrase is, in my opinion, a fundamental idea of what should be a cornerstone of all teacher education. Students often struggle with describing or explaining what it means to "understand" something that they say they understand. I believe in courses in educational tests and measurements, that "understanding" has often been inferred from responses on multiple-choice tests or solving statistical problems. A semester later, when questioned about very fundamental ideas in statistics, measurement, assessment and evaluation, the students I had seemingly forgot most, if not all of what they "learned."
Measurement, assessment, and evaluation mean very different things, and yet most of my students are unable to adequately explain the differences. So, in keeping with the ADPRIMA approach to explaining things in as straightforward and meaningful a way as possible, here are what I think are useful descriptions of these three fundamental terms. These are personal opinions, but they have worked for me for many years. They have operational utility.
Measurementrefers to the process by which the attributes or dimensions of some physical object are determined. One exception seems to be in the use of the word measure in determining the IQ of a person. The phrase, "this test measures IQ" is commonly used. Measuring such things as attitudes or preferences also applies. However, when we measure, we generally use some standard instrument to determine how big, tall, heavy, voluminous, hot, cold, fast, or straight something actually is. Standard instruments refer to instruments such as rulers, scales, thermometers, pressure gauges, etc. We measure to obtain information about what is. Such information may or may not be useful, depending on the accuracy of the instruments we use, and our skill at using them. There are few such instruments in the social sciences that approach the validity and reliability of say a 12" ruler. We measure how big a classroom is in terms of square feet, we measure the temperature of the room by using a thermometer, and we use Ohm meters to determine the voltage, amperage, and resistance in a circuit. In all of these examples, we are not assessing anything; we are simply collecting information relative to some established rule or standard. Assessment is therefore quite different from measurement, and has uses that suggest very different purposes. When used in a learning objective, the definition provided on the ADPRIMA for the behavioral verb measure is: To apply a standard scale or measuring device to an object, series of objects, events, or conditions, according to practices accepted by those who are skilled in the use of the device or scale.
Assessmentis a process by which information is obtained relative to some known objective or goal. Assessment is a broad term that includes testing. A test is a special form of assessment. Tests are assessments made under contrived circumstances especially so that they may be administered. In other words, all tests are assessments, but not all assessments are tests. We test at the end of a lesson or unit. We assess progress at the end of a school year through testing, and we assess verbal and quantitative skills through such instruments as the SAT and GRE. Whether implicit or explicit, assessment is most usefully connected to some goal or objective for which the assessment is designed. A test or assessment yields information relative to an objective or goal. In that sense, we test or assess to determine whether or not an objective or goal has been obtained. Assessment of skill attainment is rather straightforward. Either the skill exists at some acceptable level or it doesn’t. Skills are readily demonstrable. Assessment of understanding is much more difficult and complex. Skills can be practiced; understandings cannot. We can assess a person’s knowledge in a variety of ways, but there is always a leap, an inference that we make about what a person does in relation to what it signifies about what he knows. In the section on this site on behavioral verbs, to assess means To stipulate the conditions by which the behavior specified in an objective may be ascertained. Such stipulations are usually in the form of written descriptions.
Evaluationis perhaps the most complex and least understood of the terms. Inherent in the idea of evaluation is "value." When we evaluate, what we are doing is engaging in some process that is designed to provide information that will help us make a judgment about a given situation. Generally, any evaluation process requires information about the situation in question. A situation is an umbrella term that takes into account such ideas as objectives, goals, standards, procedures, and so on. When we evaluate, we are saying that the process will yield information regarding the worthiness, appropriateness, goodness, validity, legality, etc., of something for which a reliable measurement or assessment has been made. For example, I often ask my students if they wanted to determine the temperature of the classroom they would need to get a thermometer and take several readings at different spots, and perhaps average the readings. That is simple measuring. The average temperature tells us nothing about whether or not it is appropriate for learning. In order to do that, students would have to be polled in some reliable and valid way. That polling process is what evaluation is all about. A classroom average temperature of 75 degrees is simply information. It is the context of the temperature for a particular purpose that provides the criteria for evaluation. A temperature of 75 degrees may not be very good for some students, while for others, it is ideal for learning. We evaluate every day. Teachers, in particular, are constantly evaluating students, and such evaluations are usually done in the context of comparisons between what was intended (learning, progress, behavior) and what was obtained. When used in a learning objective, the definition provided on the ADPRIMA site for the behavioral verb evaluate is: To classify objects, situations, people, conditions, etc., according to defined criteria of quality. Indication of quality must be given in the defined criteria of each class category. Evaluation differs from general classification only in this respect.
To sum up, we measure distance, we assess learning, and we evaluate results in terms of some set of criteria. These three terms are certainly connected, but it is useful to think of them as separate but connected ideas and processes.
Here is a great link that offer different ideas about these three terms, with well-written explanations. Unfortunately, most information on the Internet concerning this topic amounts to little more than advertisements for services.
ASSESSMENT, MEASUREMENT, EVALUATION & RESEARCH
Another resource with a wide variety of information on many related topics is
[Development Gateway.]
[Distance Education Aptitude and Readiness Scale (DEARS)]
"Anything not understood in more than one way is not understood at all."
Okay, now for something to read that might give you a chill or two.... click here for my novel,
[What Waits Within]
[Online Education for Teachers – Advance Your Career]
I would like to thank all who order
as well as books, music, electronics, DVDs, software, and household items from [Lesson Planning: From Writing Objectives to Selecting Instructional Programs,] [AMAZON.COM]through ADPRIMA. By doing so, you help support the operation and maintenance of this site.
Bob Kizlik
Click for the Best of ADPRIMA Lesson Planning Help Monster Learning Skills Teaching Methods Ideas for New and Future Teachers ADPRIMA site putpose What Social Studies is For Classroom Management Mistakes Lesson Planning Ideas Criteria for Improvement Education Humor Home Schooling How to Study Measurement, Assessment and Evaluation Tips on Becoming a Teacher Examples of Behavioral Verbs How to Write Objectives Instructional Grouping Assertive Discipline Home Schooling Classroom Management
[Home](../../index.html) [What we do](../index.html)
- Exam revisions > Computer-based testing
# Computer-based testing
Cambridge ESOL delivers exams to more than 2,000 centres in over 130 countries. We are constantly seeking ways to enhance our service to our exam centres and the 2 million candidates who take our tests.
Computer-based testing (CBT) offers additional flexibility for candidates and centres: choice of the mode of the exam, more frequent sessions, reduced lead-in and turnaround times and enhanced security.
### Now there are two ways to offer Cambridge exams
Computers are now an established part of our daily lives. Their use in education has become widespread and many students around the world have excellent keyboard skills and gain computer knowledge from an early age.
The CBT versions follow the same test format as the paper-based tests. The speaking part of the test is completed in exactly the same way as in the paper-based version — through face-to-face assessment.
Centres do not have to offer the computer-based versions. We offer paper-based tests alongside the new CBT.
### Same format, same questions, same certificate
The CBT includes the same question types which are marked on the same criteria. The certificate awarded and its value are identical to the paper-based test.
### Safe, efficient method of language assessment
Cambridge ESOL's CBT has been carefully designed and extensively trialled to ensure the same high standards of testing as the paper-based tests. They provide a safe, secure and efficient way of assessing candidates' English language skills and knowledge.
For information of various CBT trials, see these editions of
*Research Notes*:
### Technology advances
Recent advances in technology and online security make CBT accessible in an increasing number of locations. Its rise in popularity as another way to take tests has been rapid.
The software system we use runs on a standard computer network. A number of candidate workstations are linked to an administrator workstation. The test materials are downloaded directly by the centre using a highly secure internet-based system. Once the candidates have completed the exams, the exam responses are uploaded directly through the Cambridge Connect system to Cambridge ESOL for assessment. This takes away the need for secure postal returns.
There is a quick online tutorial for candidates to use before they begin their exams.
### Easy, standard web functions
CBT uses standard web navigation that is clear and easy to follow. The quick and helpful tutorial session at the start of the exam ensures candidates can spend a few moments making sure they know how the test works and what they need to do.
### Making exams easy to run
There are no specialist requirements. Exam centres using the Cambridge Connect software system that runs the computer-based tests do not need to have a dedicated computer-testing suite.
The system can be installed and operated on a standard IT infrastructure with internet connection at sites such as universities, colleges or schools. Cambridge Connect can also be installed on laptops on a wireless network.
Centre staff are trained and fully supported in the use of Cambridge Connect.
Because the CBT exams are paperless, so is the administration.
### Benefits
- Additional exam sessions
The flexibility of CBT means that more exam sessions can be offered to candidates. Centres can respond to demand and additional exams can be run at different times of the year to the paper-based tests. This will suit candidates who are ready to take the exam at different times of the year.
- Faster turnaround of results
Exam results are delivered quickly and securely to candidates who sign up to use the Results Online service. They are available to both the centre and candidates within three to four weeks of the exam taking place. With CBT, candidates can enter for an exam, take the exam and receive their results within just five weeks.
- Making exams more accessible
Our research shows that many candidates prefer taking the Writing and Listening parts on a computer, especially younger candidates who are used to working with keyboards and headphones and who are comfortable taking exams using technology that is familiar to them.
- No special preparation is needed
Teachers do not need to do any special preparation with their students and they do not need any special technical knowledge. Exam preparation remains the same as there is no change to the curriculum or the teaching approach.
![ Where can I take the exam](../../assets/img/where-1.jpg)
![ Where can I take the exam](../../assets/img/where-1.jpg)
- What we do
-
### Who we are, what we do
-
### Assessment
-
### Europe
-
### Research
-
### Working with...
-
### Exam processes
-
### Exam revisions
-
### Current developments
-
### Newsroom
[Home](../../index.html) [What we do](../index.html)
- Exam processes > Prestesting
# Pretesting
### What are pretests?
As part of Cambridge ESOL's commitment to accuracy and quality, we submit all the materials in our exams to a number of procedures to ensure they are accurate and reliable. One of these is pretesting.
Testing materials before they are used in exams allows us to make certain our exams are accurate and fair.
### How can they help teachers and students?
Pretests give students a chance to practise taking a Cambridge ESOL exam using genuine questions under exam conditions.
After taking the Reading, Listening and Use of English papers, the pretesting students are given scores. Writing papers are marked by genuine Cambridge ESOL examiners and candidates receive information about how they performed in the writing test (note: Pretests are not available for Speaking papers.)
This helps students to know which areas they need most practice in, and gives them experience and confidence in taking tests. For teachers, it helps highlight areas where their students might need more help.
### How do they help Cambridge ESOL?
Pretests are an essential part of the exam production process. Statistical data is obtained for each task, which allows us to construct our exams to a prescribed level of difficulty. This ensures, for example, that an FCE Reading paper produced for June 2008 is at the same level of difficulty as the same exam produced in December 2008.
### When can pretests be taken?
Exams with fixed dates(such as PET, KET and FCE) usually have a pretest window of about three weeks. Exams which are 'on demand' (such as IELTS) usually have an open pretest date.
[The Pretesting Calendar (PDF 44Kb)](../../assets/pdf/what-we-do/pretest_calendar_08.pdf) gives the pretest dates available for this year as well as information about the length of the pretest.
It is best if students take pretests about six to eight weeks before their real test. This means that they are nearly ready for the exam, and so are at the right level. It also means that teachers will get the scores back in time to focus on any particular language areas in need of practice.
### What else should I know?
- All test papers and DHL despatch costs are paid by Cambridge ESOL.
- Pretest papers are marked in Cambridge, and scores are returned to schools within three weeks. (Writing papers are sent to examiners, so these scores and reports may take a little longer.)
- Students take the pretests under exam conditions: pretest centres simulate the real exam, so that students not only experience the kind of questions they will face in their live exam, but also complete the answer sheets in a 'test-like' environment.
- After the pretest, all materials must be sent back to Cambridge ESOL. Materials cannot be kept for classroom practice.
### How can we become involved?
To take part in pretesting, your school must either be a Cambridge ESOL test centre or be a 'Pretest Approved Institution'. If your school is not yet approved, your exam administrator needs to complete the
[Pretesting Institution Pre-Approval Form (PDF 472Kb)](../../assets/pdf/what-we-do/pretest_preapproval_form.pdf), and this needs to be signed by the Local Secretary of the centre at which your students will take the real exam. Once the form is returned to Cambridge ESOL and has been checked and approved, your school may then be invited to participate in pretesting one or more of the Cambridge ESOL exams that your students sit.
### How can I find out more?
You can find more information about the purpose and practice of pretesting from the
[Pretesting Guide (PDF 40Kb)](../../assets/pdf/what-we-do/pretest_guide.pdf).
For more information on 'pretesting windows' as well as information about the length of pretests, see the
[Pretesting Calendar (44Kb)](../../assets/pdf/what-we-do/pretest_calendar_08.pdf).
If you have any further questions about participation in Cambridge ESOL pretesting, please contact:
[pretesting@CambridgeESOL.org](mailto:pretesting@CambridgeESOL.org)
Please note: pretests are not available for YLE or for Speaking papers.
![ Where can I take the exam](../../assets/img/where-1.jpg)
![ Where can I take the exam](../../assets/img/where-1.jpg)
- What we do
-
### Who we are, what we do
-
### Assessment
-
### Europe
-
### Research
-
### Working with...
-
### Exam processes
-
### Exam revisions
-
### Current developments
-
### Newsroom
1Measuring readiness for simplified material: a test of the first 1,000 words of English. In
__Simplification: Theory and Application__ ed. M.L.Tickoo, RELC Anthology Series No 31, 1993, pp 193-203.
**Measuring Readiness for Simplified Material: A Test of the First 1,000 Words of English**
**Paul Nation** __Victoria University of Wellington__
The first 1,000 words of English are the essential basis for simplified teaching material. This article describes the need for a test of these words and the difficulties in making one. It contains two equivalent forms of a test along with instructions on how to use it and how to apply the information gained from it.
**The importance of high frequency words**
Frequency studies of English have shown that the return for learning the high frequency words is very great. Generally these high frequency words are considered to be the most frequent 2,000 words (West, 1953) although some research indicates that the return for learning vocabulary drops off rather quickly after the first 1,500 words (Engels, 1968; Hwang, 1989). The return for learning is the coverage of text, spoken or written, that knowledge of the words provides. For example, Schonell et al (1956) found that the most frequent 1,000 words in spoken English provided coverage of 94% of the running words in informal conversation. Similarly, figures from the frequency count by Carroll et al (1971) indicate that the first 1,000 words of English cover 74% of written text. Note that coverage refers to running words where each recurrence of a word is counted as additional coverage. Thus, knowing the word
__the__ gives much less than 10% coverage of written text because this word occurs so frequently. Clearly the return for learning the first 1,000 words of English is very high. By comparison, the second most frequent 1,000 words of English provides coverage of only 7% of written text.
It should not be thought that the first 1,000 words is made up mainly of words like
__the__, __and__, __of__, __they__, and __because__. These function words make up fewer than 150 of the 1,000 words.
**Lists containing the first 1,000 words**
There are several lists available of the most frequent words of English. These include frequency counts (Carroll et al, 1971; Francis & Kucera, 1982; Thorndike & Lorge, 1944), and combinations of various lists (Hindmarsh, 1980; Barnard & Brown, in Nation 1984). The list chosen for this test is West's
__General Service List of English Words__ (1953). The General Service List has been used as a basis for many series of graded readers, and this provides an advantage in using it for the test. This list is rather old, based on work done in the 1930s and 1940s. However it still remains the most useful one available as the relative frequency of various meanings of each word is given. When making the tests included here the words chosen were checked against the Carroll et al count to make sure that they occurred in the first 2,000 words of that count.
**Difficulties in testing the first 1,000 words**
There are several difficulties involved with making a test of the first 1,000 words. The first is such a test may be used with classes of learners who speak different first languages and thus translation is not a practical approach. Second, there is the likelihood that some learners will have poor reading skills and thus the test needs to be able to be given orally if necessary. These two factors resulted in the choice of a true/false format. Multiple-choice was not possible because it is impractical in an oral form. One disadvantage of true/false is the possible strong effect of guessing, although research by Ebel (1979) indicates that this is not as likely as it seems. In an attempt to overcome possible effects of guessing, three types of responses were suggested in the instructions (True, Not true, Do not understand), and each word was tested twice, once in each version of the test. Where an item is tested twice, there are four possible sets of answers, namely both correct, both wrong, the first item correct and the second wrong, the first item wrong and the second correct. There is thus only a one in four chance of correctly guessing both items testing the same word. This is the same chance as with four-item multiple choice tests. So if the teacher feels that learners are making wild guesses, both forms of the test should be given and a mark given only when both items testing a word are correct.
A third difficulty is that the contexts for the tested words must not cause too many problems for the learners. When making the test, an attempt was made to ensure that the context words were of higher frequency than the tested word. This was not always possible for some of the words and thus a few words have some context words of the same frequency. There are no items with contexts of lower frequency. Occasionally a picture was used to avoid a lower frequency word, for example:
This can keep people away from your house.
__Dog__ is a lower frequency word than the test word __keep__ and so a picture was used instead of saying:
A dog can keep people away from your house.
This frequency restriction on the context was the most difficult constraint to overcome when making the test.
A fourth difficulty is that most of the high frequency words have several meanings. In the test only the most frequent meaning was tested. This was found by referring to West (1953) and the COBUILD dictionary (Sinclair, 1987).
A fifth difficulty is that using true/false items where the judgement is based on general knowledge allows other factors besides vocabulary knowledge to play a part. Some items where this may occur include:
Some children call their mother Mama.
You can go by road from London to New York.
Each society has the same rules.
Some problems of this type were removed as a result of trialling the test. There is value, however, in having the words in context in that the context can help in accessing the meaning of the word as well as limiting the meaning that is being tested. The disadvantage of drawing on general knowledge is not as great as the advantage of testing in use rather than by definitions.
A sixth difficulty is the grammatical complexity of the context of the tested words. For example, several of the highest frequency items are tested in the two-clause pattern "When _____, _____". This was unavoidable. Trialling of the test helped find some items where this caused too much difficulty and these were changed.
**Using the test**
Usually one form of the test (40 items) should be enough to get a useful result. When the test is given orally, the learners will need to be able to see the accompanying pictures. It is probably best if the test is given orally to one learner at a time. The teacher can repeat the items to the learners as many times as is needed. If the teacher knows the learner's first language then also requiring a translation would be a useful check. It is possible to find which word is tested by comparing the two items in the two forms of the test as both forms contain the tested words in exactly the same order. The ordering is based on frequency of occurrence according to West (1953) with the most frequent word (
__time__) occurring first.
Only content words (nouns, verbs, adjectives, adverbs) are tested. To find what proportion of the first 1,000 words is known, multiply the total score on each version of the test (40 items) by 2.5. Multiplying by 2.5 assumes that the learners already know the same proportion of function words.
**Applying the results**
The results of the test can be used to help diagnose areas of weakness, set learning goals and plan a vocabulary programme, measure vocabulary growth, and assign graded reading. Let us look at each of these in turn.
__Diagnosis__: The test can be used to help answer this question. Is the learner's poor performance in reading or listening a result of inadequate vocabulary knowledge? Some learners, particularly those for whom English is a foreign language, have difficulty understanding spoken English. This could be because they do not know enough vocabulary or simply because they have learned English through reading and have not had enough contact with spoken English. Giving the vocabulary test in its written form should help the teacher see where the problem lies. With such learners it would be interesting to give one form of the test orally and one form through reading to see what the difference was.
Similarly, learners who have had a lot of contact with spoken English may be poor at reading and doing the test orally should reveal their vocabulary knowledge.
__Set learning goals__: The first 1,000 words of English are essential for all learners who wish to use the language. It is thus very important that teachers know what vocabulary knowledge their learners have and are aware of how they can systematically help them to increase this knowledge. If learners do not know **all** of the first 1,000 words of English it is well worth ensuring that they have the opportunity to learn those that they do not know. Nation (1990) looks at this in detail over the four skills of listening, speaking, reading and writing. Ways of doing this include substantial graded reading, direct vocabulary teaching, doing vocabulary learning exercises, and systematically providing a vocabulary focus in language learning activities. If learners' vocabulary is larger than 1,000 words, the Vocabulary Levels Test (Nation, 1990) can be used.
__Measure vocabulary growth__: The two equivalent forms of the 1,000 word test allow the teacher to check how much learners' vocabulary has increased over several months. This use should be treated with caution as each test has only forty items and thus the confidence interval would be large if we were measuring an individual's increase in vocabulary size. When both forms of the test were administered to the same group of learners, it was found that the most difficult items in test A tested words that were also in the most difficult items in test B. These words were __ancient__, __stream__, __remain__, __wide__, and __at least__. It was also found that two-thirds of the learners gained scores on tests A and B that were within two marks or less of each other. Only one of the fifteen learners tested had scores which were more than four marks different.
__Assign graded reading__: Various series of graded readers have several stages of readers within the first 1,000 words of English. Longman Structural Readers, for example, have books written at the 300-word stage, the 500-word stage, the 750-word stage, and the 1,100-word stage. The way that the Longman series divides the words into stages does not correspond exactly to frequency (and thus to the ordering of items in the vocabulary test) but there is rough agreement. For example, the first 10 items in the vocabulary test are made up of one test word from Longman Stage 1, six from Stage 2, and three from Stage 3. Because the agreement is rough, it is better to use learners' total scores on the test to decide what stage of graded reader they should be reading. If their vocabulary score on a 40-item test is less than 10 they should be reading at Stage 1, from 11 to 20 Stage 2, from 21 to 30 Stage 3, and above 30 Stage 4. Graded reading is an excellent way of increasing vocabulary. By reading three or more readers at one stage learners are likely to meet all of the vocabulary at that stage. Having mastered the vocabulary of that stage, they can go to the next stage without needing extra preparation for the new vocabulary (Wodinsky & Nation, 1988).
**The content of test items**
The items in a test which is not based on a particular piece of content knowledge inevitably reveal the personality of the test maker. Looking back over the items I see that some reflect my philosophical attitudes, "We can be sure that one day we will die" (Some learners seemed convinced that this was not true.). This same sense of inevitability is revealed in "Day follows night and night follows day" and "Your child will be a girl or a boy". I also see my jaundiced attitudes to children after having raised a family, "It is easy for children to remain still" (clearly not true), "Most children go to school at night" (perhaps that should be true), "A child has a lot of power" (true or not true? Unfortunately omitted). In the earlier versions of the test there was also a strong moral tone, "It is good to keep a promise", "It is not good to try hard", "You must look to find the way". However, although the learners did not seem to have trouble with these items, colleagues convinced me that these were culture bound and not in keeping with the tone of the last part of the twentieth century. I reluctantly changed some of them. It is after all easier to change test items than it is to change colleagues. After all, "A society is made of people living together".
**References**
Carroll, J.B., P. Davies and B. Richman 1971.
__The American Heritage Word Frequency Book.__ New York: American Heritage Publishing Co.
Ebel, R. L. 1979.
__Essentials of Educational Measurement.__ (3rd ed.) Englewood Cliffs: Prentice Hall.
Engels, L. K. l968. The fallacy of word counts.
__IRAL__ 6,3: 2l3-23l.
Francis, W. Nelson and Kucera, Henry 1982.
__Frequency Analysis of English Usage.__ Boston: Houghton Mifflin Company.
Hindmarsh, R. l980.
__Cambridge English Lexicon.__ Cambridge: Cambridge University Press.
Hwang Kyong Ho 1989.
__Reading newspapers for the improvement of vocabulary and reading skills.__ Unpublished M.A. thesis, Victoria University of Wellington.
Nation, I.S.P. 1984.
__Vocabulary Lists.__ English Language Institute Occasional Publication No.12, Victoria University of Wellington.
Nation, I.S.P. 1990.
__Teaching and Learning Vocabulary.__ New York: Newbury House.
Schonell, F. J., I.G. Meddleton, and B.A. Shaw l956.
__A study of the oral vocabulary of adults.__ Brisbane: University of Queensland Press.
Sinclair, J. (ed.) l987.
__Collins Cobuild English Language Dictionary.__ London: Collins.
Thorndike, E. L. and I. Lorge l944.
__The Teacher's Word Book of 30,000 Words.__ Teachers College, Columbia University.
West, Michael l953.
__A General Service List of English Words.__ London: Longman, Green & Co.
Wodinsky, M. and I.S.P. Nation. 1988. Learning from graded readers.
__Reading in a Foreign Language__ 5,1: 155-161.
###
[Language Testing Blog: Language Testing Blog: Welcome message](http://languagetestingblog.blogspot.com/2008/06/language-testing-blog-welcome-message_14.html#links)
###
[Measuring readiness for simplified material: a test of the first 1,000 words of English - Paul Nation 1993](http://bloganhvu.blogspot.com/2008/06/measuring-readiness-for-simplified_15.html)
**Measuring readiness for simplified material: a test of the first 1,000 words of English.**
In Simplification: Theory and Application ed. M.L.Tickoo, RELC Anthology Series No 31, 1993, pp 193-203.
Measuring Readiness for Simplified Material: A Test of the First 1,000 Words of English
Paul Nation
Victoria University of Wellington
The first 1,000 words of English are the essential basis for simplified teaching material. This article describes the need for a test of these words and the difficulties in making one. It contains two equivalent forms of a test along with instructions on how to use it and how to apply the information gained from it.
The importance of high frequency words
Frequency studies of English have shown that the return for learning the high frequency words is very great. Generally these high frequency words are considered to be the most frequent 2,000 words (West, 1953) although some research indicates that the return for learning vocabulary drops off rather quickly after the first 1,500 words (Engels, 1968; Hwang, 1989). The return for learning is the coverage of text, spoken or written, that knowledge of the words provides. For example, Schonell et al (1956) found that the most frequent 1,000 words in spoken English provided coverage of 94% of the running words in informal conversation. Similarly, figures from the frequency count by Carroll et al (1971) indicate that the first 1,000 words of English cover 74% of written text. Note that coverage refers to running words where each recurrence of a word is counted as additional coverage. Thus, knowing the word the gives much less than 10% coverage of written text because this word occurs so frequently. Clearly the return for learning the first 1,000 words of English is very high. By comparison, the second most frequent 1,000 words of English provides coverage of only 7% of written text.
It should not be thought that the first 1,000 words is made up mainly of words like the, and, of, they, and because. These function words make up fewer than 150 of the 1,000 words.
Lists containing the first 1,000 words
There are several lists available of the most frequent words of English. These include frequency counts (Carroll et al, 1971; Francis & Kucera, 1982; Thorndike & Lorge, 1944), and combinations of various lists (Hindmarsh, 1980; Barnard & Brown, in Nation 1984). The list chosen for this test is West's General Service List of English Words (1953). The General Service List has been used as a basis for many series of graded readers, and this provides an advantage in using it for the test. This list is rather old, based on work done in the 1930s and 1940s. However it still remains the most useful one available as the relative frequency of various meanings of each word is given. When making the tests included here the words chosen were checked against the Carroll et al count to make sure that they occurred in the first 2,000 words of that count.
Difficulties in testing the first 1,000 words
There are several difficulties involved with making a test of the first 1,000 words. The first is such a test may be used with classes of learners who speak different first languages and thus translation is not a practical approach. Second, there is the likelihood that some learners will have poor reading skills and thus the test needs to be able to be given orally if necessary. These two factors resulted in the choice of a true/false format. Multiple-choice was not possible because it is impractical in an oral form. One disadvantage of true/false is the possible strong effect of guessing, although research by Ebel (1979) indicates that this is not as likely as it seems. In an attempt to overcome possible effects of guessing, three types of responses were suggested in the instructions (True, Not true, Do not understand), and each word was tested twice, once in each version of the test. Where an item is tested twice, there are four possible sets of answers, namely both correct, both wrong, the first item correct and the second wrong, the first item wrong and the second correct. There is thus only a one in four chance of correctly guessing both items testing the same word. This is the same chance as with four-item multiple choice tests. So if the teacher feels that learners are making wild guesses, both forms of the test should be given and a mark given only when both items testing a word are correct.
A third difficulty is that the contexts for the tested words must not cause too many problems for the learners. When making the test, an attempt was made to ensure that the context words were of higher frequency than the tested word. This was not always possible for some of the words and thus a few words have some context words of the same frequency. There are no items with contexts of lower frequency. Occasionally a picture was used to avoid a lower frequency word, for example:
This can keep people away from your house.
Dog is a lower frequency word than the test word keep and so a picture was used instead of saying:
A dog can keep people away from your house.
This frequency restriction on the context was the most difficult constraint to overcome when making the test.
A fourth difficulty is that most of the high frequency words have several meanings. In the test only the most frequent meaning was tested. This was found by referring to West (1953) and the COBUILD dictionary (Sinclair, 1987).
A fifth difficulty is that using true/false items where the judgement is based on general knowledge allows other factors besides vocabulary knowledge to play a part. Some items where this may occur include:
Some children call their mother Mama.
You can go by road from London to New York.
Each society has the same rules.
Some problems of this type were removed as a result of trialling the test. There is value, however, in having the words in context in that the context can help in accessing the meaning of the word as well as limiting the meaning that is being tested. The disadvantage of drawing on general knowledge is not as great as the advantage of testing in use rather than by definitions.
A sixth difficulty is the grammatical complexity of the context of the tested words. For example, several of the highest frequency items are tested in the two-clause pattern "When _____, _____". This was unavoidable. Trialling of the test helped find some items where this caused too much difficulty and these were changed.
Using the test
Usually one form of the test (40 items) should be enough to get a useful result. When the test is given orally, the learners will need to be able to see the accompanying pictures. It is probably best if the test is given orally to one learner at a time. The teacher can repeat the items to the learners as many times as is needed. If the teacher knows the learner's first language then also requiring a translation would be a useful check. It is possible to find which word is tested by comparing the two items in the two forms of the test as both forms contain the tested words in exactly the same order. The ordering is based on frequency of occurrence according to West (1953) with the most frequent word (time) occurring first.
Only content words (nouns, verbs, adjectives, adverbs) are tested. To find what proportion of the first 1,000 words is known, multiply the total score on each version of the test (40 items) by 2.5. Multiplying by 2.5 assumes that the learners already know the same proportion of function words.
Applying the results
The results of the test can be used to help diagnose areas of weakness, set learning goals and plan a vocabulary programme, measure vocabulary growth, and assign graded reading. Let us look at each of these in turn.
Diagnosis: The test can be used to help answer this question. Is the learner's poor performance in reading or listening a result of inadequate vocabulary knowledge? Some learners, particularly those for whom English is a foreign language, have difficulty understanding spoken English. This could be because they do not know enough vocabulary or simply because they have learned English through reading and have not had enough contact with spoken English. Giving the vocabulary test in its written form should help the teacher see where the problem lies. With such learners it would be interesting to give one form of the test orally and one form through reading to see what the difference was.
Similarly, learners who have had a lot of contact with spoken English may be poor at reading and doing the test orally should reveal their vocabulary knowledge.
Set learning goals: The first 1,000 words of English are essential for all learners who wish to use the language. It is thus very important that teachers know what vocabulary knowledge their learners have and are aware of how they can systematically help them to increase this knowledge. If learners do not know all of the first 1,000 words of English it is well worth ensuring that they have the opportunity to learn those that they do not know. Nation (1990) looks at this in detail over the four skills of listening, speaking, reading and writing. Ways of doing this include substantial graded reading, direct vocabulary teaching, doing vocabulary learning exercises, and systematically providing a vocabulary focus in language learning activities. If learners' vocabulary is larger than 1,000 words, the Vocabulary Levels Test (Nation, 1990) can be used.
Measure vocabulary growth: The two equivalent forms of the 1,000 word test allow the teacher to check how much learners' vocabulary has increased over several months. This use should be treated with caution as each test has only forty items and thus the confidence interval would be large if we were measuring an individual's increase in vocabulary size. When both forms of the test were administered to the same group of learners, it was found that the most difficult items in test A tested words that were also in the most difficult items in test B. These words were ancient, stream, remain, wide, and at least. It was also found that two-thirds of the learners gained scores on tests A and B that were within two marks or less of each other. Only one of the fifteen learners tested had scores which were more than four marks different.
Assign graded reading: Various series of graded readers have several stages of readers within the first 1,000 words of English. Longman Structural Readers, for example, have books written at the 300-word stage, the 500-word stage, the 750-word stage, and the 1,100-word stage. The way that the Longman series divides the words into stages does not correspond exactly to frequency (and thus to the ordering of items in the vocabulary test) but there is rough agreement. For example, the first 10 items in the vocabulary test are made up of one test word from Longman Stage 1, six from Stage 2, and three from Stage 3. Because the agreement is rough, it is better to use learners' total scores on the test to decide what stage of graded reader they should be reading. If their vocabulary score on a 40-item test is less than 10 they should be reading at Stage 1, from 11 to 20 Stage 2, from 21 to 30 Stage 3, and above 30 Stage 4. Graded reading is an excellent way of increasing vocabulary. By reading three or more readers at one stage learners are likely to meet all of the vocabulary at that stage. Having mastered the vocabulary of that stage, they can go to the next stage without needing extra preparation for the new vocabulary (Wodinsky & Nation, 1988).
The content of test items
The items in a test which is not based on a particular piece of content knowledge inevitably reveal the personality of the test maker. Looking back over the items I see that some reflect my philosophical attitudes, "We can be sure that one day we will die" (Some learners seemed convinced that this was not true.). This same sense of inevitability is revealed in "Day follows night and night follows day" and "Your child will be a girl or a boy". I also see my jaundiced attitudes to children after having raised a family, "It is easy for children to remain still" (clearly not true), "Most children go to school at night" (perhaps that should be true), "A child has a lot of power" (true or not true? Unfortunately omitted). In the earlier versions of the test there was also a strong moral tone, "It is good to keep a promise", "It is not good to try hard", "You must look to find the way". However, although the learners did not seem to have trouble with these items, colleagues convinced me that these were culture bound and not in keeping with the tone of the last part of the twentieth century. I reluctantly changed some of them. It is after all easier to change test items than it is to change colleagues. After all, "A society is made of people living together".
References
Carroll, J.B., P. Davies and B. Richman 1971. The American Heritage Word Frequency Book. New York: American Heritage Publishing Co.
Ebel, R. L. 1979. Essentials of Educational Measurement. (3rd ed.) Englewood Cliffs: Prentice Hall.
Engels, L. K. l968. The fallacy of word counts. IRAL 6,3: 2l3-23l.
Francis, W. Nelson and Kucera, Henry 1982. Frequency Analysis of English Usage. Boston: Houghton Mifflin Company.
Hindmarsh, R. l980. Cambridge English Lexicon. Cambridge: Cambridge University Press.
Hwang Kyong Ho 1989. Reading newspapers for the improvement of vocabulary and reading skills. Unpublished M.A. thesis, Victoria University of Wellington.
Nation, I.S.P. 1984. Vocabulary Lists. English Language Institute Occasional Publication No.12, Victoria University of Wellington.
Nation, I.S.P. 1990. Teaching and Learning Vocabulary. New York: Newbury House.
Schonell, F. J., I.G. Meddleton, and B.A. Shaw l956. A study of the oral vocabulary of adults. Brisbane: University of Queensland Press.
Sinclair, J. (ed.) l987. Collins Cobuild English Language Dictionary. London: Collins.
Thorndike, E. L. and I. Lorge l944. The Teacher's Word Book of 30,000 Words. Teachers College, Columbia University.
West, Michael l953. A General Service List of English Words. London: Longman, Green & Co.
Wodinsky, M. and I.S.P. Nation. 1988. Learning from graded readers. Reading in a Foreign Language 5,1: 155-161.
## Chủ Nhật, 15 tháng 6, 2008
####
![ ](Graphics/tslo1.gif)
[Shiken: JALT Testing & Evaluation SIG Newsletter](pub.htm)
Vol. 4 No. 1 Spring 2000 (p. 2 - 3) [ISSN 1881-5537]
![ ](Graphics/tslo1.gif)
| |
## Estimating vocabulary size
by David Beglar
What's the best way to estimate an EFL learner's vocabulary size? Are there any effective tests to estimate how many words EFL learners know? Are there any problems with standard vocabulary-estimating tests we should be aware of? This article explores these questions.
One institution in Japan which has made a rigorous attempt to measure the vocabulary of their students is Temple University Japan's Corporate Education Program (CEP). This program has been using a version of Paul Nation's
[Vocabulary Levels Tests](http://www.er.uqam.ca/nobel/r21270/levels/)(Nation, 1990). These tests are relatively straightforward, and are made up of sets of six words and three definitions, as in the following example:
a. royal 1. _____ first b. slow 2. _____ not public c. original 3. _____ all added together d. sorry e. total f. private
This test is designed to estimate examinees' basic knowledge of common word meanings, and, specifically, the extent to which they know the common meanings of words at the 2,000, 3,000, 5,000, 10,000 and university word levels. The test can be classified as a sensitive vocabulary test, which means that the format is sensitive to partial word knowledge. A less sensitive test (e.g., a multiple-choice cloze test focused on specific content words only) would result in lower scores even if the same words were tested.
Originally, the test had 90 items, but after being trailed with Japanese learners, the best performing 60 items chosen. It is fast and can be easily administered in twenty minutes. It is also reliable (Cronbach's alpha = .95 and Rasch reliability estimate = .97). In short, this test gives a general idea of the number of words an English speaker knows.
Paul Nation and Batia Laufer have both utilized versions of the Vocabulary Levels Tests to estimate vocabulary this way: if learner A scores 9 out of 12 (75%) on the 2,000 word level, s/he probably knows approximately 75% (1,500) of the first 2,000 words of English. If you continue to apply this logic to the results of the rest of the test (i.e., the 3,000, 5,000, University Word Level, and the 10,000 word level), you can arrive at an approximate estimate of vocabulary size.
Another way to measure vocabulary is to focus on words which are of greater importance and to test only those words. The advantage is that by focusing on a more narrow range of words, you can test more items and presumably arrive at more accurate estimates of what learners know. Beglar and Hunt (1999) did that with several versions of the 2,000 word level and University Word List tests. They trialed original pools of 72 items with native speakers of Japanese, selected the best performing 54 items for each test and made two 27-item parallel forms. You can find these forms in the appendix of Beglar and Hunt (1999), or e-mail to receive copies as attachments. In the same article, we also briefly discuss why the 2,000 and University Word List levels are important words for learners to know.
** [ ** ** p. 2 ** ** ]**
In addition to these tests, Paul Meara and several of his colleagues and students (e.g., Meara and Jones, 1987; Meara and Jones, 1990) have worked extensively with the Eurocentres Vocabulary Size Test.This is a checklist test in which the examinee checks the words he thinks he knows. I have seen published research which sometimes paints these tests in a very good and at other times in a very bad (e.g., low reliability) light. You can find more information on the tests at the Vocabulary Acquisition Research Group's homepage at www.swansea.ac.uk/cals/calsres.html. Several tests can be downloaded from the "freebies" section of this web page, such as the EVST (a basic vocabulary size test) and the LLEX 2.21 (a basic recognition vocabulary test). In addition, Paul Meara's students often have information about ongoing research posted on this webpage. In my experience, there is almost always an article posted concerning the Eurocentres Vocabulary Size tests.Finally, You can obtain a large number of these tests through the ERIC document reproduction service (see the Meara, 1992 reference below).
Finally, if you are interested in reading more about vocabulary testing, you might wish to take a look at the new text by John Read (2000) which has just been published by Cambridge. I can also recommend a book manuscript on vocabulary acquisition and teaching by Paul Nation (1999) which can be ordered by e-mail. In addition to learning everything about teaching vocabulary that you ever wanted to know, there is a good chapter on vocabulary testing which brings up a number of interesting issues such as vocabulary tests which are sensitive to differing levels of word knowledge.
**References**
Beglar, D., & Hunt, A. (1999). Revising and validating the 2000 word level and university word level vocabulary tests. Language Testing, 16 (2), 131-162.
Meara, P., & Jones, G. (1987). Tests of vocabulary size in English as a foreign language. Polyglot, 8 (1), 1-40.
Meara, P., & Jones, G. (1990). Eurocentres Vocabulary Size Test (version E1.1/K10,MSDOS). Zurich: Eurocentres Learning Service.
Meara, P. (1992). EFL vocabulary tests. Wales University: Swansea Centre fo Applied Language Studies. (ERIC Document Reproduction Service No. ED 362 046).
Nation, I. S. P. (1990). Teaching and learning vocabulary. New York: Newbury House.
Nation, I. S. P. (1999). Learning vocabulary in another language. English Language Institute Occasional Publication No. 19. Wellington, NZ: Victoria University of Wellington.
Read, J. (2000). Assessing vocabulary. Cambridge: Cambridge University Press.
** [ ** ** p. 3 ** ** ]**
Newsletter:
[Topic Index](news-topic.htm) ![ ](Graphics/clear.gif)
[Author Index](news-author.htm) ![ ](Graphics/clear.gif)
[Title Index](news-title.htm) ![ ](Graphics/clear.gif)
[Date Index](news-date.htm)
TEVAL SIG:
[Main Page](index.html) ![ ](Graphics/clear.gif)
[Background](back.htm) ![ ](Graphics/clear.gif)
[Links](links.htm) ![ ](Graphics/clear.gif)
[Network](network.htm) ![ ](Graphics/clear.gif)
[Join](join.htm)
###### www.jalt.org/test/beg_1.htm
![ Main Page](Graphics/tslo1.gif)
![ Main Page](Graphics/tslo1.gif)
##### Teaching Acronyms
[A](#A) [B](#B) [C](#C) [D](#D) [E](#E) [F](#F) [G](#G) [H](#H) [I](#I) [J](#J) [K](#K) [L](#L) [M](#M) [N](#N) [O](#O) [P](#P) [Q](#Q) [R](#R) [S](#S) [T](#T) [U](#U) [V](#V) [W](#W) [X](#X) [Y](#X) [Z](#X) [A](#A) [B](#B) [C](#C) [D](#D) [E](#E) [F](#F) [G](#G) [H](#H) [I](#I) [J](#J) [K](#K) [L](#L) [M](#M) [N](#N) [O](#O) [P](#P) [Q](#Q) [R](#R) [S](#S) [T](#T) [U](#U) [V](#V) [W](#W) [X](#X) [Y](#X) [Z](#X)
A
-
##### ABEEB - Association of British ESOL Examining Boards
-
##### ABLS - Association of British Language Schools
-
##### ADLTM - Advanced Diploma in English Language Teaching Management (UCLES)
-
##### ACoT - Associate of the College of Teachers
-
##### ACE - Adult and Community Education
-
##### ACP (TESOL) - Associate of the College of Preceptors (now ACoT Tesol)
-
##### A.Cert.TESOL - Advanced Certificate in TESOL (College of Teachers / Preceptors)
-
##### ACTDEC - Accreditation Council for TESOL Distance Education Courses
-
##### AE - Adult Education
-
##### AEB - Associated Examining Board
-
##### AEI - Adult Education Institute
-
##### ALTE - Association of Language Testers in Europe
-
##### ALTO - Association of Language Travel Organisations
-
##### ARELS - Association of Recognised English Language Services (now 'English UK')
-
##### AQA - Assessment and Qualifications Alliance
B
-
##### BAAL - British Association for Applied Linguistics
-
##### BACC - British Accreditation Council for Further & Higher Education
-
##### BALEAP - British Association of Lecturers in English for Academic Purposes
-
##### BALT - British Association for Language Teaching
-
##### BASELT - British Association of State English Language Teaching (now 'English UK')
-
##### BATQI - British Association of TESOL Qualifying Institutions
-
##### BC - British Council
-
##### BEC - Business English Certificate (UCLES)
-
##### BIELT: British Institute of English Language Teaching
-
##### BTEC - Business and Technology Education Council
-
##### BULATS - Business Language Testing Service (UCLES)
C
-
##### CAE - Certificate in Advanced English(UCLES)
-
##### CALL - Computer Assisted Language Learning
-
##### CBEVE - Central Bureau for Educational Visits and Exchanges
-
##### CCSE - Certificates in Communicative Skills in English (UCLES)
-
##### CEELT - Cambridge Examination in English for Language Teachers (UCLES)
-
##### CEIBT - Certificate in English for International Business and Trade (UCLES)
-
##### CELTA - Certificate in English Language Teaching to Adults (UCLES)
-
##### CELTYL - Certificate in English Language Teaching to Young Learners (UCLES)
-
##### Cert(ES) TESOL - Certificate of Educational Studies in TESOL (ACTDEC)
-
##### CertTEfIC - Specialist Certificate in Teaching English for Industry and Commerce (Trinity College)
-
##### CertTEB - Certificate in Teaching English for Business (LCCIEB)
-
##### Cert (TM) TESOL - Certificate in the Theory and Methodology of TESOL (ACTDEC)
-
##### CfBT - Centre for British Teachers
-
##### CGLI - City and Guilds of London Institute
-
##### CILT - Centre for Information on Language Teaching and Research
-
##### CILTS - Cambridge Integrated Language Teaching Schemes (UCLES)
-
##### CNAA - Council for National Academic Awards
-
##### COTE - Certificate for Overseas Teachers of English (UCLES)
-
##### CPE - Certificate of Proficiency in English (UCLES)
-
##### CRELS - Combined Registered English Language Schools (New Zealand)
-
##### CTEFLA - Certificate in Teaching English as a Foreign Language to Adults (UCLES - replaced by CELTA)
D
-
##### DELTA - Diploma in English Language Teaching to Adults (UCLES)
-
##### DELTYL - Diploma in English Language Teaching to Young Learners (UCLES)
-
##### DES - Diploma in English Studies (UCLES)
-
##### DFEE - Department for Education and Employment
-
##### Dip.BPE - Diploma in Business and Professional English Language Teaching (UCLES)
-
##### Dip.CoT - Diploma of the College of Teachers
-
##### Dip.CP (TESOL) - Diploma of the College of Preceptors (now Dip.CoT Tesol)
-
##### Dip.TESAL - Diploma in the Teaching of English to Speakers of Asian Languages (Trinity College)
-
##### Dip.TIB - Diploma in Teaching English for Business (LCCIEB)
-
##### Dip (TM) TESOL - Diploma in the Theory and Methodology of TESOL (ACTDEC)
-
##### Dip (TM) TESP - Diploma in the Theory and Methodology of TESP (ACTDEC)
-
##### DOTE - Diploma for Overseas Teachers of English (UCLES - replaced by DELTA)
-
##### DTEFLA - Diploma in Teaching English as a Foreign Language to Adults (UCLES – replaced by DELTA)
E
-
##### EAP - English for Academic Purposes
-
##### EAQUALS - European Association for Quality Language Services
-
##### EAL - English as an Acquired Language
-
##### EAT - European Association of Teachers
-
##### EFB - English for Business (LCCIEB)
-
##### EFC - English for Commerce (LCCIEB)
-
##### EFL - English as a Foreign Language
-
##### EFTI - English for the Tourism Industry (LCCIEB)
-
##### ELICOS - English Language Intensive Courses to Overseas Students (Australia)
-
##### ELL – English Language Learner
-
##### ELSA - English Language Skills Assessment (LCCIEB)
-
##### ELT - English Language Teaching
-
##### EOP - English for Occupational Purposes
-
##### ESB - English Speaking Board
-
##### ESL - English as a Second Language
-
##### ESOL - English to Speakers of Other Languages
-
##### ESP - English for Specific Purposes
-
##### ESU - English Speaking Union
F
-
##### FCoT - Fellow of the College of Teachers (UK)
-
##### FCE - First Certificate in English (UCLES)
-
##### FE - Further Education
-
##### FIELS - Federation of Independent English Language Schools (New Zealand)
-
##### FIRST - Association of British language schools.
-
##### FIYTO - Federation of International Youth Travel Organisations
-
##### FLIC - Foreign Languages for Industry and Commerce (LCCIEB)
-
##### FTBE - Foundation Certificate for Teachers of Business English (LCCIEB)
G
-
##### GNVQ - General National Vocational Qualification (UK)
H
-
##### HE - Higher Education
-
##### HNC - Higher National Certificate (BTEC)
-
##### HND - Higher National Diploma (BTEC)
-
##### HPA - Home Providers Association
##### I
-
[IATEFL - International Association of Teachers of English as a Foreign Language]
-
##### IB - International Baccalaureate
-
##### IDLTM - International Diploma in English Language Teaching Management (UCLES)
-
##### IDPA - International Development Program of Australia
-
##### IELTDHE - Institute for English Language Teacher Development in Higher Education
-
##### IELTS - International English Language Testing System (UCLES-British Council-IDPA)
-
##### IoL - Institute of Linguists
##### J
-
##### JCLA - Joint Council of Language Associations
-
##### JET - Japan Exchange and Teaching Programme
-
##### JET - Junior English Tests (AQA exam)
K
L
-
##### LABCI - (Association of) Latin American British Cultural Institutes
-
##### LAGB - Linguistics Association of Great Britain
-
##### LCCIEB - London Chamber of Commerce and Industry Examinations Board
M
-
##### MLA - Modern Language Association
N
-
##### NAAE - National Association of Advisors in English
-
##### NALA - National Association of Language Advisors
-
##### NATE - National Association for the Teaching of English
-
##### NATECLA - National Association for the Teaching of English and Community Languages to Adults
-
##### NATEFLI - National Association of TEFL in Ireland
-
##### NATESOL - National Association of Teachers of English for Speakers of Other Languages (United States)
-
##### NATFHE - National Association of Teachers in Further and Higher Education (UK)
-
##### NCILT - National Centre for Industrial Language Training
-
##### NCLE - National Congress on Languages in Education
-
##### NCML - National Council for Modern Languages in Higher and Further Education
-
##### NCVQ - National Council for Vocational Qualifications
-
##### ND - National Diploma (BTEC)
-
##### NEAB - Northern Examinations and Assessment Board
-
##### NELLE - Networking English Language Learning in Europe
-
##### NESB - Non-English Speaking Background
-
##### NIACE - National Institute of Adult Continuing Education
-
##### NVQ - National Vocational Qualification
O
-
##### ODL - Open and Distant Learning
-
##### OFSTED - Office for Standards in Education (UK)
-
##### OIBEC - Oxford International Business English Certificate (UODLE)
-
##### OL - Open Learning
-
##### OU - Open University
P
-
##### PBE - Practical Business English (LCCIEB)
-
##### PEI - Pitman Examinations Institute
-
##### PET - Preliminary English Test (UCLES)
-
##### PGCE - Post Graduate Certificate in Education
-
##### Pre-Cert (ES) TESOL - Preliminary Certificate of Educational Studies in TESOL (ACTDEC)
Q
-
##### QTS - Qualified Teacher Status
R
-
##### RELSA - Recognised English Language Schools Association (Ireland)
-
##### RSA - Royal Society of Arts
S
-
##### SALT - Scottish Association for Language Teaching
-
##### SATEFL - Scottish Association for the Teaching of English as a Foreign Language
-
##### SATESL - Scottish Association for the Teaching of English as a Second Language
-
##### SCOTTESOL - Scottish TESOL Association
-
##### SEFIC - Spoken English for Industry and Commerce (LCCIEB)
-
##### SESOL - Spoken English for Speakers of Other Languages (Trinity College)
-
##### SET - Senior English Tests (AQA Exam)
-
##### SIETAR - Society of International English Cultural Training and Research
-
##### SNVQ - Scottish National Vocational Qualification
T
-
##### TEAL - Teaching English as an Additonal Language
-
##### TEC - Training and Enterprise Council
-
##### TEEP - Test of English for Educational Purposes
-
##### TEFL - Teaching English as a Foreign Language
-
##### TEIL -Teaching English as an International Language
-
##### TESP - Teaching English for Specific Purposes
-
##### TEP - Tourism English Proficiency (UODLE)
-
##### TESL - Teaching English as a Second Language
-
##### TESOL - Teaching English to Speakers of Other Languages
-
##### TEVAC - Teaching English for Vacation and Activity Courses
-
##### TOEFL - Test of English as a Foreign Language
-
##### TOEIC - Test of English for International Communication
-
##### TP - Teaching Practice
U
-
##### UCLES - University of Cambridge Local Examinations Syndicate
-
##### UETESOL - University Entrance Test for Speakers of Other Languages (NEAB)
-
##### UKCOSA - United Kingdom Council for Overseas Student Affairs
-
##### ULEAC - University of London Examinations and Assessment Council
-
##### UODLE - University of Oxford Delegacy of Examinations
V
-
##### VSO - Voluntary Services Overseas
W
-
##### WEFT - Written English for the Tourism Industry (LCCIEB)
-
##### WYSTC - The World Youth and Student Travel Conference
##### X-Y-Z
[Bài đăng (Atom)](http://bloganhvu.blogspot.com/feeds/posts/default)

X-XSS-Protection: 1; mode=block

Server: GSE

X-Content-Type-Options: nosniff


markdown:
Truyen tranh online, truyện tranh online,truyện tranh truyentranh, manga, đọc truyện online, truyenonline
Đang tải dữ liệu ...
Đang tải...

WARC-Type: response

Content-Type: application/http; msgtype=response

Cache-Control: private

Content-Type: text/html; charset=utf-8

Connection: close


markdown: Rừng bị tàn phá, chính quyền địa phương vẫn không thừa nhận 14:06 | 29-08-2016 >> Phó Chủ tịch tỉnh Đắk Nông trực tiếp khảo sát tình trạng phá rừng từ phản ánh của TTXVN >> Khởi tố 9 bị can trong vụ phá rừng pơ mu tại huyện Nam Giang, Quảng Nam >> Vụ phá rừng tại Lâm trường Măng La: Đình chỉ vụ án hình sự do không cấu thành tội phạm BNEWS.VNSau phản ánh của TTXVN về tình trạng khai thác gỗ nghiến trái phép trên địa bàn tỉnh Điện Biên, có nhiều nguồn thông tin đề nghị làm rõ địa giới quản lý và trách nhiệm của cơ quan chức năng liên quan. Lâm tặc đang xẻ thân gỗ nghiến để làm thớt. Ảnh: Xuân Tư–TTXVNTrong khi Chi cục Kiểm lâm tỉnh Điện Biên đã thành lập đoàn kiểm tra và xác minh có tình trạng khai thác gỗ nghiến trái phép trên địa bàn huyện Tủa Chùa (Điện Biên) thì lãnh đạo UBND huyện Tủa Chùa vẫn phủ nhận điều này.Văn bản số 382/BC-UBND do Chủ tịch UBND huyện Tủa Chùa Lê Thanh Bình ký đã đề nghị TTXVN cải chính thông tin có nêu: "Vị trí khai thác rừng trái phép mới thuộc địa bàn quản lý của xã Phình Sáng, huyện Tuần Giáo, không thuộc địa bàn xã Mường Đun, huyện Tủa Chùa như báo chí đã nêu".Theo đó, ông Bình khẳng định trên địa bàn huyện Tủa Chùa "chỉ có 1 cây gỗ có đường kính 70cm, chiều dài 5m bị gãy đổ từ năm 2009, hiện nay đã mục hết phần võ, rỗng ruột, cây gỗ này đã bị lấy xẻ đi một phần thân cây gỗ, phần còn lại không sử dụng được nên đối tượng để lại tại hiện trường".Thế nhưng, khi phóng viên TTXVN trở lại cánh rừng xã Mường Đun, huyện Tủa Chùa với chiếc máy định vị GPS, chỉ trong vòng bán kính gần 10 ha, phóng viên đã bắt gặp hàng chục cây gỗ nghiến cổ thụ bị đốn hạ, xẻ thớt.Tại hiện trường, những vết cắt, mùn cưa vẫn còn mới toanh, cho thấy các đối tượng chỉ vừa mới xẻ gỗ, đẽo thớt từ 1 đến 2 ngày trước.Những gốc cây vẫn còn nguyên dấu vết bị đốn hạ bằng những lát cưa máy, không phải là do gió bão làm đổ như ông Lò Văn Sân, Quyền Hạt trưởng Hạt Kiểm lâm huyện Tủa Chùa khẳng định.Để làm rõ vấn đề này, chúng tôi đã cung cấp những tọa độ đo được tại khu vực rừng này với Chi cục Kiểm lâm tỉnh Điện Biên.Ngay sau đó, ông Phạm Văn Khiên, Phó Chi cục trưởng Chi cục Kiểm lâm tỉnh Điện Biên đã cử cán bộ lên rừng kiểm tra, xác minh các tọa độ mà phóng viên cung cấp.Ông Khiên cho biết: “Chúng tôi đã cho cán bộ lên kiểm tra các tọa độ của phóng viên cung cấp. Kết quả xác minh có tình trạng khai thác rừng trái phép như phóng viên phản ánh. Những điểm khai thác này đều thuộc địa phận xã Mường Đun, huyện Tủa Chùa”.Cũng theo ông Khiên thì chính quyền huyện Tủa Chùa nên thừa nhận có xảy ra tình trạng khai thác rừng trái phép trên địa bàn chứ không nên đánh giá chủ quan.Về vai trò, trách nhiệm của cán bộ kiểm lâm trong việc để xảy ra tình trạng khai thác rừng trái phép, ông Phạm Văn Khiên thừa nhận, trong việc hướng dẫn chủ rừng tức là cộng đồng dân cư thôn, bản tuần tra bảo vệ rừng, cán bộ kiểm lâm chưa làm hết vai trò, trách nhiệm của mình, do vậy chưa phát hiện và xử lý kịp thời các hành vi khai thác rừng trái pháp luật xảy ra trên địa bàn huyện Tủa Chùa.Lãnh đạo Chi cục Kiểm lâm tỉnh Điện Biên cũng cho biết thêm, Chi cục đã cử đội kiểm lâm cơ động vào khu vực rừng xã Mường Đun, huyện Tủa Chùa để kiểm tra, đánh giá toàn diện tình trạng khai thác rừng trái phép đang xảy ra tại đây.Đối với những cây gỗ đã bị đốn hạ từ trước hay do gió bão làm gãy đổ trong rừng, đều thuộc thẩm quyền của Nhà nước, nếu người dân vào rừng khai thác những cây gỗ này cũng là vi phạm pháp luật.Từ việc kiểm tra và đánh giá toàn diện, Chi cục Kiểm lâm tỉnh Điện Biên sẽ có biện pháp ngăn chặn và xử lý kịp thời những đối tượng khai thác rừng trái phép trên địa bàn.Trước đó, TTXVN đã có bài “Rừng Điện Biên trước nguy cơ cạn kiệt cây gỗ nghiến”, phản ánh tình trạng khai thác gỗ nghiến trái phép đang diễn ra tại khu vực giáp ranh giữa địa bàn xã Mường Đun (huyện Tủa Chùa) với xã Phình Sáng (huyện Tuần Giáo).Trong khi Hạt Kiểm lâm Tuần Giáo thừa nhận có tình trạng khai thác rừng trái phép thì Hạt Kiểm lâm và chính quyền huyện Tủa Chùa lại phủ nhận vụ việc trên./. Xuân Tư/TTXVN

Connection: keep-alive


markdown:
![ ](http://c.uploadanh.com/upload/1/123/0.256023001254115164.jpg)
Các thành viên của Family Outing đã chơi trò chơi quấn mặt (wrapping face).
Trong tập Family Outing phát sóng ngày 27/9, các thành viên tong gia đình đã chơi trò quấn mặt để quyết định người sẽ thực hiện nhiệm vụ nấu bữa sáng.các khán giả đã rất ngạc nhiên khi các ca sĩ thần tượng đã tham gia trò chơi và để lộ bộ mặt hài hước của họ mà không hề do dự.
Trong tập này có sự tham gia của Kim Hyun Joong (SS5001) và Seungri của Bigbang,người thay thế Dae Sung để tham gia chương trình.
Với các thành viên nam, để thúc đầu vào lớp nilon rất dễ dàng nhưng với Lee Hyori và Park ShiYeon việc này rất bẽ mặt vì không dễ dàng để chui lọt đầu qua lớp bọc nilon như họ tưởng.
Tập Family Outing lần này có rating lên tới 18.6%.
![ ](http://c.uploadanh.com/upload/1/123/0.397844001254115162.jpg)
Credit: Kbites
V-trans by` b0`_Shim{4D}@360kpop

WARC-Truncated: length

Cache-Control: post-check=0, pre-check=0

Pragma: no-cache

Vary: User-Agent

P3P: CP="IDC DSP COR ADM DEVi TAIi PSA PSD IVAi IVDi CONi HIS OUR IND CNT"


markdown:
|
|![]()
![ vote result](skin/images/rate/0.png)
**Phim Quý Tử Bất Đắc Dĩ** có nội dung kể về cuộc tìm kiếm đưa con trai bị thất lạc của bà Hai Mùi, chủ sở hữu một tiệm bánh canh nổi tiếng trong vùng. Một số người xấu với những tính toán vật chất đầy mưu mô quyết định giả danh đứa con trai thất lạc của bà. Không hẹn mà gặp, họ trở thành những quý tử bất đắc dĩ đến nhận mẹ. Với linh cảm của một người mẹ, bà Hai Mùi cùng ông Minh đã bàn bạc một kế hoạch "truy tìm thân phận thật sự" nhằm tìm lại đứa con chính hiệu...
Cùng
[xem phim](http://bomtan.net) Quý tử bất đắc dĩ trên Bomtan.net nhé!

Server: cloudflare-nginx

Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0

Vary: Accept-Encoding

Content-Type: text/html; charset=UTF-8


markdown:
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10
Bomtan.Org - Xem phim online miễn phí, chất lượng hình ảnh rõ nét, tốc độ tải phim nhanh. Bom Tấn tổng hợp có chọn lọc các phim từ nhiều nguồn trên internet (youtube, picasa,...) để mang đến cho các bạn những bộ
[, phim hành động](http://bomtan.org/the-loai/hanh-dong.html) [, các thể loại](http://bomtan.org/the-loai/vo-thuat.html) **phim võ thuật** [tình cảm hay nhất.](http://bomtan.org/the-loai/tam-ly.html) **phim tâm lý** [RSS](http://bomtan.org/rss.php)- [Sitemap](http://bomtan.org/sitemap.xml)
© 2015 BomTan. All Rights Reserved. Website thử nghiệm với mục đích giao lưu học hỏi, đang chờ xin giấy phép.


markdown:
|
|
## Ranieri nắn gân Mourinho: Thù này phải trả
|
|
Thứ sáu, 23/09/2016 08:25
|
|
## Chiến lược gia người Italia tuyên bố đã sẵn sàng đòi lại món nợ trước Jose Mourinho sau thất bại ở Siêu cúp Anh hồi đầu mùa.
|
|
Ở trận đấu đầu tiên của mùa giải mới 2016-17 (Community Shield), Leicester City đã để thua Man Utd với tỷ số 1-2. Từ kết quả thất vọng này, thầy trò Claudio Ranieri đã khởi đầu không tốt ở mùa giải mới khi liên tiếp để thua Hull City, bị Arsenal cầm hòa tại sân nhà và sau đó thảm bại 1-4 trên sân Liverpool.
Nhưng hiện tại, Leicester City đã lấy lại cảm hứng nhờ 2 chiến thắng với cùng tỷ số 3-0 trước Brugge (Champions League) và Burnley (Premier League). Đáng chú ý, ở trận gặp Burnley, bản hợp đồng kỉ lục của Leicester, Islam Slimani đã bùng nổ với cú đúp bàn thắng.
Với sự hưng phấn trở lại, HLV Claudio Ranieri không ngần ngại tuyên bố sẽ trả thù Man Utd. Chiến lược gia người Italia tỏ ra khá tự tin dù ông và các học trò phải làm khách tại Old Trafford.
“Man Utd đã đánh bại chúng tôi ở Community Shield nên tất nhiên chúng tôi muốn trả thù. Hiện tại, chúng tôi đang thể hiện phong độ tốt nên cần phải giữ vững động lực ấy cho trận đấu tới. Thể lực của các cầu thủ cũng đã tốt hơn thời điểm cách đây 1 tháng khi mùa giải mới bắt đầu. Quan trọng nhất là các cầu thủ đã cảm thấy tự tin hơn sau khi giành các kết quả tốt.
Chúng tôi sẽ chơi vì chiến thắng. Đó là triết lý của chúng tôi, không sợ bất cứ ai cả. Tại sao bạn phải sợ hãi khi tới đó (Old Trafford)? Khi thi đấu với các đội bóng lớn, bạn phải tin vào khả năng và sức mạnh của mình. Bạn phải hy vọng rằng họ sẽ chơi tệ để mà ghi bàn”, HLV Claudio Ranieri chia sẻ trước trận gặp Man Utd.
Cơ hội gây bất ngờ của Leicester City không phải là không có bởi hiện tại, Man Utd đang gặp nhiều vấn đề, cả về tinh thần lẫn lối chơi khi để thua 3 trận liên tiếp trên mọi đấu trường.
|BẢN TIN 0H 23/9: Tôi sẽ uống với Mourinho|
|
|
Xuất bản: 117 ngày trước
|
|![]()
|
|
Tôi sẽ uống với Mourinho; Karanka thận trọng; Tuchel nhắc nhở học trò; Lukaku kịp trở lại; Zidane được tôn trọng, Emery trao cơ hội cho Ben Arfa… là những tin chính trong bản tin 0h hôm nay.
|Bạn trai cũ của cựu Hoa hậu chế nhạo C.Ronaldo|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Trên trang Instagram, bạn trai cũ của cựu Hoa hậu Tây Ban Nha, Desire Cordero đã làm video chế nhạo Ronaldo…
|Trước vòng 6 Premier League: Chưa ổn đâu, Mou|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Sau chiến thắng trước đội hạng 3 Northampton ở League Cup, Jose Mourinho đã nhanh chóng hướng mũi giáo về giới mộ điệu đang chỉ trích ông và Man Utd. Nhưng có lẽ HLV người Bồ đã quá vội vàng…
|Tỷ phú Nigeria tuyên bố mua và chi đậm cho Arsenal|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Tỷ phú người Nigeria, ông Aliko Dangote tuyên bố sẽ sở hữu Arsenal trong vòng 3-4 năm tới.
|Ranieri nắn gân Mourinho: Thù này phải trả|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Chiến lược gia người Italia tuyên bố đã sẵn sàng đòi lại món nợ trước Jose Mourinho sau thất bại ở Siêu cúp Anh hồi đầu mùa.
|Wenger 20 năm tại Arsenal một huyền thoại|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Trong 2 thập kỉ đảm nhận vai trò “thuyền trưởng” của “Pháo thủ”, “Giáo sư” đã biến CLB này thành một thế lực ở bóng đá Anh.
|Lộ diện bến đỗ mới của HLV Louis van Gaal|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Theo báo giới Đức, Louis van Gaal sắp được bổ nhiệm vào chiếc ghế nóng tại Werder Bremen.
|Real nhận tin cực xấu từ Casemiro|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Real Madrid vừa đón nhận tin dữ từ tiền vệ Casemiro khi cầu thủ này sẽ phải ngồi ngoài khoảng 2 tháng vì chấn thương.
|Rooney lên tiếng sau hàng loạt lời chỉ trích|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Đội trưởng của Man Utd, Wayne Rooney đã lên tiếng sau khi phải nhận hàng loạt lời chỉ trích trong thời gian vừa qua.
|TRỰC TIẾP play-off: Cơ hội cho truyền nhân Thể Công|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
17h00 chiều nay, trên sân Chi Lăng (Đà Nẵng) sẽ diễn ra trận Play-off để xác định đội bóng giành quyền thi đấu tại Giải BĐ VĐQG 2017, giữa đội Long An và đội Viettel - truyền nhân của tượng đài Thể Công.
|BẢN TIN SÁNG 23/9: Pep Guardiola buồn|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Howe thay Wenger vào cuối mùa; Fabregas không muốn rời Chelsea; PSG đừng mong có Lewandowski; Pep Guardiola buồn,... là những nội dung chính trong bản tin sáng nay của Bóng đá số.
|Top 20 phát biểu của Wenger trong 20 năm ở Arsenal|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Cùng nhìn lại quãng thời gian 20 năm của HLV Arsene Wenger tại Arsenal qua những phát biểu nổi tiếng của nhà cầm quân này.
|20 năm Wenger - Arsenal: Đội hình vĩ đại nhất|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Arsene Wenger đã có tròn 20 năm dẫn dắt Arsenal và cho “ra lò” không ít ngôi sao hàng đầu thế giới. Vậy đâu là đội hình mạnh nhất có thể mà HLV đã có cùng Pháo thủ?
|Sau 20 năm, khuôn mặt Wenger biến đổi như thế nào?|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Sau 20 năm, HLV Arsene Wenger đã già đi rất nhiều nhưng chiếc ghế của ông ở Arsenal vẫn không thay đổi…
|Trước vòng 6 Serie A: Montella khó cứu Milan|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Quá khó để AC Milan có thể giành chiến thắng thứ 3 liên tiếp khi mà ở vòng 6 Serie A cuối tuần này, họ phải chạm trán Fiorentina tại Artemio Franchi.
|Tôi không bao giờ đổi cầu thủ của tôi để lấy Rooney|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
HLV Claudio Ranieri khẳng định, ông không muốn có Wanye Rooney trong đội hình.
|Trước vòng 6 La Liga: Đừng lo, đã có Neymar!|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Neymar sẽ có cơ hội chứng tỏ khả năng dẫn dắt hàng công Barca khi Leo Messi vắng mặt.
|Mourinho làm việc như điên trước đại chiến với Leicester|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Tờ Express cho hay, HLV Jose Mourinho cùng các cộng sự của ông đã làm việc liên tục trong 12 giờ đồng hồ để chuẩn bị cho trận đấu với Leicester.
|Mourinho chết đứng khi thấy tình cũ của Brad Pitt|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Jose Mourinho từng bị Jennifer Aniston - nữ minh tinh từng kết hôn với từ tử Brad Pitt hớp hồn.
|Mourinho muốn đấm vỡ mặt Wenger|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Trong cuốn sách có tên “Jose Mourinho: Up Close and Personal”, nhà báo Robert Beasley đã tiết lộ câu chuyện bí mật xung quanh mối quan hệ không tốt giữa HLV Mourinho và Wenger.
|‘Nếu Mourinho đến, tôi đã không phải rời Liverpool’|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Cựu cầu thủ Liverpool Danny Murphy tiết lộ, HLV Jose Mourinho từng rất buồn bã khi không được dẫn dắt Liverpool. Cũng theo Murphy thì anh đã không phải chia tay CLB nếu như Mourinho cập bến Anfield.
|“M.U phải để Wayne Rooney thi đấu”|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Chia sẻ trước báo giới, huyền thoại Man Utd, Paul Ince đã lên tiếng bảo vệ Wayne Rooney…
|20 năm Wenger - Arsenal: Sự vĩ đại của “Người vô danh”|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Ở thập kỉ thứ 2 dẫn dắt Arsenal, Arsene Wenger không còn thành công như trước. Nhưng nhìn lại sự thay đổi của Pháo thủ sau 20 năm, có thể khẳng định Giáo sư đã làm được những điều phi thường khi tới London từ 1 con người mà chẳng ai biết đến…
|Những pha bóng 'điên rồ' trong môn Futsal.|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Những pha bóng 'điên rồ' trong môn Futsal.
|Arsenal dính điềm gở ở đại chiến Chelsea|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Thống kê chỉ ra rằng Arsenal chưa từng giành chiến thắng trong các trận đấu mà trọng tài Michael Oliver bắt chính.
|Man City có thể bị cấm chuyển nhượng|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Man City bị cáo buộc mua Benjamin Garre khi tiền vệ này chưa đủ 16 tuổi.
|Giọng nói của Ibra như ‘Kẻ huỷ diệt’|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Không chỉ các đồng đội ở Man United, mà đối thủ của Zlatan Ibrahimovic cũng nể phục trước cái uy rất lớn của tiền đạo người Thuỵ Điển.
|Arsenal và cơn ác mộng mang tên Chelsea|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Theo thống kê, Arsenal đã trải qua 5 năm không thể hạ gục Chelsea ở Premier League…
|Sốc với lý do Adebayor bị Lyon loại ngay 'vòng phỏng vấn'|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
HLV của Lyon, ông Bruno Génésio vừa tiết lộ lý do vì sao ông không chiêu mộ cựu tiền đạo Arsenal và Man City, Adebayor.
|Mourinho muốn đấm vỡ mặt, Wenger nói gì?|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
HLV Arsenal, Arsene Wenger đã từ chối bình luận về thông tin Jose Mourinho muốn đấm vỡ mặt ông bên ngoài sân cỏ.
|Chơi bài ngửa, Schweinsteiger đòi M.U đền bù 13,8 triệu|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Tin từ Squawka cho hay, tiền vệ người Đức Schweinsteiger đã sẵn sàng rời Man United càng sớm càng tốt.
|Người Barca phải dùng chiêu mới mua được Ronaldo|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Cựu Phó Chủ tịch của Barca, Joan Gaspart từng phải cải trang để thuyết phục "Người ngoài hành tinh" đến với Nou Camp.
|BẢN TIN TỐI 23/9: Vụ M.U -Ramos đổ vỡ vì Mourinho|
|
|
Xuất bản: 116 ngày trước
|
|
Walker kí HĐ mới; Douglas làm thương chính mình; Nani không muốn rời Man United; Mou từng nhắm mua Rooney..., là những nội dung chính trong bản tin tối nay của BĐS.
|Thua đau hiệp phụ, Viettel lỡ hẹn V-league|
|
|
Xuất bản: 116 ngày trước
|
|![]()
|
|
Long An đã giành vé trụ hạng ở V-league sau khi đánh bại Viettel trong trận play-off diễn ra chiều tối nay.
|boymêgái
||
|
|-->KIM$ĐIỀN<--
||
|
|doicanhhaiau
||
|
|Át-xê Dâm dê
||
|
|longfanmu
||
|
|trolaivanguyhiemhon8
||
|
|đàn ông chân chính
||
|
|BA...BA...GIẾT RÙA
||
|
|♥R10♥
||
|
|
|

Cache-Control: no-cache


markdown:
HỖ TRỢ KHÁCH HÀNG
TRỢ GIÚP
TÀI KHOẢN CỦA BẠN
BOOKBUY
DANH MỤC PHỔ BIẾN
(bỏ chặn popup trình duyệt để có thể share)
Nhập mã tại khâu thanh toán
Nhập Email nhận mã voucher
Đăng ký nhận bản tin Bookbuy


markdown:
{{productItem.Title}}
{{productItem.DescriptionOnlyText}}...
[Xem thêm]({{productItem.Link}})
{{productItem.RealPriceStr}}₫ {{productItem.PriceStr}}₫
{{productItem.DiscountPercent}} %
Màu sắc:
Chọn kiểu dáng:
Size:
- {{item.Name}}
{{productItem.HasGift}}
## Nhận xét của khách hàng


markdown:
![ chinhkhtn](http://buiphan.net/styles/qduy/xenforo/avatars/avatar_l.png)
- Hoạt động cuối:
- 26/4/11
- Tham gia ngày:
- 26/4/11
- Bài viết:
- 0
- Được thích:
- 0
- Điểm:
[0](members/chinhkhtn.9665/trophies)
- Sinh nhật:
- 13/11/87 (Tuổi: 29)
### Chia sẻ trang này
# chinhkhtn
Thành viên, 29
- chinhkhtn được nhìn thấy lần cuối:
- 26/4/11
-
- Đang tải...
- Đang tải...
-
### Giới thiệu
- Sinh nhật:
- 13/11/87 (Tuổi: 29)
### Tương tác
- Đang tải...

Cache-control: private, max-age=0

Server: LiteSpeed

X-Frame-Options: SAMEORIGIN

Accept-Ranges: bytes


markdown:
[](http://cafeso.info)
![ Trang chủ cafeso.info](skin/cafeso/img/pixel.gif)
Thể loại:
**Phim 18+**
Lượt xem:
**376504**
Thể loại:
**Phim 18+**
Lượt xem:
**201682**
Thể loại:
**Phim 18+**
Lượt xem:
**118305**
Thể loại:
**Hoạt Hình**
Lượt xem:
**1270**
Thể loại:
**Phim 18+**
Lượt xem:
**6793**
Thể loại:
**Phim 18+**
Lượt xem:
**36676**
Thể loại:
**Hành Động**
Lượt xem:
**7919**
Thể loại:
**Phim 18+**
Lượt xem:
**73060**
Thể loại:
**Phim 18+**
Lượt xem:
**272916**
Thể loại:
**Phim 18+**
Lượt xem:
**1175121**
Thể loại:
**Phim 18+**
Lượt xem:
**358753**
Thể loại:
**Phim 18+**
Lượt xem:
**453747**
Thể loại:
**Hoạt Hình**
Lượt xem:
**72009**
Thể loại:
**Hài Hước**
Lượt xem:
**18827**
Thể loại:
**Bộ Trung Quốc**
Lượt xem:
**26627**
Thể loại:
**Hành Động**
Lượt xem:
**6920**

Server: Apache

Vary: Accept-Encoding,User-Agent


markdown:
Lưu video
Bạn phải đăng nhập để sử dụng chức năng này. Xin vui lòng Đăng nhập tại đây!
Lựa chọn các vi phạm
Link hỏng
Video không đúng nội dung, spam, gây hiểu nhầm
Video phản cảm, đồi trụy, kích động bạo lực
Bản quyền video
Khác

Content-Type: text/html

Server: SERVER


markdown:
+ Tên game:
*SoulCarft Action APg Game*
+ Hỗ Trợ:
*Android*
+ Upload: choang321.pro
![ tai game soulcaft mien phi](http://choang321.pro/wp-content/uploads/2013/08/game-hanh-dong-soulcraft-cho-android-85144.jpg)
Tải Game Hành Động SoulCraft Kinh Điển Cho android
+
* Game là SoulCarft Action APG* *game hành động kinh điển*đang làm mưa làm gió trên thị trường [android](http://choang321.pro/android)hiện nay với cách tính năng độc đáo, đồ họa 3D,.. ![ game hanh dong soulcraft cho android](http://choang321.pro/wp-content/uploads/2013/08/game-hanh-dong-soulcraft-cho-android-50437.jpg)
Game Hành Động Kinh Điể SoulCraft Action Miễn Phí
+ Trong Game, Bạn sẽ đóng vai một thiên thần chống lại con người để duy trì sự bất tử của mình
![ tai game soulcraft cho android](http://choang321.pro/wp-content/uploads/2013/08/game-hanh-dong-soulcraft-cho-android-58258.jpg)
Game Hành Động Nhập Vai SoulCraft Action Cho Android
+ Hãy tham gia ngay và trải nghiệm sự độc đáo cảu SoulCraft nhé
**Download**


markdown:
Đăng nhập hoặc Đăng ký
Cộng Đồng Mobile Việt | ChoiMobile.VN
Trang chủ
Diễn đàn
>
Trung tâm thương mại
>
ANH EM CHÚ Ý CHỈ SỬ DỤNG CÁC HOST SAU ĐỂ UPLOAD/DOWNLOAD FILE !
Fshare
Google Drive
Android File Host
Dismiss Notice
Bán điện thoại
Trang 287/550
< Trước
1
←
285
286
287
288
289
→
550
Tiếp >
Sort by:
Tiêu đề
Ngày gửi
Trả lời
Đọc
Bài viết cuối ↓
Bán samsung galaxy j docomo sc-02f mới 100% fullbox giá rẻ nhất hcm
smartphonegiare
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
403
smartphonegiare
21 Tháng 1 2015
iPhone4 4S máy zin chưa sửa chữa giá tốt nhất SG
zomano
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
293
zomano
21 Tháng 1 2015
samsung galaxy s4 e330 like new 99% fullbox giá rẻ tại hcm
smartphonegiare
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
643
smartphonegiare
21 Tháng 1 2015
Bán điện thoại sony xperia Sp mới 100% fullbox giá rẻ tại hcm
smartphonegiare
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
301
smartphonegiare
21 Tháng 1 2015
bán iphone 5 16gb trắng 5tr400
appledongxoai
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
288
appledongxoai
21 Tháng 1 2015
NaNo Kim Cương chống nước có mặt đầu tiên về việt nam
taochat
,
17 Tháng 1 2015
Trả lời:
3
Đọc:
387
taochat
21 Tháng 1 2015
NaNo Kim Cương Chịu Nước Cao Đã có Mặt Tại Việt Nam ^^
taochat
,
17 Tháng 1 2015
Trả lời:
5
Đọc:
427
taochat
21 Tháng 1 2015
Nhật Cường Mobile tưng bừng khai trương Showroom thứ 10 tại số 2 Chùa Bộc, Hà Nội
Nhatcuong_mobile
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
1,686
Nhatcuong_mobile
21 Tháng 1 2015
Giá tốt máy đẹp: iPhone 4/4s 5/5s bản quốc tế!
trinh_apple
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
356
trinh_apple
21 Tháng 1 2015
Iphone 4s 32g trắng bản quốc tế .mới 99% giá tốt cho m.n đây...
letrung.jr
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
282
letrung.jr
21 Tháng 1 2015
điện thoại sony xpoeria zl2 sol25 mới 100% fullbox giá rẻ tại hcm
smartphonegiare
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
379
smartphonegiare
21 Tháng 1 2015
Cần bán iphone 4s 32g đen. Bản quốc tế giá bình dân đây....
letrung.jr
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
357
letrung.jr
21 Tháng 1 2015
bán nhanh lô iphone 5 màu trắng 32gb giá tốt
hoangnhokkakakaka
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
272
hoangnhokkakakaka
21 Tháng 1 2015
vài cây iphone 4s đen 32gb cần bán
hoangnhokkakakaka
,
21 Tháng 1 2015
Trả lời:
0
Đọc:
256
hoangnhokkakakaka
21 Tháng 1 2015
THANH LÝ - IPhone 5S, bản QT, Nguyên zin, likenew , giá chỉ 7,900,000
Tambui
,
20 Tháng 1 2015
Trả lời:
8
Đọc:
540
Tambui
20 Tháng 1 2015
XÃ HÀNG LỚN ~ Iphone 4s , bản Quốc tế, Nguyên zin, giá chỉ 3tr100
Tambui
,
20 Tháng 1 2015
Trả lời:
8
Đọc:
424
Tambui
20 Tháng 1 2015
Bán IPhone 5s 32gb TRẮNG , Máy cực đẹp , Giá cực TỐT , hàng XỊN , ZIN nha !!!
APPLE-Duong
,
20 Tháng 1 2015
Trả lời:
9
Đọc:
463
APPLE-Duong
20 Tháng 1 2015
Bán lỗ vốn IPhone 4s cũ // TRẮNG ĐEN // ngoại hình đẹp 99% , Bao ZIN
APPLE-Duong
,
20 Tháng 1 2015
Trả lời:
9
Đọc:
476
APPLE-Duong
20 Tháng 1 2015
XẢ KHO ĐÓN TẾT : IPhone 4 / IPhone 4s Quốc Tế Cũ Máy Chất Gía Rẻ
APPLEnhi
,
20 Tháng 1 2015
Trả lời:
5
Đọc:
429
APPLEnhi
20 Tháng 1 2015
THANH LÍ : IPhone 5s Cũ Quốc Tế Gía Rẻ Bèo
APPLEnhi
,
20 Tháng 1 2015
Trả lời:
5
Đọc:
463
APPLEnhi
20 Tháng 1 2015
Bán điện thoại nokia 8800 gold arte chính hãng mới 100% fullbox giá rẻ
smartphonegiare
,
20 Tháng 1 2015
Trả lời:
0
Đọc:
525
smartphonegiare
20 Tháng 1 2015
Iphone 5 16g đen,bản quốc tế.bao zin.bao rẻ đây ae ơi.....
letrung.jr
,
20 Tháng 1 2015
Trả lời:
0
Đọc:
317
letrung.jr
20 Tháng 1 2015
Bán điện thoại samsung galaxy j docomo sc-02f mới 100% fullbox giá rẻ
smartphonegiare
,
20 Tháng 1 2015
Trả lời:
0
Đọc:
398
smartphonegiare
20 Tháng 1 2015
Mua Smartphone đi London xem Ngoại hạng
Nhatcuong_mobile
,
8 Tháng 1 2015
Trả lời:
1
Đọc:
1,063
lephonghau
20 Tháng 1 2015
RỘN RÀNG ĐÓN XUÂN-NGẤT NGÂY QUÀ TĂNG CÙNG GIONEE TẠI HỒNG YẾN MOBILE ĐÀ NẴNG
hongyen43h
,
20 Tháng 1 2015
Trả lời:
0
Đọc:
435
hongyen43h
20 Tháng 1 2015
Hiển thị chủ đề từ 7,151 đến 7,175 của 13,744
Tùy chọn hiển thị chủ đề
Xếp chủ đề theo:
Lần gửi bài cuối
Thời gian tạo chủ đề
Tiêu đề (sắp xếp ABC)
Số lượng trả lời
Số lượt xem
Bài viết đầu được yêu thích
Xếp chủ đề kiểu:
Thứ tự giảm dần
Thứ tự tăng dần
Tiền tố:
(Mọi)
QUY ĐỊNH
THÔNG BÁO
Quảng Cáo
Khuyến Mãi
Rom
Đang tải...
(Bạn phải Đăng nhập hoặc Đăng ký để đăng bài viết)
Xem nội dung này
Trang 287/550
< Trước
1
←
285
286
287
288
289
→
550
Tiếp >
Login with Facebook
Log in with Google
Tên tài khoản hoặc địa chỉ Email:
Bạn đã có tài khoản rồi?
Tích vào đây để đăng ký
Vâng, Mật khẩu của tôi là:
Bạn đã quên mật khẩu?
Duy trì trạng thái đăng nhập
Cộng Đồng Mobile Việt | ChoiMobile.VN
Trang chủ
Diễn đàn
>
Trung tâm thương mại
>
Trang chủ
Trang chủ
Liên kết nhanh
Hoạt động gần đây
Có gì mới?
Trợ giúp
Diễn đàn
Diễn đàn
Liên kết nhanh
Tìm kiếm diễn đàn
Recent Posts
Thành viên
Thành viên
Liên kết nhanh
Notable Members
Thành viên đã đăng ký
Đang truy cập
Hoạt động gần đây
Menu
Tìm kiếm
Chỉ tìm trong tiêu đề
Được gửi bởi thành viên:
Dãn cách tên bằng dấu phẩy(,).
Mới hơn ngày:
Search this forum only
Hiển thị kết quả dạng Chủ đề
Tìm kiếm hữu ích
Recent Posts
Thêm...
Đang tải...

Set-Cookie: xf_brsa_count=1; expires=Wed, 17-Jan-2018 07:52:40 GMT; Max-Age=31535999; path=/

Server: nginx