How to Read a Research Paper

How to Read a Research Paper

연구 논문은 어떻게 읽어야 하는가

(Original Text by Bill Griswold, revised by Gail Murphy and Christina Conati)

(Modified by Charles Rich, January 2008) 

Reading research papers effectively is challenging. These papers are often written in a very condensed style because of page limitations and the intended audience, which is assumed to already know the area well. Moreover, the reasons for writing the paper may be different than the reasons the paper has been assigned, meaning you have to work harder to find the content that you are interested in. Finally, your time is very limited, so you may not have time to read every word of the paper or read it several times to extract all the nuances. For all these reasons, reading a research paper can require a special approach. 

연구논문을 효과적으로 읽는건 쉽지 않다. 이러한 논문들은 종종 페이지 제한으로 인해 매우 함축적이거나 이미 그 분야의 지식을 잘 아는 청중들을 대상으로 쓰여진다. 게다가, 그 논문을 쓰는 이유는 당신이 찾으려는 내용과는 다를 것이다. 결과적으로, 당신의 시간은 제한되어있고, 당신은 그 논문의 모든 내용을 읽거나 모든 늬앙스를 찾아내기 위해 몇번이고 읽을 시간은 없을 것이다.

The first thing to understand is that the research papers you will read have been published in different kinds of places. Some papers have been published in the proceedings of a conference. These papers have been peer-reviewed but are typically strictly limited in length to about 10-12 pages. Other papers have been published in archival journals. These papers have also been peer-reviewed but there are typically not any length restrictions, so they generally include more detail in every dimension. Some papers are technical reports. These are not peer-reviewed. In areas related to Computer Science, you may find that there is first a technical report version which is then later published in a conference or a journal. If a paper appears both in conference and journal form, the journal version is typically a later, expanded and revised version of the work. 

첫번째로 이해해야 할 것은 당신이 읽게 될 연구논문들은 제각기 다른 장소에서 출판되어왔는 것이다. 몇몇 논문들은 강연에서 쓰여지기 위해 작성됐다. 이런 논문들은 동료들의 검토를 받았지만 일반적으로 10~12페이지로 엄격하게 제한되어있다. 다른 논문들은 출판물들 안에서 작성된다. 이런 논문들도 동료들의 검토를 받았지만 딱히 길이제한이 없으므로 더욱 자세한 정보들을 담는다. 몇몇 논문들은 기술 보고서이다. 이 논문들은 동료들의 검토를 받지 않는다. 컴퓨터 공학에 관련된 분야에서는, 나중에 강연이나 출판물에서 발표된 첫 버전의 기술 보고서를 볼 수 있을 것이다. 만약 논문이 강연과 출판물 두 곳에서 모두 나왔다면, 출판물에 나온 것이 개정되서 나온 더 최신 버전이다.

To develop an effective reading style for research papers, it can help to know what you should get out of the paper, and where that information is located in the paper. Typically, the introduction will state not only the motivations behind the work, but also outline the solution. Often this may be all the expert requires from the paper. The body of the paper states the authors' solution to the problem in detail, and should also describe a detailed evaluation of the solution in terms of arugments or an empirical evaluation (case study, experiment, etc.). Finally, the paper will conclude with a recap, including a discussion of the primary contributions. A paper will also discuss related work to some degree. Papers are often repetitive because they present information at different levels of detail and from different perspectives. As a result, it may be desirable, to read the paper ``out of order'' or to skip certain sections. More on this below. 

이러한 연구 논문들을 잘 읽기 위해서는, 당신이 그 논문으로 부터 무엇을 얻으려 하는지 아는것과 그 정보가 그 논문의 어디에 있는지 아는것이 많은 도움이 된다. 일반적으로, 도입부에서 그 일의 동기 뿐만 아니라 해결책의 개요까지 언급할 것이다. 이건 종종 모든 전문가들이 논문에서 요구하는 것이다. 논문의 본문에서는 저자의 해결책이 자세히 나와있고, 뿐만 아니라 해결책이나 경험적 평가(사례연구, 실험 등)에 대한 세세한 평가를 내린다. 마지막으로, 그 논문은 주요 해결책에 대한 논의와 요점을 되풀이하고 끝낸다. 논문은 어느 정도 관련된 일에 대한 설명도 한다. 논문들은 다른 수준의 세부사항과 다른 관점에서 정보를 제시하므로 종종 반복적으로 서술한다. 결과적으로, 논문을 읽을 때 순서를 바꾸거나 특정 부분을 건너뛰는 것이 더 바람직할 수 있다. 이 아래에 자세히 설명한다.

The questions you want to have answered by reading a paper are the following: 

당신이 논문을 읽고 대답하고 싶은 질문은 다음과 같다:

What are motivations for this work? For a research paper, there is an expectation that a solution to a problem has been found that no one else has published in the literature. The paper should describe why the problem is important and why it does not have a trivial solution; that is, why a new solution may be required. Implicitly there is implication that previous solutions to the problem are inadequate. Occasionally an author will fail to state either point, making your job much more difficult. 

What is the proposed solution? This is also called the hypothesis or idea. There should also be an argument about why the solution solves the problem better than previous solutions. There should also be a discussion about how the solution is achieved (designed and implemented) or is at least achievable. 

이 일의 동기가 무엇인가? 연구 논문에선, 문제에 대한 해결책이 다른데서는 나오지 않았던 것을 기대한다. 그 논문은 왜 그 문제가 중요하고 왜 사소한 해결책이 없는가; 즉, 왜 새 해결책이 필요한가를 제시하여야 한다. 그 문제에 대한 이전의 해결책이 부적절하다는 암시가 내포되있다. 때때로 저자는 그 두가지를 전하는데 실패해 당신의 일을 더 어렵게 만들 수 있다. 제안된 해결책은 무엇인가? 이것은 또한 가설 혹은 아이디어 라고 불린다. 왜 그 해결책이 이전의 해결책보다 더 문제를 잘 해결하는지에 대한 근거가 있어야 한다. 또한 어떻게 그 해결책이 성공할 수 있는지 혹은 최소한 가능한 것인지에 대한 의견이 있어야 한다.

How is the proposed solution evaluated? An idea alone is usually not adequate for publication of a research paper. What argument and/or experiment is made to make a case for the value of the ideas? What benefits or problems are identified? Are they convincing? 

제시된 해결책을 어떻게 평가하는가? 혼자만의 아이디어는 연구 논문의 출판에 부적절하다. 어떤 논의 혹은 실험이 아이디어의 가치에 대한 정당함을 입증할 수 있는가? 어떤 이익이나 문제가 식별되는가? 그들은 설득력이 있는가?

How does the proposed solution relate to other proposed solutions? If this is an important problem, other researchers have probably also tried to solve it. How do the alternative approaches compare to this one? Has this work already been done? Don't limit yourself to the related work references cited by the authors. 

제시된 해결책이 다른 해결책과 어떤 관련이 있는가? 만약 이것이 중요한 문제라면, 다른 연구자들도 그 문제를 해결하려 했을 것이다. 어떻게 대안책을 이것과 비교하는가? 이 일이 이미 끝났는가? 저자가 인용한 관련 자료에 스스로를 제한하지 말라.

What are the contributions? The contributions in a paper may be many and varied. Ideas, software, experimental techniques, and area survey are a few key possibilities. 

공헌한 바가 무엇인가? 논문의 공헌은 많고 다양할 수 있다. 아이디어, 소프트웨어, 실혐 방법, 지역 설문조사 등이 될 수 있다.

What are future directions for this research? Not only what future directions do the authors identify, but what ideas did you come up with while reading the paper?

이 연구의 연구 방향은 무엇인가? 저자가 발견한 연구 방향 뿐만 아니라 당신이 그 논문을 읽는 동안 어떤 아이디어를 생각해 냈는가?

As you read or skim a paper, you should actively attempt to answer the above questions. Presumably, the introduction should provide motivation. The introduction and conclusion may discuss the solutions and evaluation at a high level. Future work is likely in the concluding part of the paper. The details of the solution and the evaluation should be in the body of the paper. You may find it productive to try to answer each question in turn, writing your answer down. In practice, you are not done reading a paper until you can answer all the questions.

당신이 논문을 읽거나 훑어볼때 당신은 위의 질문들에 대한 답을 생각해 보아야 한다. 아마, 도입부분에서 동기를 부여해야 한다. 도입부와 결론에서 높은 수준의 해결책과 평가를 논의할 것이다. 향후 연구는 논문의 결론 부분일 가능성이 높다. 해결책과 평가에 대한 세부사항은 논문의 본문에 있어야 한다. 당신은 각 질문에 차례로 답을 적어가며 대답하려 노력하는것이 결실있다는 것을 찾을 수 있을 것이다. 실제로, 당신이 모든 질문에 대답할 수 일을 때 까진 논문을 다 읽은 것이 아니다.