| 내용 |
□ 목적 - 결정 지원 수단으로서 지표의 사용에 대한 16명의 전문가 그룹의 지침을 제공함 - 국제 협력과 최상의 평가를 위해 제안된 전문가 그룹의 지혜와 조언을 포함함 ○ 발견 연구(Discovery research) - 인간의 창조성과 독창성의 표현임 - 사회적 안정성, 경제적 활기, 국가 및 국제적 안보를 파생시킴 - 자연과학공학(NSE, natural sciences and engineering)의 발견 연구는 많은 공공재 창출의 핵심 동력원임 - 자연과학공학 연구위원회(NSERC, Natural Sciences and Engineering Research Council)의 과학 연구 자금인 약 100억 달러의 3분의 1 이상이 발견 보조금 프로그램(DGP, Discovery Grants Program)을 통해 발견 연구 지원에 직접 사용됨 □ 발견 연구를 위한 과학 지표 및 평가 전략 ○ 기존 과학 지표 및 평가 전략은 다양한 방식으로 분류될 수 있음 ○ 이는 동료 및 전문가 검토와 같은 심의 방법에 기초한 것과 발행 및 인용 수, 연구원이나 학생 수, 연구 자금액, 보조금 신청을 포함하는 수치 지표에 기초한 것을 포함함 ○ NSE 연구 자금 할당 결정을 위해 연구 질, 연구 동향 및 연구 역량에 대한 정보를 포함한 일련의 지표가 요구됨 □ 주요 조사결과 ○ 많은 과학 지표 및 평가 방법은 국가적으로 종합적 분야에서 NSE의 과학 수행 평가를 위해 사용하기에 충분히 강건함 ○ 수치 지표는 연구 자금 할당을 위한 과학 평가 상황에서 전문적 평가를 대체하기보다는 정보를 제공하기 위해 사용되어야 함 ○ 국제적 ldquo;최우수 사례 rdquo;는 과학 지표 사용과 평가 전략에 관한 제한된 관점을 제공함 ○ 수치 지표에 대한 직접적 연구 자금 할당 계획은 너무 단순하며 현실적 전략이 아님 □ 과학 평가를 위한 지침과 원칙 ○ 상황이 중요함: 상황 의존적인 지표 및 평가 전략의 효율적 사용을 위해 접근법은 조직과 자금 프로그램의 목표 및 우선순위뿐만 아니라 국가 과학기술 목표 또한 고려해야 함 ○ 해를 끼치지 말라: 연구 위원회에 의도치 않게 끼칠 수 있는 부정적 영향을 완화하기 위해 전문가그룹이 식별한 유망한 전략들은 균형적 지표와 평가 과정에서의 전문적 판단에 의지해야 함 ○ 투명성이 중요함: 과학 공동체에 대해 평가 방법, 지표, 검사, 자료의 출처, 기준, 전문 검토자 선정 절차 등에 있어 투명해야 함 ○ 과학적 전문가의 판단은 매우 중요함: 관련 연구 분야에서의 섬세한 지식과 경험을 갖추고, 연구 자금 상황 및 과학적 이슈, 문제, 의문 및 시급한 기회에 대해 심도 있고 미묘하게 이해하는 과학적 전문가에 의해 수치 지표는 가장 잘 설명됨 □ 방법론적 지침 요약 ○ 연구 질 평가를 위한 지표 - 심의 방법과 수치 지표의 균형 있는 결합이 가장 강력한 접근법임 - 상대적이고 분야 표준적 인용에 기초한 지표들이 가장 유용한 측정 기준을 제공함 - 연구 질의 수치 지표는 항상 정보 제공 전문가의 검토에 의해 평가되어야 함 ○ 연구 동향 평가를 위한 지표 - 연구 주제별 보조금 신청 동향: 자금 요청에 직접 관련된 연구 동향 수집은 전 분야에서의 자원의 직접적 수요와 관련된 동향을 그 과정에 반드시 포함해야 함 - 계량서지학적 방법: 핵심어 분석과 많이 인용된 신흥 연구 클러스터 식별에 기초한 선진 계량서지학적 접근법은 보다 상세한 수준에서 유용한 관점을 제공함 - 학생 인구: 분야별 박사 학위 등록율과 같은 지표에 의해 수집된 학생 인구 동향은 장기적 연구 동향을 예측하고 시간에 걸친 훈련 및 전문적 지식의 수준 변화를 관찰하는 데 유용할 수 있음 ○ 연구 역량 평가를 위한 지표 - 자금: 연구 자금 수준 측정은 연구 역량 분석, 특히 과거 자금 수준과 기타 연구 부문과의 비교에 있어 유익함 - 인프라: 연구 인프라 및 시설의 범위와 질은 역량의 직접적 결정요인임 - 연구원과 학생의 수: 연구 역량의 핵심 요인으로, 이에 기초한 측정 기준은 이러한 평가 형태에 중요한 면임 - 연결망 및 협력: 논문 공동 저술과 같은 연구 협력과 연결망의 형태는 연구 역량에 통찰력을 제공함 - 분야 특성: 평균 연구 팀 크기, 연구 보조금의 평균 크기 및 지속성, 재료 및 장비 집약성, 연구비용, 연구 시설에 대한 접근성과 같은 기준을 포함해야 함 [목차] 1. 도입 및 전문가 그룹의 임무 2. 과학 자금 및 평가: 캐나다 상황과 국제적 경험 3. 연구 자금 할당 과정 4. 과학 지표: 선택 사항 이해하기 5. 연구 질 평가를 위한 지표 6. 연구 동향 평가를 위한 지표 7. 연구 역량 평가를 위한 지표 8. 결론 참조 부록 A- 국제적 사례 연구: 사례 요약 |
