Tag Archives: 07. Validation

美 백악관 ‘인공지능의 미래를 위한 준비’ 보고서


AI시대를 맞이하여, 우리는 이제 시스템에 대해 의도된 대로 행동하는지의 여부를 검증할 수 없게 될 것이다.

또한 그 시스템이 과연 옳은 것이냐를 validation하는 것도 꽤나 어려운 일이 될 것이다.

게다가 기계가 어떤 생각을 해서 그 결정을 내렸을 때, 우리는 그 결정이 어떻게 해서 나오게 된 것인지를 한참 뒤에 판단을 할 수 밖에 없을 것이다.

verification 및 validation 입장에서는 꽤나 challenge가 될 것이다.

 

https://brunch.co.kr/@kakao-it/42

 

 

In the AI age, we will no longer be able to verify whether we are acting as intended for the system.

It would also be quite difficult to validate whether the system is correct.

In addition, when the machine makes its decision by thinking about something, we will be forced to make a decision long after the decision is made.

In terms of verification and validation, it will be quite a challenge.

 

https://brunch.co.kr/@kakao-it/42

 

Advertisements

미국발 ‘자율주행차 상용화’ 경쟁 본격 ‘점화’…”가이드라인 발표”


관련 링크: http://blog.naver.com/hkc0929

美 교통부, 자율주행차 가이드라인 공개

미국 교통부는 20일(현지시간) 자율주행차 개발업체와 탑승자가 지켜야 할 15개 수칙을 담은 가이드라인을 발표했다. 한국과 독일, 일본 등 유엔 전문가회의 참가국들이 자율주행차 공통기준을 마련하고 있는 가운데 미국 정부가 기술표준을 선점한 것이다. 

이 가이드라인은 자율주행차가 주변 차량을 인지하지 못하거나 오작동을 일으켰을 때 대처방안과 교통사고 발생 시 탑승자의 안전보장 및 디지털 해킹 방지대책 등을 문서화해 미국 교통부 산하 고속도로교통안전국(NHTSA)에 제출하도록 했다. 

또 자율주행차 판매 전 안전점검 사항을 의무적으로 공개하도록 했으며, 관련 소프트웨어(SW)를 업데이트할 때도 안전검사 승인과 같은 심사절차를 거치도록 했다. 

이와 함께 운전대와 가속.브레이크 페달이 없는 차량 개발과 주행을 허용했다. 인간 운전자는 단계적으로 배제하기로 했다. 즉 긴급상황 발생 시 인간 운전자에 의한 후속조치가 이뤄지지 않을 경우 ‘안전하지 않은 차’로 분류해 리콜대상에 포함키로 한 것이다. 다만 구글과 우버 등 ‘완전무인차’를 지향하는 업체의 기술개발 속도에 맞춰 완전자율주행차를 허용하는 방안도 가능성을 남겨뒀다. 

구글.테슬라.우버 등 자율주행차 사업 탄력

미국 교통부는 향후 60일 동안 업계 관계자와 여론을 수렴해 올 연말 최종 가이드라인을 확정할 방침이다. 이와 동시에 ‘2020년 완전자율주행차 시대 개막’을 외치고 있는 구글과 테슬라 등 15개 업체가 일제히 미국 캘리포니아주에서 자율주행차 시험운행에 돌입했으며, 우버는 지난 14일(현지시간)부터 미국 펜실베이니아주 피츠버그에서 자율주행 기반의 우버택시를 시범운행 중이다. 포드 자동차 ‘퓨전’을 개조한 ‘자율주행 우버택시’는 현지 승객이 스마트폰 애플리케이션(앱)으로 호출하는 형태다. 자율주행차의 안전성을 확보하기 위해 실제 도로에서 발생할 수 있는 각종 상황 데이터를 시시각각 확보하는 게 필수요소인데, 우버가 선도적으로 완성차업체와 손잡고 상시적으로 운영되는 테스트베드를 직접 구축한 것이다.

반면 국내 자율주행 기술은 미국, 독일 등에 비해 평균 3~4년가량 뒤처져 있다는 게 전문가들의 공통된 견해다. 현대.기아차가 지난해 12월 미국 네바다주에서 고속도로 자율주행 면허를 획득했지만 핵심 기술역량은 후발주자에 머물러 있다는 지적이다. 독자기술에 대한 집착과 지나친 순혈주의가 업종 간 협력체계 구축을 가로막고 있다는 우려도 나온다.

NHTSA의 가이드라인 site : 클릭

 

첫 인상은… Validation이 쉽지 않겠다는 것이다. E-OCVM이나 MAEVA와 같은 방식의 metrology적인 접근법을 통해서 확인해야 되지 않을까 생각한다.

통계적 접근방법도 필요할 수 있을 것으로 생각한다.

 

관련 링크: Challenges in Autonomous Vehicle Testing and Validation

 

 

 

Validation Management in an ATM Research Project


Abstract:

이 논문은 Mediterranean Free Flight(MFF)에서 사용된 validation process를 설명한다. MFF는 6년 ATM연구 프로젝트로 European Commission에서 지원하였고 운영 개념(Operational Concepts)과 분리 보증(separation assurance)과 관련된 작업의 위임을 통한 영공(airspace)의 더욱 효율적 사용을 위한 절차를 연구하였다. 최근의 validation연구의 initiatives에서 제안된 validation 접근법(특히 MAEVA에서)은 MFF에서 수정되었고, 통합되었고 적용되었다. 이 논문은 어떻게 프로젝트 validation objective가 식별되고 조사되었는지에 대해 설명한다. 목적은 MFF 운영 개념의 적절성을 판단하기 위해서 및 전체적인 ATM objective내의 관계를 판단하기 위해서이다. 그 다음 논문에서는 채택된 Validation process를 상세하게 설명하고 다른 단계에서 사용된 실제적인 방법의 사례, Validation Data Repository의 사용의 설명, Eurocontrol에 의해 개발된 정보 관리 자원을 보여준다. 목적은 Validation 결과의 수집, 비교, 통합을 지원하기 위해서이다. 이 논문은 Validation Process의 적용으로부터의 주요 피드백, Validation data repository의 사용을 보고하는 것으로 결론을 맺으며, 관련된 장점과 단점에 대해서 논의한다.