기간: 2022.05~2022.07
Unity(2020.3.7f1), Blender 프로그램 사용
- 항생제 내성균 실험
- 멸치 해부 실험
- +)7월 말~8월 초 aos, ios 출시 예정
- 학생들의 자기주도적 예/복습
- 교육 인프라적인 부분이 부족한 지역의 학생들에게도 쉽게 제공될 수 있는 실습 교육 플랫폼
- 과학실험 실습 뿐만 아니라 추후에 대학교나 기업의 실헙/실무 실습에도 적용 가능할 것
- 실제 서울에 위치한 고등학교에 1년 과정으로 적용한 후 효과성을 분석할 예정
실험 테이블을 놓을 때 처음 앱을 시작할 때의 방향으로만 놓여지는 문제
스마트폰 카메라의 방향을 실시간으로 받아와서 그 방향을 Spawn object에 반영해주면 해결할 수 있을 것이라 생각
PlacementIndicator.cs
private void PlaneIndication()
{
var screenCenter = ARCam.ViewportToScreenPoint(new Vector3(0.5f, 0.5f));
if (arRaycastManager.Raycast(screenCenter, hits, TrackableType.All) && spawnedObject == null)
{
Pose hitPos = hits[0].pose;
var cameraForward = ARCam.transform.forward;
var cameraBearing = new Vector3(cameraForward.x, 0, cameraForward.z).normalized;
hitPos.rotation = Quaternion.LookRotation(cameraBearing);
ARIndicator.SetActive(true);
ARIndicator.transform.SetPositionAndRotation(hitPos.position, hitPos.rotation);
placementPoseIsValid = hits.Count > 0;
if (spawnedObject == null && placementPoseIsValid && Input.touchCount > 0 && Input.GetTouch(0).phase == TouchPhase.Began)
{
spawnedObject = Instantiate(arObjectToSpawn, ARIndicator.transform.position, Quaternion.LookRotation(cameraBearing));
guideCanvas.SetActive(false);
}
}
else
{
ARIndicator.SetActive(false);
}
}- ARCam(스마트폰 카메라)의 정면 방향을 받아와서 x축과 z축을 cameraBearing에 저장
var cameraForward = ARCam.transform.forward;
var cameraBearing = new Vector3(cameraForward.x, 0, cameraForward.z).normalized;- 그 후 hitPose의 rotation을 ARCam이 보는 방향을 보도록 설정한다
hitPos.rotation = Quaternion.LookRotation(cameraBearing);멸치 해부 실험에서 핀셋을 드래그하여 비커 위로 옮길 때 3개의 축이 모두 움직여지기 때문에 z축으로 인해 핀셋이 비커 뒤로 가게 되는 문제
z축이 움직여질 필요는 없기 때문에 z축을 고정해주면 해결할 수 있을 것이라 생각
Z_Control.cs
public Vector3 startVec;
// Start is called before the first frame update
void Start()
{
startVec = gameObject.transform.localPosition; // 처음 z값
}
// Update is called once per frame
void Update()
{
Vector3 temp = gameObject.transform.localPosition;
temp.z = startVec.z; // temp를 계속 현재 gameObject의 위치로 바꿔주되, z는 startvec으로 설정 -> 이 녀석을 게임오브젝트의 위치로 설정
gameObject.transform.localPosition = temp;
}- z축을 고정하기 위한 오브젝트에 붙이는 스크립트로, 해당 오브젝트의 시작 localposition을 startVec에 담은 후
Update에서 해당 오브젝트의 위치를 계속 받아와서 temp에 저장, temp의 z축 position을 startVec의 z축으로 설정
그렇다면 x축, y축은 계속해서 해당 오브젝트의 위치를 따라가지만 z축만 처음 시작한 z축 위치를 유지할 수 있음
MainScene
- 각 실험 버튼을 Scroll Rect를 활용해 구성
- 원하는 실험의 버튼을 클릭
각 실험의 공통된 작업
스마트폰 카메라를 통해 평면을 인식하면 실험 테이블이 놓일 위치를 미리 보여줌
원하는 곳에 위치시킨 후 터치하면 테이블이 고정되어 위치함
테이블이 놓인 후 실험 시작
Exp1
- 텍스트, 음성 가이드에 따라 실험을 진행
- Scene1
스포이트를 드래그하여 배지 위에 옮겨놓은 후 손잡이 부분을 터치해 각 배지에 배양액을 떨어트린다 - Scene2
유리봉을 드래그하여 일반배지부터 각 배지를 도말한다
여기서 일반배지가 아닌 항생제 배지를 먼저 도말하려고 할 경우 일반배지가 깜빡이는 효과를 넣었다 - Scene3
각 배지를 터치해 뚜껑을 덮은 후 터치를 통해 각 배지를 배양기에 옮겨넣는다
이 Scene은 모든 상호작용을 터치+애니메이션으로 제작했다
배양기 문이 열려있지 않은 상태에서 배지를 옮기려고 할 경우 배양기가 깜박이는 효과를 넣었다 - Scene4
FadeIn, FadeOut 활용, 시계가 돌아가는 애니메이션을 통해 1일 후를 표현
배양기를 터치하여 배양기 문을 열고 배지를 가져온다
테이블에 놓고 관찰할 수 있고, 화면을 터치하면 실제 결과 사진을 보여준다
Exp2
- 텍스트, 음성 가이드에 따라 실험을 진행
- Scene0
핀셋을 드래그하여 비커 위로 옮기면 멸치가 비커 속으로 들어간다 불리는 게이지가 다 차면 핀셋을 터치하여 멸치를 건져올린다(게이지가 차기 전엔 핀셋의 Lean 컴포넌트를 꺼놓아 움직이지 못 하게 함) 테이블 위의 슬라이드 글라스에 불린 멸치를 옮겨놓는다 - Scene1
핀셋을 드래그하여 멸치의 겉부분을 걷어낸다 드러난 멸치의 장기와 유문수를 각각 드래그하여 떼어낸다 위를 터치하여 패트리 접시에 옮겨 담는다 멸치의 위가 너무 작기 때문에 편의를 위해 패트리 접시를 터치하여 확대되도록 했다 - Scene2
메스를 드래그하여 위를 가른다 - Scene3
가른 위를 터치하여 스포이트가 생기면 손잡이 부분을 터치해 물을 떨어트린다 - Scene4
스포이트를 드래그하여 위 내부의 내용물에 닿게 한 후 손잡이 부분을 터치해 빨아들인다
스포이트를 드래그하여 슬라이드 글라스 위에 놓인 후 손잡이 부분을 터치해 몇 방울 떨어트린다
슬라이드 글라스를 터치하여 커버 글라스를 씌운 후 또 한 번 터치해 현미경에 넣는다
현미경을 터치해 실제 결과 화면을 볼 수 있다
AppStore - 2023년 7월 이후 Apple Developer 계정 1년 만료 후 내려감
