KOMUNIKASYON BLACKBOX: 6 na Hakbang

2024 May -akda: John Day | [email protected]. Huling binago: 2024-01-30 13:13

KOMUNIKASYON BLACKBOX

ginawa ng koponan na "에이조 (Ajo)"

bakit blackbox

1) Pag-block sa umiiral na komunikasyon

2) Data ng archive ng dalawang tao na nakikipag-usap

Madalas kaming nabubuhay sa pag-iisip na 'nakikipag-usap' kami sa mga tao sa paligid natin. Ngunit nabubuhay kami na may iba't ibang mga halaga, at ang bawat isa ay maaaring magkaroon ng magkakaibang mga damdamin at saloobin kahit na pinag-uusapan natin ang parehong paksa sa proseso. Lumilitaw ang mga problema kapag hindi natin maintindihan pagkakaiba-iba ng bawat isa, na kung saan ay maaaring humantong sa isang pahinga sa komunikasyon. Nagsisimula kami sa kamalayan na ito ng problema, at nakikita namin ang mga halaga ng pisikal na impormasyong nakikipag-usap kami. Nais naming maranasan ang proseso ng komunikasyon muli sa pamamagitan ng pagpapakita nito bilang isa pang paraan ng komunikasyon.

Gamit ang FACE API, sensor ng pulso ng Arduino at RaspberryPi, ang proyektong ito ay sumubok ng isang bagong paraan ng pakikipag-ugnay sa pagitan ng mga tao.

Sa bawat magkakahiwalay na silid, ang dalawang kalahok ay nakikipag-ugnay sa bawat isa sa pamamagitan ng isang monitor, sinusuri ang mga emosyonal na halaga at rate ng puso ng bawat isa. Ang aming koponan ay naka-archive sa kanila upang pag-aralan kung paano nangyayari ang mga bagong pag-uusap sa pagitan ng mga tao sa pamamagitan ng mga computer at artipisyal na intelihensiya, at kung paano masusukat ang mga emosyon sa konteksto ng komunikasyon

Itim na kahon; 1) 기존 의 소통 방식 을 차단

2) 소통 하는 2 인의 데이터 를 아카이브

우리 는 흔히 주변 의 사람들 과 '소통' 한다고 생각 하면서 살아 간다. 하지만 우리 는 서로 다른 가치관 을 가지며 살아가고, 그 과정 에서 같은 주제 에 대해 이야기 해도 각자 다른 감정 과 생각 을 가질 수 있다. 문제 는 서로 의 다름 을 이해 하지 못할 때 나타나며, 이는 소통 의 단절 로 까지 이어 지기도 한다. 이러한 문제 의식 에서 출발 하여 소통 을 통해 나타나는 신체 정보 값 을 시각화 하고 이를 또 다른 소통 의 방식 으로 나타내면서 소통 의 과정 소통 새롭게 경험 하고자 한다.

MUKHING API 하며 서로 대화 를 진행 합니다. 팀 에이조 는 이를 아카이빙 하여 컴퓨터 와 인공 지능 을 통해 사람 사이 의 대화 가 어떻게 새롭게 진행 되는지, 소통 하는 상황 에서 어떠한 감정 들이 오고 가며 이를 측정 할 수 있는지 를 분석 하는 과정 을 거쳤 습니다.

Hakbang 1: Ano ang Kailangan Mo

* Raspberry Pi x 2

* raspberry pi cam X 2

* Arduino X 2

* sensor ng pulso * 2

* subaybayan ang X 2

* headphone X 2

* mikropono X 2

* ilaw X 2

* Amplifier

* desk

* paghati

* itim na tela

Hakbang 2: Pag-install

1. 책상 을 다른 책상 위에 올리고 네 면 을 검은 천 으로 막아 시야 를 차단할 수 있는 작은 방 을 만듭니다.

Ilagay ang iyong mesa sa isa pang desk at harangan ang apat na panig ng isang itim na tela upang lumikha ng isang maliit na silid na maaaring hadlangan ang pagtingin ng mga kalahok

2. 가운데 에 나무 판자 로 만든 칸막이 를 설치 하여 상대방 이 서로 의 얼굴 을 볼 수 없도록 합니다.

Sa gitna, mag-install ng isang pagkahati upang maiwasan ang ibang partido na makita ang mukha ng bawat isa

3. 라즈베리 파이 를 연결할 모니터 를 각각 설치 하고 뒷면 에 라즈베리 파이 와 카메라 를 부착 부착.

** 이때 라즈베리 파이 와 카메라 는 모니터 와 서로 반대 가 되도록 붙 입니다! 상대방 의 데이터 값 을 볼 수 있도록!

Ang bawat monitor upang ikonekta ang raspberry pie at ilakip ang raspberry pie at ang camera sa likuran

** Sa puntong ito, ilakip ang raspberry pie at ang camera sa tapat ng monitor! Upang payagan ang mga kalahok na tingnan ang mga halaga ng data ng ibang tao

4. 카메라 가 표정 을 잘 측정 할 수 있도록 조명 을 설치 합니다

I-install ang mga ilaw upang masukat ng camera ang ekspresyon ng mukha ng mga kalahok

5. 대화 시 사용할 헤드셋 과 마이크 를 각각 설치 하고, 앰프 와 연결 합니다.

I-install ang bawat headset at mikropono upang magamit sa pag-uusap, at kumonekta sa amplifier

Hakbang 3: Ang Code: FACE API

microsoft azure 에서 제공 하는 mukha api 를 사용 하여 8 가지 감정 값 을 추출해 냅니다.

(체험판 계정 을 통해 무료 로 이용할 수 있습니다)

추출한 감정 값 에 따라 변화 하는 그래프 를 만듭니다

Kumuha ng walong emosyonal na halagang ginagamit ang mukha api na ibinigay ng Microsoft Azure. (microsoft azure)

(magagamit nang walang bayad sa pamamagitan ng iyong trial account)

Lumilikha ng isang graph na nag-iiba ayon sa mga halagang nakuha

Hakbang 4: Ang Code: Pulse Sensor

아두 이노 를 라즈베리 파이 와 연결 합니다.

심박 센서 를 아두 이노 에 연결 합니다 검은 전선 은 GND 에 빨간 선 은 5V 핀 에 보라색 선 은 A0 핀 에 심박수 를 측정 하기 위해서 라이브러리 를 설치 해야 합니다. 첨부 된 링크 를 통해 다운 받을 수 있습니다. vnc 에 접속 하여 아두 이노 IDE 를 설치 하고, 'Pagkuha_BPM_to_Monitor' 예제 를 실행 하여 프로세싱 과 아두 이노 를 시리얼 통신 합니다. 프로세싱 에서 받아온 심박수 값 에 따라 사이즈 가 변화 하는 이미지 를 출력 합니다.

Ikonekta ang arduino sa raspberry pi

Ikonekta ang sensor ng pulso sa Arduino

Ang itim na linya ay para sa GND.

Ang pulang linya ay 5V.

Ang lilang linya ay nasa A0

I-install ang library upang masukat ang rate ng puso. Maaari mong i-download ito (pulse_library)

Kumonekta sa vnc, i-install ang arduino IDE, patakbuhin ang halimbawang 'Getting_BPM_to_Monitor' at Ikonekta ang pagproseso sa Arduino sa pamamagitan ng serial na komunikasyon

Lumikha ng mga imahe na nagbabago sa laki na may mga halaga ng rate ng puso sa pagproseso

Hakbang 5: Pagbabago ng Boses

1. 텍스트 입력 - 변화 - 다운로드 (tagasalin ng text-to-speech)

2. 참가자 들의 대화 를 끊어 줄 신호음 준비 (삡!)

3. 로직 을 이용한 트랙 만들기 (1 번, 2 번, 안내 맨트, 삡 소리 - 최소 4 개 트랙)

audio FX - pitch - pitch Shifter - mono (1, 2 번 트랙 음성 변조)

1, 2 번 트랙 녹음 버튼 활성화

모니터 화면 녹화 와 함께 시작.

1. Ipasok ang teksto - Baguhin - I-download

2. Maghanda ng isang tono upang putulin ang pag-uusap ng mga kalahok (PIP!)

3. Lumilikha ng isang track gamit ang lohika (Hindi. 1, 2, marka ng gabay, PIP - minimum ng 4 na mga track)

audio FX - shift ng pitch - mono (track 1, 2 boses na modulasyon)

Paganahin ang mga pindutan ng pagrekord ng track 1 at 2

Magsimula sa pag-record ng monitor screen

Hakbang 6: Subukan

모든 것이 준비 되면, 두가지 를 경험할 수 있습니다.

1. 커뮤니케이션 박스 안에 직접 들어가서 새로운 소통 방식 을 경험 해볼 수 있습니다.

2. 노트북 으로 vnc 접속 하여 연결된 모니터 를 관찰 하며 두 사람 이 소통 하는 과정 을 관찰 할 수 있습니다.

Kapag handa na ang lahat, maaari kang makaranas ng dalawang bagay

1. Maaari kang magpasok sa kahon ng komunikasyon at makaranas ng bagong komunikasyon sa pamamagitan ng pagsusuot ng mga headphone at pakikipag-usap sa iba

2. Ang screen sa monitor ay maaaring matingnan sa pamamagitan ng koneksyon ng Vnc sa laptop upang maobserbahan kung paano nagsasalita ang dalawang kalahok

ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ ㅡ

Ang aming koponan ay nagsagawa ng tatlong mga eksperimento, na nagbibigay ng mga sensitibong katanungan na karaniwang hindi madaling pag-usapan at obserbahan ang mga kalahok na pinag-uusapan ang tungkol sa kanila. Sa pamamagitan ng mga eksperimentong ito, napansin namin kung paano nakiramay ang mga kalahok sa bawat isa sa proseso ng pag-uusap, at kung paano iba ang kanilang pagsasalita mula sa kanilang mga isipan. Ang orihinal na hangarin ay tulungan kaming maunawaan ang bawat isa nang mas mahusay kapag pinag-uusapan namin sa pamamagitan ng pag-digitize ng mga emosyon at rate ng puso na lumilitaw sa proseso ng komunikasyon at mailarawan ang mga ito sa isang mas mahusay na paraan. Bagaman ito ay kagiliw-giliw, tila hindi ito nagkaroon ng direktang epekto sa pag-uusap ng mga tao sa mga tao tulad ng inakala nito, dahil ang resulta ng eksperimento ay maaari mong maunawaan ang mga emosyon, tulad ng damdamin, at pag-aalangan na mahirap obserbahan direkta

우리 팀 은 3 번의 실험 을 진행 했는데, 평소 에는 쉽게 이야기 할 수 없는 민감한 질문 들을 주고 참여자 들이 이에 대해 대화 하는 모습 을 관찰 했습니다.

이러한 실험 을 통해 우리 는 대화 를 하는 과정 에서 공감 하는 모습, 속마음 과 다르게 말하는 모습 등 을 관찰 할 수 있었습니다.

처음 에 계획 했던 의도 는 소통 하는 과정 에서 나타나는 감정 과 심박수 를 데이터화 하여 잘 알아볼 수 있도록 시각화 하여 대화 를 할 때 서로 이해 하고 소통 하는 데 에 도움 을 주는 것이 었 습니다. 직접 실험 을 진행 해본 결과 가시적 으로 공감, 망설임 등 여러 감정 들이 나타나는 모습 을 파악할 수 있어 이 점 은 흥미 로웠 으나 생각 했던 것 만큼 사람 과 사람 이 대화 를 하는 상황 에 직접적인 영향 을 주지 는 못했던 것 같기도 합니다