[P3] Week 2 Day 8

나며기·2021년 5월 5일
0

부스트캠프 AI Tech

목록 보기
66/79
post-thumbnail

가) 오늘 내 학습목표는 무엇이었나요?

  1. Dense Embedding + PORORO
  2. 제출 기회 5번 모두 사용하기

나) 오늘 나는 내 학습목표를 달성하기 위해 무엇을 어떻게 했나요?

  1. EM : 6.25%, F1 : 14.32%
  • Dense Embedding + PORORO
args = TrainingArguments(
        output_dir='dense_retireval',
        learning_rate=5e-5,
        per_device_train_batch_size=4,
        num_train_epochs=1,
        fp16 = True,
        dataloader_num_workers=4
        )
  1. EM : 5.42%, F1 : 8.68%
  • Dense Embedding + PORORO
  • monologg/kobert
args = TrainingArguments(
        output_dir='dense_retireval',
        learning_rate=5e-5,
        per_device_train_batch_size=4,
        num_train_epochs=1,
        fp16 = True,
        dataloader_num_workers=4
        )
  1. EM : 30.00%, F1 : 40.36%
  • Elasticsearch + PORORO
  1. EM : 30.83%, F1 : 42.80%
  • Elasticsearch + PORORO
    query = {
        "query": {
            'bool': {
                'should': {
                    'match': {
                        "text": test_dataset['question'][num]
                    }
                }
            }
        }
    }
  1. EM : 30.83%, F1 : 42.80%
  • Elasticsearch + PORORO
    query = {
        "query": {
            'bool': {
                'must': {
                    'match': {
                        "text": test_dataset['question'][num]
                    }
                }
            }
        }
    }

다) 오늘 나는 어떤 방식으로 모델을 개선했나요?

  • 개선하지 못했습니다…

라) 내일은 어떻게 다르게 시도해보실 수 있을까요?

  • 내일은 본격적으로 Elasticsearch + PORORO를 시도해볼 계획입니다.

마무리

오늘보다 더 성장한 내일의 저를 기대하며, 내일 뵙도록 하겠습니다.

읽어주셔서 감사합니다!

profile
PLUS ULTRA

0개의 댓글