[P3] Week 4 Day 19

나며기·2021년 5월 17일
0

부스트캠프 AI Tech

목록 보기
77/79
post-thumbnail

가) 오늘 내 학습목표는 무엇이었나요?

  1. Elasticsearch + PORORO
  2. 제출 기회 5번 모두 사용하기

나) 오늘 나는 내 학습목표를 달성하기 위해 무엇을 어떻게 했나요?

  1. EM : 59.58%, F1 : 73.22%
  • Elasticsearch + PORORO
query = {
    'query':{
        'bool':{
            'must':[
                      {'match':{'text':test_dataset['question'][num]}}
            ],
            'should':[
                      {'match':{'text':' '.join([i[0] for i in ner(test_dataset['question'][num]) if i[1] != 'O'])}}
            ]
        }
    }
}
  1. EM : 57.08%, F1 : 71.10%
  • Elasticsearch + PORORO
query = {
    'query':{
        'bool':{
            'must':[
                      {'match':{'text':test_dataset['question'][num]}}
            ],
            'should':[
                      {'match':{'text':' '.join(mecab.nouns(test_dataset['question'][num]))}}
            ]
        }
    }
}
  1. EM : 57.50%, F1 : 71.47%
  • Elasticsearch + PORORO
query = {
    'query':{
        'bool':{
            'must':[
                    {'match':{'text':test_dataset['question'][num]}}
            ],
            'should':[
                    {'match':{'text':' '.join([i[0] for i in ner(test_dataset['question'][num]) if i[1] != 'O'])}},
                    {'match':{'title':' '.join(mecab.nouns(test_dataset['question'][num]))}}
            ]
        }
    }
}
  1. EM : 60.00%, F1 : 73.28%
  • Elasticsearch + PORORO
query = {
    'query':{
        'bool':{
            'must':[
                      {'match':{'text':test_dataset['question'][num]}}
            ],
            'should':[
                      {'match':{'text':' '.join([i[0] for i in ner(test_dataset['question'][num]) if i[1] != 'O'])}}
            ]
        }
    }
}
  • postprocess
  1. EM : 58.75%, F1 : 71.53%
  • Elasticsearch + PORORO
kss.split_chunks(wiki_data['text'][num], max_length=1500, overlap=False)

다) 오늘 나는 어떤 방식으로 모델을 개선했나요?

  • query를 개선해서 모델을 개선했습니다.

라) 내일은 어떻게 다르게 시도해보실 수 있을까요?

  • 내일도 Elasticsearch + PORORO를 시도해볼 계획입니다.

마무리

오늘보다 더 성장한 내일의 저를 기대하며, 내일 뵙도록 하겠습니다.

읽어주셔서 감사합니다!

profile
PLUS ULTRA

0개의 댓글