본문 바로가기

✒️ Kibwa Voice Phishing Prev Project12

[Natural Language Processing Model] KOBERT 에러 기록 & 정리 🔥 KOBERT Code 출처 및 운용 시 참고 자료 --> https://bbarry-lee.github.io/ai-tech/KoBERT%EB%A5%BC-%ED%99%9C%EC%9A%A9%ED%95%9C-%EA%B0%90%EC%A0%95%EB%B6%84%EB%A5%98-%EB%AA%A8%EB%8D%B8-%EA%B5%AC%ED%98%84.html KoBERT를 활용한 감정분류 모델 구현 with Colab 안녕하세요, Daisy 입니다 ☺️ SKT Brain에서 개발한 KoBERT 오픈소스 코드를 활용해 Google Colab에서 감정분류 모델을 구현해보았으며 그 과정을 소개하고자 합니다. bbarry-lee.github.io --> https://github.com/SKTBrain/KoBERT GitH.. 2023. 7. 1.

[Data Processing] 데이터 증강(Data Augmentation) 관련 개념 및 기법 조사 🐠 데이터 증강(Data Augmentation) 이란? 데이터 증강(Data Augmentation)은 기계 학습과 딥러닝 모델의 성능을 향상시키기 위해 기존의 학습 데이터를 변형, 조작 또는 확장시키는 기법이다. 데이터 증강(Data Augmentation)은 제한된 학습 데이터를 다양하고 풍부한 데이터로 확장시킴으로써 모델의 일반화 성능을 향상시키고, 과적합을 방지하는 데 도움을 줄 수 있다. 🐠 About 데이터 증강(Data Augmentation) 1. 데이터 증강 기법 문법 변형 동의어 & 유의어 교체 문장 재구성 (문장 간 순서 교체) 타 언어로 번역 후 다시 회귀 중간부 단어 삽입 중간부 단어 삭제 2. 데이터 증강 예시 1️⃣ 문법 변형 네, 우선은 통화자분께서 이번 사건에 연루된 혐의.. 2023. 6. 25.

[Data Processing] STT 데이터 다운로드를 위한 자동화 스크립트 작성 🍀 STT 데이터 다운로드를 위한 자동화 스크립트 작성 ① pip 명령어를 통해 boto3 패키지 설치 & boto3 모듈 임포트 !pip install boto3 import boto3 ※ boto3 란? AWS 서비스와 상호작용하기 위해 사용하는 Python SDK --> 임포트한 boto3 이 모듈을 사용하여 AWS S3 클라이언트를 생성하고 파일을 다운로드할 수 있음 ② AWS 계정 자격 증명과 AWS 리전 설정 # AWS 계정 자격 증명 및 AWS 리전 설정 aws_access_key_id = "계정의 엑세스 키값" aws_secret_access_key = "계정의 시크릿 엑세스 키값" aws_region = "계정의 AWS Region" ※ AWS 리전(Region) 이란? : AWS 클라우.. 2023. 6. 23.

[Natural Language Processing Model] KOBERT와 Finetuning 실습 🌍 KOBERT 란? KOBERT는 Korean Bidirectional Encoder Representations from Transformers의 약자로, SKT Brain에서 공개한 일종의 기계번역 모델이다. KOBERT는 2018년 Google 에서 발표한 "BERT"의 한국어 버전 모델로서 텍스트 분류, 개체명 인식, 감정 분석, 기계 번역 등의 자연어 처리(Natural Language Processing) 작업에서 뛰어난 성능을 발휘할 수 있다. 🌍 KOBERT Finetuning 실습 1. 파이썬 메인 패키지 설치 # 통합 개발 환경을 위한 ipywidgets 패키지 설치 !pip install ipywidgets # GitHub 저장소에서 최신 버전의 KOBERT를 불러와 설치 !pip .. 2023. 6. 3.

[Project Development & Ideas] 프로젝트 발전_시각 장애인 분들을 위한 추가 아이디어 제안 # 프로젝트 발전_시각 장애인 분들을 위한 추가 아이디어 제안 1. 앱에서 보이스피싱 판별 결과를 음성으로 안내 : App 제작 시 음성 출력 기능 추가 A. 음성 합성 API 사용 --> API를 사용하여 텍스트를 음성으로 변환하고, 웹 앱에서 해당 음성을 재생할 수 있음 대표적인 음성 합성 API Google Cloud Text-to-Speech Microsoft Azure Text-to-Speech Amazon Polly B. JavaScript와 Web Audio API : 웹 앱의 클라이언트 측에서 JavaScript와 Web Audio API를 사용하여 음성을 생성하고 재생할 수 있음. 이를 통해 텍스트를 음성으로 변환하고, 웹 앱에서 해당 음성을 출력할 수 있음 --> 예를 들어, Text-.. 2023. 5. 28.

[Data Processing] 1. 음성 데이터 수집을 위한 웹 크롤링 스크립트 작성 🥙 음성 데이터 수집을 위한 웹 크롤링 스크립트 작성 머신 러닝을 위한 데이터셋을 확보하는 과정에서 다운받아야 할 파일의 수가 많아, 자동으로 음성 파일들을 다운로드할 수 있는 웹 크롤링 스크립트를 작성하였다. 생성한 스크립트는 아래 2가지의 요소를 반영하도록 작성되었다. 다운로드 시 다운될 파일의 이름을 지정할 수 있도록 함 파일을 다운로드 시 데이터가 저장될 위치를 설정할 수 있도록 함 아래는 작성한 크롤링 스크립트와 작성한 코드에 대한 설명이다. from selenium import webdriver from selenium.webdriver import ActionChains from selenium.webdriver.common.keys import Keys from selenium.webdri.. 2023. 5. 23.

이전 1 2 다음

티스토리툴바