Dream Factory

데이터 분석가 및 AI 연구자들을 위한 흥미로운 소식이 있습니다. Hugging Face와 Google Colab을 통한 데이터셋 직접 접근 Hugging Face와 Google Colab을 통한 데이터셋 직접 접근이 가능합니다. Hugging Face와 Google Colab의 통합: 이 새로운 기능을 통해 사용자들은 Google Colab 노트북에서 Hugging Face에 호스팅된 70,000개 이상의 데이터셋에 직접 접근할 수 있습니다. 이 통합은 데이터 과학 및 AI 연구에서 데이터 접근을 더욱 원활하고 효율적으로 만드는 중요한 진전입니다. hf:// URL을 통한 간단한 접근: 사용자들은 이제 간단한 hf:// URL 형식을 사용하여 Hugging Face의 데이터셋에 접근할 수 있습니다. 이..

NER에서 기존 동영상에 이어 관련 모델에 대한 Fine Tuning을 하는 과정에 대하여 살펴보았습니다. 감사합니다. https://youtu.be/gTfhCuO0mUY #huggingface, #개체명인식, #NER , #finetuning, #자연어성능측정 , #transformer , #미세조정, #KS회계보험계리컨설팅 , #KS경영인공지능연구소, #인공지능

ChatGPT는 지속적으로 발전하고 있습니다. ChatGPT-3.5, ChatGPT-4 및 각종 plugin의 결합의 경우 성능의 차이가 있을까요? 대출상환을 사례로 성능을 비교해 보도록 하겠습니다. 감사합니다. https://youtu.be/UxGlId33oqk

NER에서 성능측정과 함께 성능측정에 사용하는 seqeval 라이브러리에 대하여 살펴보았습니다. 감사합니다. https://youtu.be/GbRUe9tPedQ?si=2Wdh2RRfOsjJ3eLH 실습 코드

주말 아침 추운 날씨에 창을 닫고 밖의 경치를 찍으며 ChatGPT multimodal 기능을 경험해 보았습니다. 좋은 주말되세요. 감사합니다. https://youtu.be/tv0AXLTJJbA

이번 ChatGPT의 또 다른 변신은 코딩을 전혀 쓰지 않고 우리가 쓰는 일상언어(자연어)만으로 내가 원하는 GPT를 자유롭게 만들수 있다는 것입니다. 이것은 과거에는 상상속에서만 있었고, 올해 ChatGPT나 각종 생성 AI로 인하여 이러한 것이 가까운 미래에 가능할 것이라는 예측을 했는데 이것이 실제 실현되었습니다. 아직은 초기이기에 우리가 원하는 정도의 속도나 질은 아니나 이것이 가능해졌기에 가까운 미래에 우리가 원하는 정도 이상의 것도 가능해질 수 있다는 예측이 가능해졌습니다. 여러분과 그 변화를 한번 살펴 보겠습니다. 설명 동영상 https://youtu.be/0Wjt0bsxg_U 1. ChatGPT4 통합 - ChatGPT4에 있어서 기존에는 사용시 각각 분리되어 있어 사용하는 경우 불편하였으..

전체 데이터셋을 토크나이징하여 XLM-R 모델에 Fine tuning을 위해 전달할 데이터셋을 토큰화하는 것에 대하여 살펴보겠습니다. 감사합니다. https://youtu.be/09dfo3BPZ5Y?si=6QWtf0g4GclysdU6

2023.11.6일 미국 샌프란시스코에서 열린 첫번째 OpenAI Developer Conference가 열렸고, 여기에서 또 다양한 변화가 발표되었습니다. 이에 대하여 살펴 보았습니다. 0. 주요 변화 1. GPT-4 Turbo with 128K context 2. Assistants API, Retrieval, and Code Interpreter 3. New modalities in the API 4. Model customization 5. Lower prices and higher rate limits 6. Copyright Shield 7. Whisper v3 and Consistency Decoder 유튜브 https://youtu.be/6QzD4_588rc?si=65qTRDW1G5z6cFE..

(제가 출장 중이어서 좀 늦게 올립니다만 여러분들도 예상한 바와 같이 나날이 발전하는 것 같습니다.) OpenAI의 DevDay 업데이트는 개발자들이 자신의 애플리케이션에 고급 AI 기능을 통합할 수 있도록 하는 중요한 발전을 나타냅니다. 더 저렴한 비용, 개선된 기능, 새로운 API를 통해 OpenAI는 AI 기술의 가능성을 계속해서 확장하고 있습니다. OpenAI의 DevDay 발표 소개 OpenAI의 DevDay는 플랫폼 전반에 걸쳐 많은 추가 기능과 가격 인하를 발표했습니다. 주요 내용으로는 128K 컨텍스트 윈도우를 갖춘 GPT-4 Turbo의 출시, Assistants API, 다중 모달 기능 등이 있습니다. GPT-4 Turbo: 전진의 도약 3월에 처음 출시된 버전에서 업그레이드된 새로운 ..

Hugging FaceTransformers 라이브러리는 사용자가 특정 목적에 맞춰 기존의 사전 훈련된 모델을 쉽게 수정하고 확장할 수 있도록 지원합니다. 이를 통해 사용자는새로운 모델을 처음부터 전부 구현하지 않고도, 기존 모델의 구조와 가중치를 활용하여 필요한 목표를 달성할 수 있는 맞춤형 모델을 효율적으로 만들 수 있습니다. https://youtu.be/2GYGAfVr6VE