Luyện nói tiếng Anh bằng Shadowing qua video: Prompt engineering - Introduction

Đang tạo bài học...
1
Welcome to this course on ChatGPT problem engineering for developers.
2
I'm thrilled to have with me Iza Fulford to teach this along with me.
3
She is a member of the technical staff of OpenAI and had built the popular ChatGPT retrieval plugin.
4
And a large part of work has been teaching people how to use OEM or large language model technology in products.
5
She's also contributed to the OpenAI cookbook that teaches people prompting.
6
So thrilled to have you with you.
7
And I'm thrilled to be here and share some prompting best practices with you all.
8
I'm not sure.
9
So there's been a lot of material on the internet for prompting,
10
with articles like "30 Prompts Everyone Has to Know" A lot of that has been focused on the ChatGPT web user interface,
11
which many people are using to do specific and often one -off tasks.
12
I think the power of LOM's large language models as a developer too, that is using API calls to LOMs to quickly build software applications.
13
I think that is still very underappreciated.
14
In fact, my team at AI Fund, which is a sister company to deep learning AI,
15
has been working with many startups on applying these technologies to many different applications.
16
It's been exciting to see what LOM APIs can enable developers to very quickly build.
17
So in this course, we'll share with you some of the possibilities for what you can do, as well as best practices for how you can do them.
18
There's a lot of material to cover.
19
First, you'll learn certain prompting best practices for software development.
20
Then we'll cover some common use cases, summarising, inferring, transforming, expanding.
21
And then you'll build a chatbot using an LLM.
22
Thank you.
23
We hope that this will spark your imagination about new applications that you can build.
24
So in the development of large language models or LLMs, there have been broadly two types of LLMs,
25
which I'm going to refer to as base LLMs and instruction -tuned LLMs.
26
So base LLM has been trained to predict the next word, based on text training data, often trained on large amount of data from the internet and other sources,
27
to figure out what's the next most likely word to follow.
28
So for example, if you were to prompt this, once upon a time there was a unicorn, it may complete this, that is, it may predict the next several words are,
29
that live in the magical forest of all unicorn friends.
30
But if you were to prompt us with what is the capital of France, then based on what articles on the internet might have,
31
it's quite possible that the base LM will complete this with, what is France's largest city, what is France's population and so on.
32
Because articles on the internet could quite plausibly be lists of quiz questions about the country of France.
33
Thank you.
34
In contrast, an instruction tuned LLM, which is where a lot of momentum of LLM research and practice has been going,
35
An instruction team has been trained to follow instructions.
36
So if you were to ask it, what is the capital of France is much more likely to output something like the capital of France is Paris
37
So the way that instruction -tuned OOMs are typically trained is, you start off with a base OOM that's been trained on a huge amount of text data,
38
and further train it, further fine tune it with inputs and outputs that are instructions and good attempts to follow those instructions.
39
And then often further refine using a technique called RLHF, reinforcement learning from human feedback,
40
to make the system better able to be helpful and follow instructions.
41
Because instruction TNLMs have been trained to be helpful, honest, and harmless.
42
So for example, they're less likely to output problematic texts, such as toxic outputs compared to base LLM.
43
a lot of the practical usage scenarios have been shifting toward instruction to,
44
you know, Some of the best practices you find on the internet may be more suited for a base LLM, but for most practical applications today,
45
we would recommend most people instead focus on instruction tuned LLMs, which are easier to use.
46
And also because of the work of OpenAI and other LLM companies becoming safer and more aligned.
47
So this course will focus on best practices for instruction to neural arms
48
which is what we recommend you use for most of your applications.
49
Before moving on, I just want to acknowledge the team from OpenAI
50
and DeepLearn .AI that had contributed to the materials that Ysia and I will be presenting.
51
I'm very grateful to Andrew Main, Joe Palermo, Boris Power, Ted Sanders, and Lillian Wang from OpenAI.
52
They were very involved with us brainstorming materials, vetting the materials to put together.
53
the curriculum for this short course.
54
And I'm also grateful on the deep learning side for the work of Jeff Lodwick, Eddie Hsu and Tommy Nelson.
55
So when you use an instruction tuned LLM, think of giving instructions to another person.
56
Say someone that's smart but doesn't know the specifics of your task.
57
So when an LM doesn't work, sometimes it's because the instructions weren't clear enough.
58
For example, if you were to say, "Please write me something about Alan Turing." Well, In addition to that, it can be helpful to be clear about whether you want
59
the text to focus on his scientific work or his personal life or his role in history or something else.
60
And if you specify what you want the tone of the text to be, should it take on the tone like a professional journalist would write?
61
Or is it more of a casual note
62
that you dash off to a friend that holds the OM generate what you want.
63
And of course, if you picture yourself asking, say a fresh college graduate to carry out this task for you,
64
if you can even specify what you want snippets of texts
65
they should read in advance to write this text about Alan Turing, then that even better sets up that fresh college grad for success to carry out this task for you.
66
So in the next video, you see examples of how to be clear and specific, which is an important principle of prompting LOMs.
67
And you also learn from Ezer a second principle of prompting, that is giving LDLM time to think.
68
So with that, let's go on to the next video.

Thông Tin về Bài Học Này

Trong bài học này, bạn sẽ khám phá các nguyên tắc và kỹ thuật cần thiết khi làm việc với các mô hình ngôn ngữ lớn (LLM) như ChatGPT. Bài học sẽ cung cấp cho bạn cái nhìn tổng quan về cách tạo ra các prompt hiệu quả và cách mà các mô hình này có thể được ứng dụng trong phát triển phần mềm. Bạn cũng sẽ tìm hiểu về sự khác biệt giữa các mô hình LLM cơ bản và các mô hình đã được tinh chỉnh theo chỉ dẫn, giúp bạn hiểu rõ hơn về cách sử dụng chúng trong các ứng dụng thực tế.

Từ Vựng & Cụm Từ Chính

  • Mô hình ngôn ngữ lớn (LLM): Là các hệ thống học máy được đào tạo để dự đoán từ tiếp theo trong văn bản.
  • Prompt: Là các câu lệnh hoặc yêu cầu mà bạn gửi đến mô hình để nhận phản hồi.
  • Cơ bản (Base LLM): Là các mô hình được đào tạo dựa trên dữ liệu văn bản lớn từ internet.
  • Tinh chỉnh theo chỉ dẫn (Instruction Tuning): Là quá trình đào tạo thêm để cải thiện khả năng phản hồi theo yêu cầu của người dùng.
  • Học tăng cường từ phản hồi con người (RLHF): Là kỹ thuật nhằm nâng cao tính hiệu quả của các mô hình thông qua feedback từ người dùng.
  • Cải thiện khả năng hữu ích: Yếu tố quan trọng trong việc phát triển các mô hình để giúp người dùng dễ dàng hơn.
  • Ứng dụng thực tiễn: Các cách mà LLM có thể được sử dụng trong phát triển phần mềm và giải pháp công nghệ khác.

Mẹo Thực Hành

Khi thực hành học tiếng Anh, đặc biệt là trong việc shadowing tiếng anh, hãy chú ý đến tốc độ và ngữ điệu của video. Nên lặp lại các câu hoặc cụm từ ngay sau khi nghe để cải thiện khả năng phát âm tiếng anh chuẩn. Bạn có thể dừng video sau mỗi câu để có thời gian nhắc lại và điều chỉnh cách phát âm của mình. Sử dụng các phần mềm shadowing sẽ giúp bạn theo dõi và cải thiện kỹ năng nói của mình dễ dàng hơn. Hãy cố gắng sao chép chính xác không chỉ từ ngữ mà còn cả ngữ điệu và cảm xúc mà người nói truyền đạt. Điều này không chỉ giúp bạn tiếp thu ngôn ngữ tốt hơn mà còn phát triển khả năng giao tiếp tự tin hơn trong tương lai.

Phương Pháp Shadowing Là Gì?

Shadowing là kỹ thuật học ngôn ngữ có cơ sở khoa học, ban đầu được phát triển cho chương trình đào tạo phiên dịch viên chuyên nghiệp và được phổ biến rộng rãi bởi nhà đa ngôn ngữ học Dr. Alexander Arguelles. Nguyên lý cốt lõi đơn giản nhưng cực kỳ hiệu quả: bạn nghe tiếng Anh của người bản xứ và lặp lại to ngay lập tức — như một "cái bóng" (shadow) đuổi theo người nói với độ trễ chỉ 1–2 giây. Khác với luyện ngữ pháp hay học từ vựng bị động, Shadowing buộc não bộ và cơ miệng phải đồng thời xử lý và tái tạo ngôn ngữ thực tế. Các nghiên cứu khoa học xác nhận phương pháp này cải thiện đáng kể phát âm, ngữ điệu, nhịp điệu, nối âm, kỹ năng nghe và độ lưu loát khi nói — đặc biệt hiệu quả cho người luyện IELTS Speaking và muốn giao tiếp tiếng Anh tự nhiên như người bản ngữ.