Nghiên cứu của MIT tập trung vào việc phát triển một khung đánh giá dựa trên sự phù hợp của niềm tin của con người về khả năng của LLM trong thực hiện các nhiệm vụ cụ thể. Họ mô tả cách con người cập nhật niềm tin của mình về khả năng của LLM sau khi tương tác với nó. Các nhà nghiên cứu phát hiện rằng: khi LLM không đáp ứng kỳ vọng của con người, người dùng có thể trở nên quá tự tin hoặc thiếu tự tin về việc sử dụng chúng, dẫn đến hiệu suất kém trong các tình huống quan trọng.

Tổng quát hóa con người

Nghiên cứu do GS. Ashesh Rambachan - giáo sư trợ giảng kinh tế tại Phòng thí nghiệm Hệ thống Thông tin và Quyết định của MIT (LIDS) và các cộng sự thực hiện đã chỉ ra rằng: sự tổng quát hóa của con người - tức là khả năng dự đoán hiệu suất của một LLM dựa trên các phản hồi trước đó - rất quan trọng để đánh giá đúng khả năng của mô hình. Họ đã tạo ra một bộ dữ liệu gồm gần 19.000 ví dụ để đo lường cách con người tổng quát hóa về hiệu suất của các LLM trên 79 nhiệm vụ khác nhau.

Kết quả cho thấy, con người thường tổng quát hóa tốt hơn với các mô hình. Nhưng họ gặp khó khăn khi đánh giá hiệu suất của LLM. Các thí sinh khảo sát có xu hướng dự đoán hiệu suất của LLM kém chính xác hơn so với việc đánh giá hiệu suất của con người. GS. Rambachan cho rằng: “Sự tổng quát hóa của con người có thể bị phá vỡ khi áp dụng cho LLMs, vì các mô hình này không thể hiện các mẫu chuyên môn rõ ràng như con người”.

Đo lường sự không phù hợp

Con người cũng có xu hướng điều chỉnh niềm tin của họ về LLM khi mô hình trả lời sai hơn khi nó trả lời đúng. Nhiều người cũng cho rằng, hiệu suất của LLM trên các câu hỏi đơn giản không ảnh hưởng nhiều đến hiệu suất của nó trên các câu hỏi phức tạp hơn. Trong những tình huống sự phản hồi không chính xác được coi trọng, các mô hình đơn giản có thể vượt qua các mô hình tinh vi như GPT-4.

Một lý do cho sự kém hiệu quả trong việc tổng quát hóa các LLM là do những mô hình này còn mới mẻ, và con người có ít kinh nghiệm tương tác nó hơn so với việc tương tác người - người. GS. Rambachan cho rằng, việc tương tác nhiều hơn với LLM có thể giúp cải thiện khả năng tổng quát hóa của con người về chúng. Nghiên cứu hướng đến có thể cải thiện về niềm tin của con người khi tương tác với LLM và cách tổng quát hóa có thể được tích hợp vào việc phát triển các LLM.

Bài nghiên cứu nhấn mạnh rằng, để huấn luyện và điều chỉnh các LLM hiệu quả, cần phải xem xét cách con người tổng quát hóa về các mô hình này. Bộ dữ liệu các nhà nghiên cứu tạo ra có thể trở thành tiêu chuẩn để so sánh hiệu suất của các LLM liên quan đến hàm tổng quát hóa của con người, từ đó giúp cải thiện mô hình trong các tình huống thực tế.

Alex Imas - giáo sư khoa học hành vi và kinh tế tại Trường Kinh doanh Booth của Đại học Chicago cho rằng, nghiên cứu của MIT có 2 đóng góp quan trọng. Thứ nhất, nó nêu bật vấn đề khi triển khai LLM cho các mục đích chung, nếu người dùng không hiểu rõ khi nào LLM sẽ chính xác hay thất bại, họ có thể gặp khó khăn trong việc tiếp tục sử dụng chúng. Thứ hai, nghiên cứu cung cấp cái nhìn sâu sắc về cách các mô hình xử lý các vấn đề và cho thấy liệu LLM có "hiểu" các vấn đề mà chúng giải quyết hay không. 

(Theo: MIT News)

Theo chân sinh viên Quan hệ công chúng (PR) Hutech trong những giờ học trải nghiệm, không khỏi trầm trồ trước khả năng “cân” đủ chương trình quy mô lớn nhỏ, không thua kém người trong nghề của các bạn trẻ. 

Quán xuyến các sự kiện “siêu mượt”: Tăng trải nghiệm, vững nghề nghiệp 

Muốn tạo ra những chiến lược truyền thông hiệu quả, những sự kiện có sức lan tỏa lớn, sinh viên Quan hệ công chúng cần rèn luyện tư duy, tinh thần làm việc linh hoạt, chịu được áp lực cao cùng với nhiều kỹ năng mềm hữu ích. Những điều này không thể có ngay lập tức mà đòi hỏi quá trình tích lũy từng ngày. 

Vì lẽ đó, hầu hết môn học trong chương trình đào tạo của sinh viên Quan hệ công chúng tại Hutech đều lấy thực hành làm gốc, để sinh viên vận dụng nền tảng lý thuyết vào giải quyết các bài toán thực tế. Dưới sự hướng dẫn của các giảng viên, sinh viên Quan hệ công chúng ngay từ năm nhất, năm hai đã thử sức tổ chức những sự kiện lớn nhỏ, được xem như là “đồ án” kết thúc học phần của các bạn. 

Nổi bật có thể kể đến là sự kiện “Dạ tiệc VELVET9: Nhung” tại IHG Hotel, quy tụ các doanh nhân, CEO, chuyên gia đến từ hơn 30 doanh nghiệp hàng đầu. Ở đó, sinh viên Quan hệ công chúng Hutech tự tay lên ý tưởng, triển khai kế hoạch, liên hệ khách mời, xây dựng fanpage và truyền thông, dàn dựng và điều phối, xử lý các tình huống phát sinh.

Hay dự án “Colors of Gratefulness - Sắc màu tri ân” với hoạt động vẽ bức họa chiều dài 100m và cao 1,7m nhằm tri ân đội ngũ tuyến đầu chống dịch Covid-19 đã ghi dấu ấn mạnh mẽ, được vinh danh tại 2 giải thưởng: “Rising Stars - Giải thưởng Ngôi sao triển vọng” tại VNPR Awards do Vietnam Public Relations Network tổ chức; đặc biệt là giải thưởng Diamond Awards tại lễ trao giải Quan hệ công chúng xuất sắc ASEAN 2023. 

Thiết lập bộ kỹ năng làm nghề từ chuyên gia

Với sự phát triển như vũ bão của công nghệ số và các nền tảng mạng xã hội, sinh viên Quan hệ công chúng muốn trở thành các chuyên gia PR giỏi cần phải: nắm vững kỹ năng quản lý truyền thông kỹ thuật số, sáng tạo nội dung hấp dẫn trên mạng xã hội, quản trị rủi ro truyền thông, quản lý các khâu xây dựng và duy trì mối quan hệ với đối tác, khách hàng, đồng nghiệp... Để đáp ứng những yêu cầu trên, sinh viên cần tích cực học hỏi từ các chuyên gia 

Những chương trình như “Kỹ năng phải có cho đấu trường Social Media”, “Ứng dụng ChatGPT trong viết PR an toàn, hiệu quả”, “Nghệ thuật nói ít hiểu nhiều & nói nhiều hiểu ít trong quảng cáo đại chúng”, “Định và Mệnh - nghề tổ chức siêu sự kiện giải trí”... tại Hutech mang đến những thông tin giá trị cho sinh viên. 

Qua đó, sinh viên có cơ hội phát triển loạt kỹ năng về lập kế hoạch và triển khai chiến dịch truyền thông tích hợp, sử dụng công cụ phân tích dữ liệu để đo lường hiệu quả và điều chỉnh chiến lược, sáng tạo nội dung phù hợp với từng nền tảng và mục đích truyền thông, quy trình thực hiện những sự kiện giải trí quy mô lớn và lan tỏa thông điệp hiệu quả. 

Học tập trong một môi trường đa trải nghiệm, sinh viên Quan hệ công chúng Hutech đang từng bước thiết lập cho mình một nền tảng vững chắc để trở thành những nhân sự cao cấp, được doanh nghiệp săn tìm. Những bài học giá trị từ giảng đường sẽ là hành trang quý báu để sinh viên tự tin trên thị trường lao động. 

Ngọc Minh