Ask HN: Có tài liệu nào đáng đề xuất cho một kỹ sư phần mềm muốn bắt kịp các xu hướng AI mới nhất không?

• Một kỹ sư phần mềm gần như sử dụng ChatGPT hằng ngày và lần cuối dùng API OpenAI là GPT-3.5 vào năm ngoái đang tìm tài liệu để nhanh chóng bắt kịp dòng chảy AI mới nhất
• Muốn có blog kỹ thuật có thể liên tục cập nhật tin tức liên quan đến AI giống như HN
• Đã tìm thấy simonwillison.net, nhưng cảm thấy nội dung có vẻ ở dạng rời rạc

[GN⁺]

Ý kiến Hacker News

• Điều quan trọng là học cách sử dụng mô hình và hiểu nguyên lý hoạt động của chúng hơn là cách huấn luyện mô hình

  • Đề xuất "Hacker's Guide to LLMs" của Jeremy và "State of GPT" của Karpathy
  • Video trực quan hóa về LLMs và transformers của 3b1b cũng rất hữu ích
  • Các video nói về quá trình huấn luyện ChatGPT và tổng quan về AI cũng đáng tham khảo
  • Cách Nicholas Carlini sử dụng LLMs cũng rất thú vị
  • Để cập nhật thông tin mới nhất, khuyên nên theo dõi những người của OpenAI, Anthropic, Google DeepMind và xAI trên X/Twitter và Bluesky
  • Cũng đề xuất các podcast như "No Priors", "Generally Intelligent", "Dwarkesh Patel", "Sequoia's Training Data"

• Đã có được sự hiểu biết trực quan về AI thông qua việc tham gia các cuộc thi Kaggle

  • Việc có mục tiêu cụ thể và bộ dữ liệu sẵn giúp giải quyết vấn đề dễ hơn
  • Blog của Simon rất hữu ích cho các kỹ sư phần mềm

• Đang học computer vision qua playlist YouTube của "OpenCV University"

  • Đã có được hiểu biết sâu hơn về CNN và đang áp dụng vào dự án gần đây
  • Đây là lộ trình học dễ tiếp cận ngay cả khi thiếu nền tảng toán học

• Việc cập nhật thông tin mới hằng ngày hoặc hằng tuần có thể không hiệu quả

  • Cập nhật một lần mỗi 6-12 tháng sẽ tốt hơn

• Trực tiếp làm việc với các mô hình tiên tiến nhất và viết một cuốn guidebook

  • Bao gồm khái niệm, mã thực hành và liên kết đến tài liệu học tập

• Cung cấp tài liệu về các nguyên lý cơ bản của LLMs và mạng nơ-ron

  • Còn thiếu hiểu biết về phần mềm cho card đồ họa video hiện đại
  • Sự phụ thuộc quá lớn vào GPU khiến nhiều cách tiếp cận machine learning khác bị bỏ qua
  • Cần ngôn ngữ và phần cứng tốt hơn để dân chủ hóa AI

• Theo dõi tài liệu của Matt Berman, bản tin tóm tắt AI, và Rick Lamers

  • Cũng đề xuất khóa học ngắn mới của FreeCodeCamp

• Để cập nhật thông tin mới nhất, đề xuất subreddit về stable diffusion và local llama hơn là các blog kỹ thuật

  • Kênh YouTube của Andrej Karpathy cũng hữu ích