Claude 3.5 Sonnet: Chưa phải là lựa chọn tối ưu cho phân tích dữ liệu

Mục lục

1. Giới thiệu
2. So sánh với ChatGPT
3. Giới hạn của Claude
4. Thử nghiệm thực tế
5. Kết luận

1. Giới thiệu

Anthropic, một công ty AI được Amazon đầu tư 4 tỷ đô la, vừa công bố Claude 3.5 Sonnet hiện hỗ trợ phân tích dữ liệu. TechCrunch đã đăng tiêu đề cho tính năng này là "AI của Anthropic có thể chạy và viết mã". Điều này đúng về mặt kỹ thuật, nhưng đừng quá phấn khích. Claude không thể tự động mô phỏng toàn bộ mã cho bạn. Thực tế là nó còn giới hạn hơn nhiều.

2. So sánh với ChatGPT

Tính năng được Anthropic công bố tương tự như phân tích dữ liệu nâng cao của ChatGPT. Tuy nhiên, điểm khác biệt là công cụ phân tích của Claude có sẵn cho mọi người, bao gồm cả người dùng miễn phí. ChatGPT Plus và Enterprise mới có thể sử dụng phân tích dữ liệu nâng cao, với giá 20 đô la mỗi tháng trở lên.

Cả ChatGPT Plus và Claude đều thực hiện phân tích dữ liệu bằng cách viết và chạy các đoạn mã để phân tích và xử lý dữ liệu. Điểm khác biệt chính là Claude viết mã bằng JavaScript trong khi ChatGPT sử dụng Python.

3. Giới hạn của Claude

Claude dường như rất hạn chế về lượng dữ liệu có thể nhập. Phiên bản Pro của Claude tuyên bố cho phép "ít nhất 5 lần lượng sử dụng so với dịch vụ miễn phí" và "nếu cuộc hội thoại của bạn tương đối ngắn, bạn có thể mong đợi gửi ít nhất 45 tin nhắn mỗi 5 giờ".

Đây không phải là con số ấn tượng. Mặc dù Claude tuyên bố có thể tải lên 5 tệp và 30MB, tôi phát hiện ra rằng tệp 3,9MB kết hợp của tôi đã bị coi là vượt quá giới hạn độ dài 9124%. Tệp đó chứa 219.181 bản ghi.

Sau đó, tôi thử một tệp cho một năm. Tệp yob2020.txt chỉ có 561KB và chứa 31.550 bản ghi. Tệp đó rõ ràng vượt quá giới hạn độ dài của Claude 1239%.

Tóm lại, Claude hiện chỉ hỗ trợ phân tích khoảng 2.000 dòng có khoảng 25 ký tự mỗi dòng. So sánh với ChatGPT Plus, phiên bản Pro của Claude có thể hỗ trợ tối đa khoảng 10.000 dòng có 25 ký tự mỗi dòng.

Ngược lại, tôi đã đưa 69.215 bản ghi với trung bình 50 ký tự mỗi dòng vào ChatGPT Plus và nó hoạt động hoàn hảo. Tôi cũng đưa bộ dữ liệu 22.797 bản ghi về cảm xúc của người dùng gỡ cài đặt ứng dụng của tôi (với hầu hết các bản ghi chứa cụm từ cảm xúc cũng như dữ liệu cố định) vào ChatGPT Plus và nó hoạt động tốt. Tôi đã đưa hai tệp chứa hơn 170.000 dòng mã G-code của máy in 3D vào ChatGPT Plus và nó hoạt động tốt.

4. Thử nghiệm thực tế

Tôi đã tải xuống khoảng 30 bộ dữ liệu từ data.gov trước khi tìm thấy một bộ dữ liệu đủ nhỏ để Claude kiểm tra. Đó là bộ dữ liệu tháng 11 năm 2020 về thú cưng có thể nhận nuôi từ Trung tâm Dịch vụ và Nhận nuôi Động vật Hạt Montgomery ở Derwood, Maryland.

Bộ dữ liệu này có 85 bản ghi, mỗi bản ghi khoảng 190 ký tự. Chúng ta hãy xem nó có thể cho chúng ta biết điều gì.

Với lời nhắc "Bạn có thể nói gì về dữ liệu này?", Claude đã xác định loại thú cưng phổ biến nhất (chó), loại nhập cảnh phổ biến nhất (bỏ rơi bởi chủ sở hữu, sau đó là động vật hoang dã - điều đó thật đáng buồn), các mẫu đáng chú ý và các tính năng độc đáo (Molly là một cái tên phổ biến).

Tôi đã yêu cầu một biểu đồ tròn thể hiện sự phân bố động vật. Nó đã cho tôi biểu đồ này, thể hiện các loại động vật chính nhưng để "Khác" chiếm gần 50% biểu đồ cột.

Tôi muốn biết "Khác" đại diện cho điều gì. Thật đáng buồn khi 30% "Khác" là cá cảnh. Trong đầu tôi, tôi có hình ảnh buồn bã về hàng hàng bể cá vàng, mỗi bể chỉ có một con cá vàng đơn độc.

Hãy xem biểu đồ đó và biểu đồ ngay phía trên nó. Lưu ý rằng mặc dù có đủ không gian cho biểu đồ hiển thị nhãn, nhưng chúng bị cắt ở cả hai biểu đồ. Tôi biết có 30% cá cảnh, nhưng tôi không biết tỷ lệ chính xác vì tất cả những gì được hiển thị là "3".

JavaScript có các thư viện biểu đồ tuyệt vời. Tôi nghĩ Anthropic đã có thể tinh chỉnh đầu ra để thể hiện đầy đủ dữ liệu biểu đồ, đặc biệt là ở chế độ xem ngang.

5. Kết luận

Tôi thực sự hy vọng rằng các tính năng phân tích dữ liệu của Claude sẽ tương đương với ChatGPT Plus. Ngay cả khi phiên bản miễn phí của Claude chỉ có thể làm được 1/5 so với ChatGPT Plus, tôi cũng có thể đăng ký gói dịch vụ.

Tôi thực sự thích ý tưởng gửi dữ liệu của mình qua nhiều công cụ phân tích và so sánh kết quả. Điều đó sẽ đủ để tôi đăng ký thêm 240 đô la mỗi năm cho hóa đơn AI.

Nhưng vì rõ ràng từ các phép ngoại suy của tôi ở trên rằng phiên bản Claude Pro không thể xử lý ngay cả những bộ dữ liệu nhỏ nhất mà tôi đã đưa vào ChatGPT Plus, chắc chắn nó không đáng để đầu tư.

Tôi đã liên hệ với Anthropic để xin bình luận nhưng vẫn chưa nhận được phản hồi. Nếu công ty phản hồi, tôi sẽ cập nhật bài viết này với phản hồi của họ.

Trong khi đó, bạn nghĩ gì? Bạn đã sử dụng Phân tích dữ liệu nâng cao trong ChatGPT Plus chưa? Bạn là người dùng Claude hay ChatGPT? Khi nào bạn sẽ hoặc sẽ xem xét việc sử dụng Claude thay cho ChatGPT? Hãy cho chúng tôi biết trong phần bình luận bên dưới.