vi ▾
Mở tài khoản

Hướng dẫn về LLM không kiểm duyệt: API qwen

API qwen cung cấp một điểm cuối không kiểm duyệt, tương thích OpenAI dành cho các nhà phát triển cần đầu ra mô hình thô mà không có bộ lọc nội dung hoặc đăng ký hàng tháng. Bạn chỉ trả tiền cho token đã sử dụng, với số dư trả trước không bao giờ hết hạn, rất lý tưởng cho chatbot NSFW và các quy trình sáng tạo liên tục.

Cập nhật lần cuối

Tóm tắt

  1. Sử dụng các SDK OpenAI tiêu chuẩn với URL cơ sở tùy chỉnh để truy cập mô hình không kiểm duyệt ngay lập tức.
  2. Thanh toán trả前 chỉ qua tiền điện tử, không có phí ẩn hay chi phí đăng ký định kỳ.
  3. Mô hình xử lý cửa sổ ngữ cảnh 100.000 token và hỗ trợ streaming, chế độ JSON và gọi hàm.
  4. Các vấn đề về token hóa như nhiều dấu cách được tính là một token ảnh hưởng đáng kể đến việc tính toán chi phí.

API qwen là gì?

API qwen là một điểm cuối được lưu trữ, cung cấp một mô hình ngôn ngữ lớn không kiểm duyệt thông qua giao diện tương thích chuẩn với OpenAI. Nó tạo văn bản mà không có các từ chối nội dung thường thấy ở các nhà cung cấp chính thống, khiến nó trở thành lựa chọn hàng đầu cho các ứng dụng chatbot NSFW và viết sáng tạo. Bạn tương tác với nó bằng cách sử dụng cùng chat.completions endpoint cấu trúc bạn đã quen thuộc, nhưng với một mô hình được tinh chỉnh để ít hạn chế hơn đối với các chủ đề người trưởng thành hoặc gây tranh cãi.

Khác với các nhà tổng hợp phức tạp định tuyến yêu cầu qua nhiều nhà cung cấp, chúng tôi cung cấp một mô hình không kiểm duyệt chuyên dụng duy nhất. Điều này đảm bảo hành vi nhất quán và giá cả dự đoán được. Bạn không cần phải lo lắng về các bản cập nhật mô hình đột ngột làm thay đổi phong cách đầu ra hoặc số lượng token. Dịch vụ được thiết kế cho các nhà phát triển muốn truy cập trực tiếp vào toàn bộ tiềm năng của một mô hình trọng lượng mở.

Tại sao chọn một Mô hình không kiểm duyệt?

Các mô hình không kiểm duyệt loại bỏ các hàng rào chặn nội dung người lớn hợp pháp, bạo lực hư cấu hoặc các chủ đề chính trị gây tranh cãi. Điều này rất quan trọng đối với việc triển khai chatbot NSFW, nơi người dùng mong đợi sự hòa nhập hoàn toàn mà không bị mô hình đột ngột từ chối một lời nhắc chỉ vì nó phát hiện một từ khóa nhạy cảm. Mô hình không từ chối dựa trên các chính sách nội dung thông thường, cho phép tạo ra các đầu ra sáng tạo đa dạng và trần trụi hơn.

Tuy nhiên, sự tự do này đi kèm với những cân nhắc cụ thể. Bạn phải tự xử lý kiểm duyệt nếu cần cho đối tượng người dùng cụ thể của mình. Mô hình không phải là GPT, Claude hay Qwen từ Alibaba; đó là một mô hình trọng lượng mở độc lập được tối ưu hóa để từ chối tối thiểu. Sự khác biệt này quan trọng vì hành vi nhất quán, khác với các nhà cung cấp có thể thay đổi logic lọc mà không báo trước. Đối với các nhà phát triển xây dựng ứng dụng tập trung vào người lớn, sự nhất quán này giảm đáng kể thời gian gỡ lỗi.

API qwen hoạt động như thế nào

API hoạt động thông qua một yêu cầu POST đơn giản đến điểm cuối hoàn tất hội thoại. Bạn gửi các tin nhắn hệ thống và người dùng, và nhận lại phản hồi dạng văn bản. URL cơ sở được đặt thành điểm cuối chuyên dụng của chúng tôi, cho phép bạn giữ nguyên hầu như toàn bộ mã máy khách hiện có. Chúng tôi hỗ trợ streaming qua Server-Sent Events, điều này rất quan trọng để duy trì trải nghiệm người dùng phản hồi nhanh trong các giao diện trò chuyện.

Các tính năng chính bao gồm gọi hàm để sử dụng công cụ, chế độ JSON để trích xuất dữ liệu có cấu trúc và các tham số tiêu chuẩn như nhiệt độ và top_p. Cửa sổ ngữ cảnh trải dài 100,000 token, cho phép các ứng dụng xử lý ngữ cảnh dài. Đầu ra tối đa là 16,000 token mỗi yêu cầu, hoặc 2,048 nếu bạn không chỉ định. Sự linh hoạt này hỗ trợ mọi thứ từ các lượt trò chuyện ngắn đến việc tạo tài liệu dài.

Sự kỳ lạ của việc Token hóa: Dấu cách và Thẻ

Hiểu về cách mô hình của bạn token hóa văn bản rất quan trọng để ước tính chi phí chính xác. Qwen token hóa nhiều khoảng trắng, chẳng hạn như hai, bốn hoặc tám khoảng trắng, như một token duy nhất. Điều này khác với các mô hình khác như Gemma, nơi mỗi khoảng trắng có thể được tính riêng. Ngoài ra, các thẻ HTML như </div> thường được token hóa dưới dạng một đơn vị duy nhất, trong khi các mô hình khác có thể tách chúng thành nhiều token.

Những đặc điểm này ảnh hưởng trực tiếp đến việc tính phí của bạn. Nếu bạn đang xử lý số lượng lớn văn bản có định dạng hoặc mã, số lượng token có thể thấp hơn đáng kể so với mong đợi. Điều này có nghĩa là việc sử dụng API của bạn sẽ trông rẻ hơn so với các benchmark từ các mô hình khác có thể gợi ý. Luôn theo dõi việc sử dụng token thực tế trong các tiêu đề phản hồi để tối ưu hóa cấu trúc lời nhắc của bạn nhằm đạt hiệu quả về chi phí.

Tốc độ và Hiệu suất: Cục bộ so với API

Triển khai cục bộ các mô hình như R1-Distill-Qwen-32B-MLX-4bit trên M3 Max đạt khoảng 19 token mỗi giây, với thời gian cho token đầu tiên khoảng 0,67 giây. Ngược lại, API được lưu trữ của chúng tôi cung cấp hiệu suất nhất quán mà không có các ràng buộc phần cứng của máy cục bộ của bạn. Các thiết lập cục bộ thường thay đổi đáng kể dựa trên tốc độ RAM và giảm thiểu nhiệt, trong khi cơ sở hạ tầng của chúng tôi cung cấp thông lượng ổn định.

Ví dụ, việc chạy cục bộ Qwen Coder 32B có thể giảm xuống 2 token mỗi giây trên một số cấu hình phần cứng nhất định, trong khi API của chúng tôi duy trì tốc độ dự đoán. Độ tin cậy này rất quan trọng đối với các dịch vụ bot trò chuyện NSFW sản xuất nơi độ trễ ảnh hưởng đến việc giữ chân người dùng. Bạn tránh được chi phí quản lý trình điều khiển GPU, quản lý bộ nhớ và thời gian tải mô hình. API trừu tượng hóa độ phức tạp của phần cứng, cho phép bạn tập trung vào logic ứng dụng của mình.

Hiệu quả chi phí: Tại sao trả trước là lựa chọn tốt nhất

Thanh toán trả trước loại bỏ bất ngờ về phí đăng ký hàng tháng. Bạn trả $0.15 cho mỗi 1M token đầu vào và $0.50 cho mỗi 1M token đầu ra. Các lỗi và từ chối đều miễn phí, nghĩa là bạn chỉ trả tiền cho mức sử dụng thực tế. Mô hình này minh bạch và khớp chi phí trực tiếp với hoạt động của ứng dụng của bạn. Không có khoản phí ẩn cho các lệnh gọi API thất bại hoặc trả về phản hồi trống.

Nạp tiền được xử lý chỉ qua tiền điện tử, cụ thể là USDT trên mạng lưới TRC20 hoặc USDC trên mạng lưới Base. Bạn có thể thêm bất kỳ số nguyên nào từ $20 đến $500. Tín dụng bonus được áp dụng tự động: +5% cho $50, +10% cho $100 và +15% cho $200. Cấu trúc bonus này thưởng cho mức sử dụng cao hơn mà không yêu cầu cam kết dài hạn. Tín dụng của bạn không bao giờ hết hạn, vì vậy bạn có thể nạp bất cứ khi nào thuận tiện.

Tích hợp với các SDK của OpenAI

Việc tích hợp rất đơn giản vì chúng tôi tuân thủ đặc tả API của OpenAI. Bạn có thể sử dụng các SDK chính thức của OpenAI cho Python, Node.js hoặc bất kỳ ngôn ngữ nào hỗ trợ định dạng tiêu chuẩn. Chỉ cần cập nhật base URL để trỏ đến endpoint của chúng tôi và cung cấp API key. ID mô hình cần gửi là uncensored.

Tính tương thích này có nghĩa là bạn có thể chuyển từ các nhà cung cấp khác với ít thay đổi mã nhất. Logic hiện có của bạn để xử lý phản hồi streaming, chế độ JSON và các lệnh gọi hàm sẽ hoạt động như mong đợi. API hỗ trợ các tham số tiêu chuẩn như temperature, top_p, stop, và seed. Sự linh hoạt này cho phép bạn tinh chỉnh hành vi của mô hình để phù hợp với các yêu cầu nội dung cụ thể của bạn.

Bắt đầu với Token API qwen của Bạn

Việc bắt đầu yêu cầu thiết lập tối thiểu. Bạn có thể đăng ký bằng tài khoản Google hoặc email và mật khẩu. Không yêu cầu số điện thoại, đảm bảo quyền truy cập nhanh chóng và riêng tư. Khi đăng ký, bạn nhận được khóa API ngay lập tức. Điều này cho phép bạn kiểm tra hiệu suất của API và hành vi tokenization trước khi cam kết nạp thêm tiền.

Sau khi có khóa, bạn có thể bắt đầu thực hiện các yêu cầu. API hỗ trợ tối đa 300 yêu cầu mỗi phút trên mỗi khóa và cho phép 8 yêu cầu đồng thời. Kích thước tối đa của thân yêu cầu là 8 MB. Nếu bạn cần một khóa mới, việc tạo khóa mới sẽ thay thế khóa cũ, vì vậy hãy đảm bảo bạn cập nhật cấu hình máy khách của mình. Quyền riêng tư được ưu tiên; các gợi ý của bạn không được sử dụng để huấn luyện và tài khoản của bạn chỉ yêu cầu địa chỉ email.

Các câu hỏi thường gặp

Đây có phải là API Qwen chính thức từ Alibaba không?

Không, đây là một dịch vụ độc lập chạy mô hình không kiểm duyệt trọng lượng mở. Chúng tôi không liên kết với Alibaba hoặc đám mây Qwen chính thức. Chúng tôi sử dụng điểm cuối tương thích OpenAI, vì vậy bạn có thể sử dụng các SDK tiêu chuẩn, nhưng mô hình này khác biệt và được tinh chỉnh để giảm thiểu các hạn chế về nội dung.

Làm thế nào để nạp tín dụng?

Nạp tiền chỉ được thực hiện qua tiền điện tử. Bạn có thể thanh toán bằng USDT trên mạng lưới TRC20 hoặc USDC trên mạng lưới Base. Bất kỳ số nguyên nào trong khoảng từ $20 đến $500 đều được chấp nhận. Tín dụng khuyến mãi được áp dụng tự động dựa trên số tiền nạp.

Kích thước context window là bao nhiêu?

Cửa sổ ngữ cảnh là 100,000 token, bao gồm cả prompt và kết quả. Lượng output tối đa cho mỗi yêu cầu là 16,000 token, hoặc 2,048 nếu bạn không chỉ định tham số max_tokens.

Có bất kỳ khoản phí đăng ký hàng tháng nào không?

Không. Chúng tôi sử dụng mô hình token trả trước. Bạn chỉ trả tiền cho các token bạn sử dụng. Không có phí hàng tháng định kỳ, không cam kết tối thiểu và tín dụng của bạn không bao giờ hết hạn. Lỗi và từ chối đều miễn phí.

Lấy khóa API của bạn ngay bây giờ

Đăng ký, sao chép token, cập nhật URL cơ sở của bạn. Đó là tất cả.