Tự động xóa liên kết qua chat bot nhóm Telegram

Những liên kết nào cần xóa trong nhóm Telegram

Trước khi thiết lập bộ lọc, hãy cố định quy tắc cho thành viên và người kiểm duyệt. Trong Telegram, liên kết không chỉ là văn bản dạng https://site.example. Thành viên có thể gửi địa chỉ không có giao thức, lời mời vào chat khác, URL rút gọn, văn bản có thể nhấp với địa chỉ bị thay thế, liên kết trong chú thích ảnh, video hoặc tài liệu.

Hãy xác định riêng số phận của các liên kết đến nền tảng phát trực tuyến, mạng xã hội, dịch vụ donate, đám mây, portfolio, cửa hàng và biểu mẫu đăng ký. Đối với chat của streamer, thường cấm quảng cáo kênh của người khác và lời mời từ bên ngoài, nhưng vẫn để lại liên kết đến lịch phát sóng, clip, donate và tài nguyên của đội.

Bot nhận tin nhắn sau khi đã gửi và sau đó xóa nó. Vì vậy liên kết có thể hiển thị trong chat vài giây. Telegram không cho phép bot chặn trước việc gửi tin nhắn của thành viên.

Chọn sơ đồ lọc thay vì cấm toàn bộ

Xóa hoàn toàn mọi liên kết phù hợp với chat kín, nơi chỉ đội ngũ dự án đăng tài liệu. Trong cộng đồng công khai, sơ đồ này nhanh chóng gây trở ngại: người xem sẽ không thể gửi mốc thời gian, báo cáo lỗi, liên kết đến clip hoặc tài liệu cần thiết theo chủ đề thảo luận.

Thực tế hơn là chia liên kết thành nhiều loại: tên miền được phép, liên kết từ vai trò tin cậy, liên kết đáng ngờ từ người mới và lời mời bị cấm. Ví dụ, có thể xóa mọi lời mời t.me, liên kết đến stream của người khác và dịch vụ rút gọn URL, nhưng cho phép liên kết đến tài nguyên chính thức của kênh.

• Sơ đồ nghiêm ngặt: xóa mọi URL từ thành viên thông thường.
• Danh sách trắng: chỉ cho phép tên miền và tên miền con đã được phê duyệt.
• Sơ đồ theo vai trò: không kiểm tra liên kết từ quản trị viên, người kiểm duyệt và bot dịch vụ.
• Sơ đồ theo uy tín: chỉ áp dụng bộ lọc nghiêm ngặt cho tài khoản mới hoặc đáng ngờ.

Quy tắc càng phức tạp thì càng cần nhiều thử nghiệm. Sơ đồ quá lỏng sẽ bỏ sót một phần quảng cáo, còn quá rộng sẽ bắt đầu xóa tin nhắn bình thường.

Bot có sẵn, trình tạo hay logic riêng

Để kiểm duyệt cơ bản, có thể dùng bot có sẵn, ví dụ Combot hoặc Rose. Trong các giải pháp như vậy thường có chống spam, bộ lọc từ, giới hạn cho người mới, cảnh báo và nhật ký hành động. Trước khi cài đặt, hãy kiểm tra xem bot được chọn có phân tích được chính xác liên kết, chú thích media và tin nhắn đã chỉnh sửa hay không.

Bot có sẵn tiện lợi khi chỉ cần quy tắc tiêu chuẩn. Nhưng tập ngoại lệ, định dạng log và logic kiểm tra URL có thể bị giới hạn bởi cài đặt của dịch vụ. Lệnh của các bot này khác nhau theo phiên bản và giao diện, vì vậy hãy dựa vào trợ giúp hiện tại của chúng, không dựa vào hướng dẫn ngẫu nhiên từ các bài đăng cũ.

Trình tạo tự động hóa phù hợp cho kịch bản đơn giản: nhận tin nhắn, tìm URL, gửi thông báo cho người kiểm duyệt. Điểm yếu của nó là độ trễ, giới hạn tích hợp và phụ thuộc vào nền tảng bên ngoài. Với chat hoạt động mạnh, điều này có thể thấy rõ.

Bot riêng qua Telegram Bot API cần thiết nếu yêu cầu chính sách riêng cho các chủ đề, vai trò và loại liên kết khác nhau. Nó cho phép kiểm tra entity của Telegram, lưu lịch sử vi phạm và gửi log vào chat kiểm duyệt kín. Đổi lại, bạn phải chịu trách nhiệm về máy chủ, cập nhật và bảo mật token.

Bot cần những quyền gì để xóa tin nhắn

Thêm bot vào nhóm cần thiết và chỉ định làm quản trị viên với quyền xóa tin nhắn. Nếu không có điều này, bot có thể nhận diện URL, ghi sự kiện vào log và thậm chí gửi cảnh báo, nhưng không thể xóa bài đăng.

Nếu dự định có giới hạn tạm thời, cấm gửi tin nhắn hoặc ban sau vi phạm lặp lại, sẽ cần các quyền tương ứng. Đối với chống liên kết đơn giản, không cần quyền thay đổi hồ sơ nhóm, chỉ định quản trị viên hoặc quản lý lời mời.

Chỉ cấp các quyền cần thiết. Lỗi trong mã, lỗ hổng dịch vụ hoặc token bị xâm phạm sẽ nguy hiểm hơn nếu bot nhận được toàn quyền kiểm soát chat.

Kiểm tra xem bot có nhận tin nhắn của thành viên không

Sau khi thêm, đừng chỉ giới hạn ở lệnh khởi động. Gửi tin nhắn thử từ tài khoản thông thường không có quyền quản trị. Kiểm tra văn bản có liên kết, liên kết trong chú thích ảnh và văn bản có thể nhấp. Điều quan trọng là phải kiểm tra với tư cách thành viên: chủ sở hữu và quản trị viên thường nằm trong ngoại lệ.

Đối với bot riêng, hãy kiểm tra các bản cập nhật đến. Tin nhắn mới thường đến trong trường message, còn thay đổi của tin nhắn đã đăng — trong edited_message. Nếu bot hoạt động trong kênh có nhóm liên kết hoặc xử lý bài đăng kênh, có thể cần các loại cập nhật riêng.

Chế độ riêng tư cũng ảnh hưởng đến việc bot nhận được tin nhắn nào. Nếu trình xử lý chỉ thấy lệnh và trả lời tin nhắn của bot, bộ lọc liên kết sẽ không hoạt động đầy đủ. Sau khi thay đổi cài đặt, hãy kiểm tra lại cập nhật trên nhóm thử nghiệm.

Kiểm tra entity của Telegram, không chỉ văn bản

Trong tin nhắn, Telegram truyền các entity định dạng. Đối với liên kết, đặc biệt quan trọng là entity url và text_link. Loại đầu tiên có nghĩa là địa chỉ nằm trong văn bản. Loại thứ hai có nghĩa là địa chỉ bị ẩn dưới một từ thông thường: ví dụ, thành viên gửi «xem ở đây», nhưng chuyển hướng đến trang quảng cáo.

Nếu bot chỉ kiểm tra chuỗi tin nhắn, text_link dễ bị bỏ qua. Đối với text_link, cần trích xuất URL từ trường entity, không tìm tên miền trong văn bản hiển thị. Đối với chú thích media, hãy phân tích caption và caption_entities giống như text và entities.

Logic kiểm tra tối thiểu như sau: thu thập URL từ entity, sau đó tìm địa chỉ văn bản mà Telegram không nhận diện là entity, chuẩn hóa tên miền và so sánh với quy tắc. Cần xóa toàn bộ tin nhắn cùng với tệp đính kèm, nếu không trong chat sẽ còn lại hình ảnh quảng cáo hoặc tệp không có chú thích.

Ví dụ regex cho URL và lời mời Telegram

Regex không thay thế việc kiểm tra entity, nhưng giúp bắt địa chỉ không có giao thức và văn bản được định dạng không chuẩn. Ví dụ, đối với URL thông thường có thể dùng mẫu: (?i)\b(?:https?://|www\.)[^\s]+. Nó tìm địa chỉ có http, https và www, nhưng sẽ không thấy tên miền dạng example.com không có tiền tố.

Đối với tên miền không có giao thức, có thể thêm kiểm tra riêng: (?i)\b[a-z0-9](?:[a-z0-9-]{0,61}[a-z0-9])?\.(?:com|net|org|ru|io|gg)\b(?:/[^\s]*)?. Danh sách vùng cần chọn theo đối tượng. Nếu chỉ liệt kê vài vùng, spammer có thể dùng vùng khác. Nếu mẫu quá rộng, nó sẽ bắt đầu nhầm URL với ký hiệu kỹ thuật.

Lời mời trong Telegram tiện kiểm tra bằng quy tắc riêng: (?i)\b(?:https?://)?(?:t\.me|telegram\.me)/(?:joinchat/|\+|[a-z0-9_]{5,})\b. Quy tắc như vậy bao phủ liên kết công khai t.me và một phần lời mời. Nó không nên tự động coi liên kết đến chat chính thức của dự án là spam, vì vậy tên miền và các đường dẫn được phép cụ thể được thêm vào ngoại lệ.

Đừng cố đóng mọi cách vượt qua bằng một regex. Dạng ghi s i t e . com, thay dấu chấm bằng từ «chấm», ký tự Unicode và hình ảnh có địa chỉ cần các phương pháp khác: đánh giá chống spam, kiểm tra thủ công hoặc OCR. Mẫu quá tích cực sẽ gây nhiều xóa nhầm.

Xử lý liên kết trong chú thích, chuyển tiếp và tệp

Spam hiếm khi giới hạn ở tin nhắn văn bản thông thường. Liên kết có thể nằm trong caption của ảnh, video, GIF, tài liệu, âm thanh hoặc cuộc thăm dò có giải thích. Nếu bot chỉ xem trường text, thành viên sẽ vượt qua bộ lọc chỉ bằng một tệp media.

Đối với mỗi tin nhắn đến, hãy kiểm tra text, entities, caption và caption_entities. Tên tài liệu đôi khi cũng chứa tên miền hoặc văn bản quảng cáo, nhưng nên cẩn thận khi xóa tệp chỉ vì tên: trong chat công việc, rất dễ mất kho lưu trữ hoặc bản ghi stream cần thiết.

Bài đăng chuyển tiếp không phải lúc nào cũng chứa URL hiển thị, nhưng có thể dẫn đến kênh bên ngoài qua nút hoặc chú thích. Bot thông thường không phải lúc nào cũng nhận được tất cả dữ liệu về nút nhúng và nguồn chuyển tiếp ở định dạng thuận tiện cho lọc. Nếu chuyển tiếp là vấn đề, đối với thành viên mới an toàn hơn là giới hạn riêng hoặc gửi các bài đăng như vậy để kiểm tra thủ công.

Đóng lỗ hổng vượt qua qua chỉnh sửa tin nhắn

Cách vượt qua điển hình như sau: thành viên gửi cụm từ trung tính, chờ tin nhắn ra khỏi vùng chú ý của người kiểm duyệt, sau đó thêm quảng cáo qua chỉnh sửa. Nếu trình xử lý chỉ phản ứng với tin nhắn mới, liên kết sẽ ở lại trong nhóm.

Đối với bot riêng, hãy đăng ký cập nhật edited_message và chạy cùng chức năng kiểm tra như đối với message. Đừng tạo logic riêng bị cắt gọn: nếu không bộ lọc có thể xóa liên kết trực tiếp trong tin nhắn mới, nhưng bỏ qua text_link hoặc caption sau khi chỉnh sửa.

Trong nhật ký, hãy đánh dấu rằng việc xóa xảy ra sau khi chỉnh sửa và lưu ID tin nhắn gốc. Điều này giúp phân tích báo cáo: thành viên có thể đã chỉnh sửa bài đăng cũ không phải để quảng cáo, mà để sửa liên kết đến tài nguyên được phép.

Xây dựng danh sách trắng tên miền và đường dẫn

Danh sách trắng nên được xây dựng theo tên miền đã chuẩn hóa, không theo khớp chuỗi đầy đủ. Đối với địa chỉ https://clips.example.com/video/123, bot phải tách host clips.example.com khỏi đường dẫn, chuyển sang chữ thường và loại bỏ tiền tố dịch vụ www.

Ví dụ danh sách ngoại lệ cho cộng đồng streamer:

• trang web chính của bạn và các tên miền con cần thiết;
• trang kênh trên nền tảng phát trực tuyến;
• trang có lịch phát sóng và thông báo;
• dịch vụ donate mà dự án sử dụng;
• tài liệu của đội, biểu mẫu đăng ký và trình theo dõi nhiệm vụ;
• liên kết Telegram chính thức của dự án: @username cụ thể của chat hoặc kênh;
• tên miền đối tác, nếu việc đăng chúng thực sự được quy tắc cho phép.

Đừng thêm toàn bộ dịch vụ lớn vào danh sách trắng nếu chỉ cần một tài nguyên cụ thể. Cho phép toàn bộ tên miền có thể mở đường đến trang của người khác, spam giới thiệu hoặc lừa đảo trên cùng nền tảng. Trong những trường hợp như vậy, hãy kiểm tra không chỉ tên miền mà cả đường dẫn URL được phép.

Phân tách vai trò tin cậy và thành viên thông thường

Quản trị viên, người kiểm duyệt và bot thông báo thường nên đăng liên kết không bị trì hoãn. Cách đơn giản nhất là bỏ qua người dùng có trạng thái quản trị viên. Nó tiện lợi, nhưng cho ngoại lệ hoàn toàn mọi người được cấp quyền quản trị, bao gồm trợ lý tạm thời.

Cách nghiêm ngặt hơn là danh sách user ID riêng của tài khoản tin cậy. Nó hữu ích khi không phải tất cả quản trị viên đều nên quảng cáo tài nguyên bên ngoài. Danh sách cần được xem xét lại sau khi thay đổi đội ngũ: ID bị quên của cựu kiểm duyệt viên trở thành lỗ hổng vượt qua bộ lọc.

Đối với người mới, có thể bật chế độ riêng. Ví dụ, xóa mọi liên kết bên ngoài từ thành viên mới tham gia gần đây, còn tin nhắn của người dùng thường xuyên gửi để kiểm tra nhẹ hơn. Cách tiếp cận như vậy cắt spam hàng loạt, nhưng có thể cản trở người xem thực sự ngay lập tức gửi tài liệu cần thiết.

Cách phân biệt liên kết quảng cáo với liên kết hữu ích

Một URL tự nó không chứng minh spam. Hãy đánh giá ngữ cảnh tin nhắn, tên miền và hành vi của tác giả. Liên kết đến ghi chú vá trong thảo luận cập nhật trò chơi khác với «ghé kênh tôi» dưới bất kỳ tin nhắn nào, ngay cả khi cả hai địa chỉ đều đúng về mặt kỹ thuật.

• Liên kết dẫn đến tên miền trong danh sách trắng hoặc tài nguyên nổi tiếng theo chủ đề thảo luận.
• Văn bản xung quanh URL liên quan đến cuộc trò chuyện hiện tại, không chứa lời kêu gọi đăng ký hoặc kiếm tiền theo mẫu.
• Thành viên đã ở trong nhóm lâu, viết tin nhắn thông thường và không đăng cùng văn bản ở nhiều chủ đề.
• Tên miền không sử dụng thay thế đáng ngờ, ký tự tương tự và chuỗi chuyển hướng qua dịch vụ rút gọn.
• Liên kết được đăng trong chủ đề được phép, ví dụ phần clip, đăng ký hoặc hỗ trợ kỹ thuật.
• Tài khoản không gửi nhiều tin nhắn liên tiếp với các liên kết khác nhau sau khi tham gia chat.

Không nên biến heuristic thành ban tự động. Uy tín của thành viên có thể thấp ở người xem thực sự mới, còn tài khoản nổi tiếng đôi khi bị xâm phạm. Đối với trường hợp ranh giới, hữu ích hơn là xóa tin nhắn, lưu vào log và cung cấp cách nhanh chóng liên hệ người kiểm duyệt.

Thiết lập phản ứng sau khi xóa liên kết

Xóa im lặng giảm tiếng ồn, nhưng thành viên có thể lặp lại đăng mà không hiểu lý do. Thông báo ngắn trong chat hoặc tin nhắn riêng làm quy tắc minh bạch hơn. Đừng đăng URL đã xóa trong thông báo: như vậy bot sẽ tự phát tán lại spam.

Văn bản thông báo phù hợp: «Liên kết đã bị xóa theo quy tắc nhóm. Được phép tài liệu theo chủ đề và tên miền trong danh sách ngoại lệ. Nếu tin nhắn bị xóa nhầm, hãy viết cho người kiểm duyệt». Cách diễn đạt tốt hơn nên được điều chỉnh theo quy tắc cộng đồng.

Bộ đếm vi phạm hữu ích để chống spam lặp lại. Nhưng đừng bật chặn tự động ngay lần kích hoạt đầu tiên. Trước tiên hãy thu thập thống kê xóa nhầm, đặc biệt nếu kiểm tra tên miền không có giao thức và liên kết trong chú thích.

Ghi log và thông báo cho người kiểm duyệt

Log kiểm duyệt phải chứa tối thiểu dữ liệu để phân tích: ID chat, ID người dùng, tên hoặc username tại thời điểm sự kiện, ID tin nhắn, thời gian, loại kích hoạt và lý do. Lý do có thể là «tên miền bị cấm», «lời mời vào nhóm bên ngoài», «dịch vụ rút gọn URL», «liên kết sau khi chỉnh sửa» hoặc «liên kết từ thành viên mới».

URL đã xóa tốt hơn nên gửi vào chat kiểm duyệt kín, không lưu trong kênh log chung. Nếu liên kết có thể độc hại, đừng làm cho nó có thể nhấp: truyền tên miền dưới dạng văn bản hoặc thay dấu chấm bằng dấu cách kèm giải thích cho người kiểm duyệt.

Thông báo hữu ích cho người kiểm duyệt bao gồm hành động và ngữ cảnh: ai gửi tin nhắn, nó được đăng ở đâu, bị xóa theo quy tắc nào và có phải là chỉnh sửa không. Khi đó người kiểm duyệt có thể nhanh chóng quyết định thêm tên miền vào danh sách trắng, gỡ giới hạn khỏi thành viên hoặc giữ nguyên quy tắc.

Phải làm gì khi kích hoạt nhầm

Thành viên cần lộ trình báo cáo rõ ràng: tin nhắn riêng cho người kiểm duyệt, chủ đề riêng trong nhóm hoặc biểu mẫu phản hồi. Đừng yêu cầu gửi lại liên kết đã xóa vào chat chung. Tốt hơn là đề nghị gửi tên miền và giải thích lý do cần nó.

Khi phân tích, người kiểm duyệt nên kiểm tra quy tắc, loại entity và trạng thái tác giả. Nếu URL được phép, hãy thêm tên miền hoặc đường dẫn chính xác vào ngoại lệ. Nếu vấn đề phát sinh do regex quá rộng, hãy thu hẹp mẫu, không tạo danh sách hàng chục ngoại lệ ngẫu nhiên.

Đừng tự động khôi phục bất kỳ tin nhắn đã xóa nào. Trong đó có thể có liên kết lừa đảo, và ngữ cảnh gốc đã biến mất. An toàn hơn là yêu cầu tác giả đăng lại tài liệu sau khi người kiểm duyệt xác nhận hoặc đặt nó trong chủ đề dành cho liên kết.

Kiểm tra bộ lọc trong nhóm thử nghiệm trước khi chạy

Tạo nhóm thử nghiệm với cùng quyền của bot và tạo tài khoản thử nghiệm thông thường. Kiểm tra từ chủ chat không phù hợp: họ có thể bị loại khỏi bộ lọc với tư cách quản trị viên. Ghi lại kết quả để sau khi thay đổi regex hoặc danh sách trắng không làm hỏng các kịch bản đang hoạt động.

1. Gửi URL có https, có www và tên miền không có giao thức.
2. Kiểm tra liên kết bị ẩn trong văn bản có thể nhấp qua entity text_link.
3. Gửi lời mời t.me vào nhóm bên ngoài và liên kết đến chat được phép của dự án.
4. Thêm URL vào chú thích ảnh, video và tài liệu.
5. Chỉnh sửa tin nhắn trung tính và chèn liên kết bị cấm vào đó.
6. Kiểm tra bài đăng từ tên miền được phép và tin nhắn từ người kiểm duyệt tin cậy.
7. Đảm bảo log kiểm duyệt nhận được lý do xóa mà không đăng liên kết nguy hiểm trong chat chung.

Thêm quy tắc về liên kết vào mô tả nhóm

Quy tắc ngắn giảm số vi phạm lặp lại và tranh chấp với thành viên. Chỉ cần nêu rõ rằng liên kết quảng cáo, lời mời bên ngoài và URL rút gọn bị xóa tự động, còn tài liệu hữu ích có thể được thống nhất với kiểm duyệt.

Đừng tiết lộ trong mô tả tất cả chi tiết kỹ thuật của bộ lọc, biểu thức chính quy và điều kiện kiểm tra uy tín. Thông tin này giúp spammer tìm cách vượt qua. Đối với thành viên, quan trọng hơn là biết liên kết nào được phép và liên hệ ở đâu khi bị xóa nhầm.