tạo bot bằng framework gì v anh Duy Luân hiện nay phổ biến là scrapy và Selenium nhưng Facebook và một số trang web khác có hệ thống detection rất mạnh...các tool crawl data thường không sống lâu được...chưa kể là FB hình như mã hóa hết nội dung trên FB rồi có crawl về cũng ko đọc được Rất mong anh chia sẻ thêm
htr-dev @LuisYuri Có thể dùng selenium, hoạt động theo kiểu nó đăng nhập bằng account facebook để được phép truy cập vào nội dung. Để không bị block thì ta có thể theo cách chính thống ^^ Hoặc dùng cách xoay vòng User-Agent, proxy hoặc giảm tốc crawl, ví dụ như facebook sẽ detect nếu thao tác click chuột vào các element quá nhanh
hungbya @LuisYuri Mình dùng NodeJS để crawl. Dùng module request để gửi http request, Parse HTML/XML thì dùng Cheerio, còn JSON thì cứ JSON.parse thẳng tiến. Đã từng thử dùng Python để code crawler nhưng sau khi chuyển qua dùng NodeJS thì thấy tuyệt hơn hẳn.
Trang Shirley @LuisYuri Cho em hỏi là hiện em đang quản lí một page nhỏ. Cần trích xuất dữ liệu như trên, cụ thể là đếm tổng số post chứa một hastag cho trước. Tổng cộng số kết quả không quá 3000 kết quả. Chỉ cần một con số thôi ạ. Không biết có đơn vị nào hay có freelancer nào nhận làm không ạ? Mọi người cho em xin contact với ạ. Chúng em là một đơn vị học sinh thôi ạ nên rất mong mn có thể cho em xin một contact giá rẻ. Em cảm ơn mọi người rất nhiều!
Trang Shirley @hungbya Cho em hỏi là hiện em đang quản lí một page nhỏ. Cần trích xuất dữ liệu như trên, cụ thể là đếm tổng số post chứa một hastag cho trước. Tổng cộng số kết quả không quá 3000 kết quả. Chỉ cần một con số thôi ạ. Không biết có đơn vị nào hay có freelancer nào nhận làm không ạ? Mọi người cho em xin contact với ạ. Chúng em là một đơn vị học sinh thôi ạ nên rất mong mn có thể cho em xin một contact giá rẻ. Em cảm ơn mọi người rất nhiều!
Trang Shirley @Duy Luân Cho em hỏi là hiện em đang quản lí một page nhỏ. Cần trích xuất dữ liệu như trên, cụ thể là đếm tổng số post chứa một hastag cho trước. Tổng cộng số kết quả không quá 3000 kết quả. Chỉ cần một con số thôi ạ. Không biết có đơn vị nào hay có freelancer nào nhận làm không ạ? Mọi người cho em xin contact với ạ. Chúng em là một đơn vị học sinh thôi ạ nên rất mong mn có thể cho em xin một contact giá rẻ. Em cảm ơn mọi người rất nhiều!
Duy Luân @Trang Shirley Mình thì không rành freelance mà chắc bạn tự viết được đó Uả mà group hay page nó hay có mấy công cụ thông kê mà nhỉ? :-?