home.social

#webscrapping — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #webscrapping, aggregated by home.social.

  1. It’s finished, at least partially. These are my web scraping microservices for Brazilian public exams (“concursos”). They are simple: they scrape three sources and return a JSON-like API response with more readable information.
    Fell free to see in REPO: github.com/Dum2601/lista-concu

    #python
    #webscrapping
    #programming

  2. Tạo ứng dụng Idealo nội bộ cho doanh nghiệp – bắt đầu từ đâu? Doanh nghiệp cần công cụ so sánh giá từ các nền tảng thương mại điện tử để phân tích cạnh tranh. Cần tư vấn giải pháp (API, web scraping) và hỗ trợ từ chuyên gia có kinh nghiệm. #KinhDoanh #CNNT #Technology #API #WebScrapping

    reddit.com/r/programming/comme

  3. AlterLab - API cào dữ liệu web kết hợp proxy cá nhân (BYOP), tự động điều chỉnh cấp độ và phục hồi lỗi. Miễn phí 1000 lượt/tháng, giá linh hoạt, không khóa dịch vụ. #Scraping #API #WebScrapping #AltLab #TiếtKiệmChiPhí

    reddit.com/r/SideProject/comme

  4. Tôi đang quản lý nhiều scraper chạy theo lịch trình khác nhau. Mỗi khi chỉnh sửa parser, dữ liệu lại lệch nhau dù tên trường giống nhau. Tôi nên dùng kho lưu trữ cấu trúc dành riêng cho web scraping như hệ thống ống dẫn dữ liệu hay quản lý thủ công bằng version tags? #WebScrapping #QuảnLýDữLiệu #KhuônDữLiệu

    reddit.com/r/selfhosted/commen

  5. Tôi đã xây dựng uAPI để chuyển đổi các trang web hỗn loạn thành hợp đồng JSON nhất quán mà bạn có thể tin cậy. uAPI cung cấp giao diện đọc ổn định cho web, trả về-envelope JSON nhất quán cho bất kỳ trang công khai nào được phép. #uAPI #JSON #HợpĐống #TrìnhDuyệt #WebScrapping #DataEngineering #MachineLearning #TrìnhXửLýDữLiệu #HọcMáy #CôngNghệ #TinHọc #TrangWeb #DữLiệu #KhoaHọcDữLiệu

    reddit.com/r/SideProject/comme

  6. @annearchet @scarpentier Y'a sûrement un(e) geek qui va proposer d'automatiser avec python+selenium comme je l'ai fait ici (pour automatiser la commande de crayons sur le site du cegep 😏 ). Sûr, ce n'est pas du matos érotique 🍆 mais le principe est le même: tout ce qu'un usager accomplit comme tâche via un browser peut-être automatisé... mais il faut fouiller dans le html du site pour bâtir les invocations de Selenium 😐 selenium-python.readthedocs.io

    #selenium #webScrapping #python

  7. @annearchet @scarpentier Y'a sûrement un(e) geek qui va proposer d'automatiser avec python+selenium comme je l'ai fait ici (pour automatiser la commande de crayons sur le site du cegep 😏 ). Sûr, ce n'est pas du matos érotique 🍆 mais le principe est le même: tout ce qu'un usager accomplit comme tâche via un browser peut-être automatisé... mais il faut fouiller dans le html du site pour bâtir les invocations de Selenium 😐 selenium-python.readthedocs.io

    #selenium #webScrapping #python

  8. @annearchet @scarpentier Y'a sûrement un(e) geek qui va proposer d'automatiser avec python+selenium comme je l'ai fait ici (pour automatiser la commande de crayons sur le site du cegep 😏 ). Sûr, ce n'est pas du matos érotique 🍆 mais le principe est le même: tout ce qu'un usager accomplit comme tâche via un browser peut-être automatisé... mais il faut fouiller dans le html du site pour bâtir les invocations de Selenium 😐 selenium-python.readthedocs.io

    #selenium #webScrapping #python

  9. @annearchet @scarpentier Y'a sûrement un(e) geek qui va proposer d'automatiser avec python+selenium comme je l'ai fait ici (pour automatiser la commande de crayons sur le site du cegep 😏 ). Sûr, ce n'est pas du matos érotique 🍆 mais le principe est le même: tout ce qu'un usager accomplit comme tâche via un browser peut-être automatisé... mais il faut fouiller dans le html du site pour bâtir les invocations de Selenium 😐 selenium-python.readthedocs.io

    #selenium #webScrapping #python

  10. @annearchet @scarpentier Y'a sûrement un(e) geek qui va proposer d'automatiser avec python+selenium comme je l'ai fait ici (pour automatiser la commande de crayons sur le site du cegep 😏 ). Sûr, ce n'est pas du matos érotique 🍆 mais le principe est le même: tout ce qu'un usager accomplit comme tâche via un browser peut-être automatisé... mais il faut fouiller dans le html du site pour bâtir les invocations de Selenium 😐 selenium-python.readthedocs.io

    #selenium #webScrapping #python

  11. Usar modelos LLM para rellenar datos en formularios en scripts de WebScrapping o WebScalpping y para hacer e-mail guessing con todo lo que ello implica. De eso he escrito hoy elladodelmal.com/2024/06/websc #GPT #GenAI #WebScrapping #AI #Pentest #hacking

  12. Usar modelos LLM para rellenar datos en formularios en scripts de WebScrapping o WebScalpping y para hacer e-mail guessing con todo lo que ello implica. De eso he escrito hoy elladodelmal.com/2024/06/websc #GPT #GenAI #WebScrapping #AI #Pentest #hacking

  13. Usar modelos LLM para rellenar datos en formularios en scripts de WebScrapping o WebScalpping y para hacer e-mail guessing con todo lo que ello implica. De eso he escrito hoy elladodelmal.com/2024/06/websc #GPT #GenAI #WebScrapping #AI #Pentest #hacking

  14. Usar modelos LLM para rellenar datos en formularios en scripts de WebScrapping o WebScalpping y para hacer e-mail guessing con todo lo que ello implica. De eso he escrito hoy elladodelmal.com/2024/06/websc #GPT #GenAI #WebScrapping #AI #Pentest #hacking

  15. Usar modelos LLM para rellenar datos en formularios en scripts de WebScrapping o WebScalpping y para hacer e-mail guessing con todo lo que ello implica. De eso he escrito hoy elladodelmal.com/2024/06/websc #GPT #GenAI #WebScrapping #AI #Pentest #hacking

  16. Web scrappers!
    I've added new language support to newspaper3k and it's working.
    Language : Tamil
    Language code : ta
    Repo : github.com/pj8912/newspaper

    Made a pull request to the main newspaper repo.
    Check out the PR : github.com/codelucas/newspaper

    #webscrapping #python #news #tamil

  17. Web scrappers!
    I've added new language support to newspaper3k and it's working.
    Language : Tamil
    Language code : ta
    Repo : github.com/pj8912/newspaper

    Made a pull request to the main newspaper repo.
    Check out the PR : github.com/codelucas/newspaper

    #webscrapping #python #news #tamil

  18. Web scrappers!
    I've added new language support to newspaper3k and it's working.
    Language : Tamil
    Language code : ta
    Repo : github.com/pj8912/newspaper

    Made a pull request to the main newspaper repo.
    Check out the PR : github.com/codelucas/newspaper

    #webscrapping #python #news #tamil

  19. Web scrappers!
    I've added new language support to newspaper3k and it's working.
    Language : Tamil
    Language code : ta
    Repo : github.com/pj8912/newspaper

    Made a pull request to the main newspaper repo.
    Check out the PR : github.com/codelucas/newspaper

    #webscrapping #python #news #tamil

  20. Dark Visitors - A list of known AI agents on the internet
    Insight into the hidden ecosystem of autonomous chatbots and data scrapers crawling across the web
    darkvisitors.com/
    #ai #robots.txt #searchengines #seo #tools #webscrapping

  21. Dark Visitors - A list of known AI agents on the internet
    Insight into the hidden ecosystem of autonomous chatbots and data scrapers crawling across the web
    darkvisitors.com/
    #ai #robots.txt #searchengines #seo #tools #webscrapping

  22. Dark Visitors - A list of known AI agents on the internet
    Insight into the hidden ecosystem of autonomous chatbots and data scrapers crawling across the web
    darkvisitors.com/
    #ai #robots.txt #searchengines #seo #tools #webscrapping

  23. Dark Visitors - A list of known AI agents on the internet
    Insight into the hidden ecosystem of autonomous chatbots and data scrapers crawling across the web
    darkvisitors.com/
    #ai #robots.txt #searchengines #seo #tools #webscrapping

  24. Dark Visitors - A list of known AI agents on the internet
    Insight into the hidden ecosystem of autonomous chatbots and data scrapers crawling across the web
    darkvisitors.com/
    #ai #robots.txt #searchengines #seo #tools #webscrapping