home.social

#openllm — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #openllm, aggregated by home.social.

  1. @chpollin

    > Vielleicht ein Thema für einen AI-/
    > RSE-AG-übergreifenden Preconference
    > Workshop nächstes Jahr? Ich wäre dabei!

    Andererseits habe ich ja auch gerade gesagt, dass ich etwas verunsichert bin, wie ich weitermachen will, weil ich mir die Community (mich selbst inbegriffen) etwas ambitionierter erhofft hatte, was die Substanziierung der Kritik an #AI angeht. Und obendrein ist heute überhaupt kein Tag, wo man so einfach zum Tagesgeschäft der nächsten Konferenzplanung weitergehen kann! Und das hängt ja alles zusammen.

    Ich muss echt mal gründlich nachdenken...

    #DHd2026 #DHd2027 #LLM #OpenLLM #AIEthics #Iran #Trump #BigTech #Fascism #CriticalAI #CriticalScience

  2. @chpollin

    > Vielleicht ein Thema für einen AI-/
    > RSE-AG-übergreifenden Preconference
    > Workshop nächstes Jahr? Ich wäre dabei!

    Andererseits habe ich ja auch gerade gesagt, dass ich etwas verunsichert bin, wie ich weitermachen will, weil ich mir die Community (mich selbst inbegriffen) etwas ambitionierter erhofft hatte, was die Substanziierung der Kritik an #AI angeht. Und obendrein ist heute überhaupt kein Tag, wo man so einfach zum Tagesgeschäft der nächsten Konferenzplanung weitergehen kann! Und das hängt ja alles zusammen.

    Ich muss echt mal gründlich nachdenken...

    #DHd2026 #DHd2027 #LLM #OpenLLM #AIEthics #Iran #Trump #BigTech #Fascism #CriticalAI #CriticalScience

  3. @chpollin

    > Vielleicht ein Thema für einen AI-/
    > RSE-AG-übergreifenden Preconference
    > Workshop nächstes Jahr? Ich wäre dabei!

    Andererseits habe ich ja auch gerade gesagt, dass ich etwas verunsichert bin, wie ich weitermachen will, weil ich mir die Community (mich selbst inbegriffen) etwas ambitionierter erhofft hatte, was die Substanziierung der Kritik an #AI angeht. Und obendrein ist heute überhaupt kein Tag, wo man so einfach zum Tagesgeschäft der nächsten Konferenzplanung weitergehen kann! Und das hängt ja alles zusammen.

    Ich muss echt mal gründlich nachdenken...

    #DHd2026 #DHd2027 #LLM #OpenLLM #AIEthics #Iran #Trump #BigTech #Fascism #CriticalAI #CriticalScience

  4. @chpollin

    > Vielleicht ein Thema für einen AI-/
    > RSE-AG-übergreifenden Preconference
    > Workshop nächstes Jahr? Ich wäre dabei!

    Andererseits habe ich ja auch gerade gesagt, dass ich etwas verunsichert bin, wie ich weitermachen will, weil ich mir die Community (mich selbst inbegriffen) etwas ambitionierter erhofft hatte, was die Substanziierung der Kritik an #AI angeht. Und obendrein ist heute überhaupt kein Tag, wo man so einfach zum Tagesgeschäft der nächsten Konferenzplanung weitergehen kann! Und das hängt ja alles zusammen.

    Ich muss echt mal gründlich nachdenken...

    #DHd2026 #DHd2027 #LLM #OpenLLM #AIEthics #Iran #Trump #BigTech #Fascism #CriticalAI #CriticalScience

  5. @chpollin

    > Vielleicht ein Thema für einen AI-/
    > RSE-AG-übergreifenden Preconference
    > Workshop nächstes Jahr? Ich wäre dabei!

    Andererseits habe ich ja auch gerade gesagt, dass ich etwas verunsichert bin, wie ich weitermachen will, weil ich mir die Community (mich selbst inbegriffen) etwas ambitionierter erhofft hatte, was die Substanziierung der Kritik an #AI angeht. Und obendrein ist heute überhaupt kein Tag, wo man so einfach zum Tagesgeschäft der nächsten Konferenzplanung weitergehen kann! Und das hängt ja alles zusammen.

    Ich muss echt mal gründlich nachdenken...

    #DHd2026 #DHd2027 #LLM #OpenLLM #AIEthics #Iran #Trump #BigTech #Fascism #CriticalAI #CriticalScience

  6. Zum Thema Evaluation im Theorie-Teil (@SarahOberbichler) des Workshops LLMs unter Kontrolle: kurze Fragen der Teilnehmenden zu Verfallsdatum von Benchmarks wenn LLMs mit den Evaluationsdaten trainiert werden und zu (Nicht-)Steuerbarkeit von LLM Harvesting mit robots.txt/llm.txt

    Dann Thema Profiling von Trainingsdatensätzen am Bsp. Dolma/Olmo. Sprache und Labels (Bsp. "History", wo es viele Quellen gibt, die so "meh" und weder historische Texte noch geschichtswissenschaftlich sind.)

    Dann nochmal Thema Bias Evaluation...

    Link zu Folien poste ich später in diesem Thread.

    #DHd2026 #LLM #OpenLLM

  7. Und jetzt zweiter Theorie-Teil mit @SarahOberbichler: LLM als Tool oder als Werkzeug, was sind typische Nutzungsszenarios in den DH? Zu berücksichtigen: Risikobewertung, systematische Evaluation.

    A propos Infrastruktur: mehr als die Hälfte der Teilnehmenden hätten wohl Zugang zu institutionellen HPC- und Jupyter-Angeboten. Aber auch kommerzielle Compute-Angebote oder Zwischengestalten wie HuggingFace.

    #DHd2026 #LLM #OpenLLM

  8. Danach erster Hands-On Teil mit Kai Niebes: Lokales Ausführen von Olmo2/3 (in LMStudio), wie kann ich über ein Python-Skript auf den Chat, seine Konfiguration und seine Nachrichten zugreifen, was muss ich an System/User Prompts verändern, um Aufgaben auszuführen, wie kann ich Olmo pdf-Dokumente prozessieren lassen?

    @spinfocl @SarahOberbichler

    #DHd2026 #LLM #OpenLLM Workshp

  9. Jetzt Evaluation und Benchmarks. Bei der Frage nach DH-spezifischen LLM-Benchmarks sieht es mau aus.

    Immerhin gibt es rise-unibas.github.io/humaniti Die haben nicht so schlechte Informationen und eine offene Einladung zum Mitmachen!

    Tragt Eure DH Benchmarks bei!!

    @spinfocl @SarahOberbichler

    #DHd2026 #LLM #OpenLLM Workshop

  10. Der Workshop "LLMs unter Kontrolle. Offene Modelle in Forschung und Praxis" von @spinfocl , Kai Niebes, @SarahOberbichler und mir ist gut besucht und gut gestartet. Genügend Plätze und Steckdosen vorhanden (Seminarraum 1), die TN haben im Großen und Ganzen die Vorbereitungen durchführen können, also los geht's!

    #DHD2026 #LLM #Workshop #OpenLLM #OpenSourceAI

  11. This open-source LLM could redefine AI research, and it’s 100% public - Switzerland’s fully open LLM merges transparency, s... - cointelegraph.com/explained/th #ethzurich #openllm

  12. I created the fist issue for the #OpenLLM #Europe #manifesto on GitHub:

    Move to Free and Open Source Software (FOSS) infrastructure

    I suggest to move the software development to a real Free and Open Source Software (#FOSS) hosting platform, to ensure #strategic #autonomy and #digital #sovereignty. With starting the project on GitHub, the fist step towards vendor lock-in has been set.

    github.com/OpenLLM-Europe/Mani

    #EU #DigitalSovereignty #StragegicAutonomy #LLM #vendorlockin

  13. OpenLLM-france semble également sur la bonne voie d'un LLM libre et éthique.

    #openLLM #AIethics

  14. Mais existe-t-il des LLMs libres ?

    J'ai vu que quelques LLMs de Meta (Llama) sont open-source, ce qui est une bonne chose sur le plan écologique (on n'est pas obligé de ré-entraîner un modèle pour des performances similaires, comme l'absurdité de la course aux LLMs des GAFAMs qui a un impact écologique monumental).

    Je vais en apprendre plus sur BLOOM, qui semble être un LLM alternatif intéressant.

    #openLLM #BLOOM

  15. We're thrilled about the release of Llama 3.1 by @AIatMeta! Today marks a milestone for the future of open-source AI, possibly the most significant open-source AI announcement ever! Llama 3.1 introduces a collection of frontier models that rival proprietary models in performance while leading in cost and customizability! You can now deploy Llama 3.1 on #BentoCloud and start building custom #LLM applications on top. ☁️ Sign up for a free trial here 👉 https://t.co/Q8dzOphYjc #BentoML #OpenSource #Llama31 #OpenLLM
  16. We're thrilled about the release of Llama 3.1 by @AIatMeta! Today marks a milestone for the future of open-source AI, possibly the most significant open-source AI announcement ever! Llama 3.1 introduces a collection of frontier models that rival proprietary models in performance while leading in cost and customizability! You can now deploy Llama 3.1 on #BentoCloud and start building custom #LLM applications on top. ☁️ Sign up for a free trial here 👉 https://t.co/Q8dzOphYjc #BentoML #OpenSource #Llama31 #OpenLLM
  17. 🚀 OpenLLM 0.6 is out providing fast inference speed! Check out our video comparing #OpenLLM and #Ollama handling concurrent requests on the Llama 3 8B model. Ollama is ideal for local LLM deployment, but it is not designed for high concurrency scenarios essential for deployments in the cloud, powering applications with a large number of users. OpenLLM enables you to run any open-source model as OpenAI-compatible endpoints with just a single command. It supports a broad array of models like Llama 3, Mistral, and Qwen 2, including those fine-tuned with proprietary datasets and quantized versions. Ready to speed up your AI deployments? See the OpenLLM repo https://t.co/PVhLM89LSc #BentoML #OpenSource
  18. With #OpenLLM, you can run an inference with any #opensource #LLM and build powerful #AI apps.

    🔥 Flexible APIs: serve LLMs over #RESTful #API or #gRPC with one command, query via WebUI, CLI, our Python/Javascript client, or any #HTTP client.

    github.com/bentoml/OpenLLM