PulseAugur
EN
LIVE 16:25:02
Polski(PL) Cechy językowe - co musisz wiedzieć, zanim zrozumiesz, jak myśli LLM Pięć warstw języka – fonetyka, morfologia, składnia, semantyka, pragmatyka – i jak LLM radz

LLMs: From Text Processing to Semiotics and Linguistic Layers

This cluster explores the linguistic and computational underpinnings of Large Language Models (LLMs). It delves into how computers process text, moving from basic tokenization and statistical methods like TF-IDF and Markov chains to more advanced techniques such as Word2Vec for creating numerical representations of words. The analysis also touches upon semiotics, using the theories of Saussure, Peirce, and Derrida to explain why LLMs, while powerful, are not equivalent to human minds. Furthermore, it examines the five layers of language—phonetics, morphology, syntax, semantics, and pragmatics—and how LLMs handle these linguistic structures. AI

IMPACT Explains the foundational concepts behind LLM text processing and linguistic understanding.

RANK_REASON The cluster consists of blog posts discussing the theoretical and technical underpinnings of LLMs, rather than a new release or product.

Read on Mastodon — fosstodon.org →

AI-generated summary · Google Gemini · from 3 sources. How we write summaries →

COVERAGE [3]

  1. Mastodon — fosstodon.org TIER_1 Polski(PL) · [email protected] ·

    How a computer reads text - from word counting to vectors From tokenization through TF-IDF and Markov chains, to Word2Vec. How a computer turns text into numbers...

    Jak komputer czyta tekst - od liczenia słów do wektorów Od tokenizacji przez TF-IDF i łańcuchy Markowa, aż po Word2Vec. Jak komputer zamienia tekst w liczby... https:// gruszka.dev/jak-komputer-czyta -tekst.html # llm # ai # nlp # tokenizacja # word2vec # embeddings # tfidf # mar…

  2. Mastodon — fosstodon.org TIER_1 Polski(PL) · [email protected] ·

    Semiotics - why LLMs are not Saussure, Peirce, and Derrida as the key to understanding LLMs. Why a model is not a mind, but a machine with... https:// gruszka.dev/semiot

    Semiotyka - dlaczego LLM nie Saussure, Peirce i Derrida jako klucz do zrozumienia LLM. Dlaczego model to nie umysł, ale maszyna z... https:// gruszka.dev/semiotyka-a-llm.ht ml # llm # ai # semiotyka # znaki # linguistics # languagemodels # saussure # peirce # derrida

  3. Mastodon — fosstodon.org TIER_1 Polski(PL) · [email protected] ·

    Linguistic Features - What You Need to Know Before Understanding How LLM Thinks Five Layers of Language – Phonetics, Morphology, Syntax, Semantics, Pragmatics – and How LLMs Handle Them

    Cechy językowe - co musisz wiedzieć, zanim zrozumiesz, jak myśli LLM Pięć warstw języka – fonetyka, morfologia, składnia, semantyka, pragmatyka – i jak LLM radzi sobie z... https:// gruszka.dev/cechy-jezykowe-a-l lm.html # llm # ai # jezykoznawstwo # nlp # linguistics # languagem…