app.py

import gradio as gr
from transformers import pipeline

model_id = "juliensimon/xlm-v-base-language-id"

p = pipeline("text-classification", model=model_id)


def process(text, top_k=5):
    pred = p(text, top_k=top_k)
    scores = {x["label"]: x["score"] for x in pred}
    print(scores)
    return scores


# Gradio inputs
input_text = gr.Text(label="Enter text")

# Gradio outputs
labels = gr.Label(label="Languages", num_top_classes=5)

description = "This Space lets you perform language identification on the 102 languages present in the google/fleurs dataset."

iface = gr.Interface(
    description=description,
    fn=process,
    inputs=input_text,
    outputs=labels,
    examples=[
        "Kila mtu ana haki ya kuelimishwa. Elimu yapasa itolewe bure hasa ile ya madarasa ya chini. Elimu ya masarasa ya chini ihudhuriwe kwa lazima. Elimu ya ufundi na ustadi iwe wazi kwa wote. Na elimu ya juu iwe wazi kwa wote kwa kutegemea sifa ya mtu",
        "Ang bawat tao'y may karapatan sa edukasyon. Ang edukasyon ay walang bayad, doon man lamang sa elementarya at pangunahing antas. Ang edukasyong elementarya ay magiging sapilitan. Ang edukasyong teknikal at propesyonal ay gagawing maabot ng lahat at ang lalong mataas na edukasyon ay ipagkakaloob nang pantay-pantay sa lahat batay sa pagiging karapat-dapat.",
        "Každý má právo na vzdělání. Vzdělání nechť je bezplatné, alespoň v počátečních a základních stupních. Základní vzdělání je povinné. Technické a odborné vzdělání budiž všeobecně přístupné a rovněž vyšší vzdělání má být stejně přístupné všem podle schopností.",
    ],
    allow_flagging="never",
)

iface.launch()