Auf einen Blick
- Aufgaben: Entwickle und teste anspruchsvolle Aufgaben für mehrsprachige KI-Modelle.
- Unternehmen: Lilt, ein führendes Unternehmen im Bereich KI und Sprachtechnologie.
- Vorteile: Flexible Arbeitszeiten, faire Bezahlung und Zugang zu innovativen Projekten.
- Weitere Informationen: Ideal als Nebenjob, um dein Portfolio zu erweitern und deine Fähigkeiten zu schärfen.
- Warum dieser Job: Arbeite an bedeutenden Projekten, die die Kommunikation zwischen Mensch und Maschine revolutionieren.
- Qualifikationen: Mindestens 1 Jahr Erfahrung in Software- oder Prompt-Engineering und fließende Sprachkenntnisse.
Das prognostizierte Gehalt liegt zwischen 63000 - 77000 CHF pro Jahr.
Wir bauen eine rigorose, überprüfbare Evaluierungssuite von Terminal-Bench-Aufgaben, die darauf ausgelegt ist, die Grenzen großer Sprachmodelle bei mehrsprachigen Softwareherausforderungen zu testen. Unser Ziel ist es, die mehrsprachige Robustheit über die Auswirkungen der Eingabesprache, die Verarbeitung von nicht-englischen Daten und komplexe Locale-/Kodierungsrandfälle in Terminal-Workflows zu messen. Wir suchen erfahrene, muttersprachliche Software-Ingenieure, um diese Benchmarks zu entwerfen, zu erstellen und zu validieren. Sie werden qualitativ hochwertige Aufgaben erstellen, die die Fähigkeit eines Modells testen, mehrsprachige Umgebungen zu bewältigen, ohne auf englische Übersetzungsstützen angewiesen zu sein.
Was Sie liefern werden:
- Aufgabenengineering: Bewertung von Codierungsagenten.
- Asset-Erstellung: Aufbau realistischer Aufgabenumgebungen mit Datensätzen und Dateien in Ihrer Muttersprache. Diese Assets müssen in der Zielsprache bleiben, um die mehrsprachige Handhabung wirklich zu messen.
- Prompting & Übersetzung: Finden von Fehlerpunkten, an denen KI nicht funktioniert, in Ihrer Muttersprache.
- Implementierung & Verifizierung: Unterstützung bei der Entwicklung robuster Lösungen (Referenzimplementierungen) und Schreiben hochzuverlässiger, deterministischer Verifikationsskripte (unter Verwendung von rubric-basiertem Urteil nur wenn unbedingt notwendig).
- Kalibrierung & Ausführung: Analyse von Ausführungsprotokollen und Kalibrierung des Aufgabenschwierigkeitsgrads (einfach bis sehr schwer) unter Verwendung standardmäßiger Terminal-Bench-Ausführungskonfigurationen gegen verschiedene Modellstufen (Haiku, Sonett, Opus).
- Qualitätssicherung: Teilnahme an einem rigorosen, 4-lagigen menschlichen Qualitätskontrollprozess (Erstellung, menschliche Überprüfung, Kalibrierungsüberprüfung und Audit) neben automatisierten LLM-basierten Prüfungen, um Fairness, grammatikalische Genauigkeit und Integrität der Benchmarks sicherzustellen.
Qualifikationen:
- Erfahrung: 1+ Jahre Branchenerfahrung in Software- oder Prompt-Engineering.
- Hintergrund: Nachweisliche Erfolge bei führenden Technologieunternehmen und/oder Abschluss an erstklassigen Ingenieuruniversitäten.
- Sprache: Native oder nahezu native Sprachbeherrschung mit einem tiefen Verständnis für Grammatik, Register und Formulierungsregeln. Hohe Englischkenntnisse.
- Technologiestack: Starke Kenntnisse in Python, Standard-Shell-Scripting und Datenverarbeitung.
- Workflow: Umfassende Erfahrung mit Terminal/CLI-basierten Entwicklungs-Workflows und ein funktionales Verständnis von Codierungsagenten.
- Fachwissen: Tiefes technisches Verständnis der Fallstricke der mehrsprachigen Textverarbeitung.
Was Sie vor der Bewerbung beachten sollten:
- Nicht ideal als Vollzeitjob oder primäre Einkommensquelle. Die Verfügbarkeit der Arbeit schwankt je nach Projektbedarf, was dies besser als ergänzende Einkommensquelle geeignet macht.
- Erfordert zuverlässige Verfügbarkeit und Engagement. Sobald Sie eine Aufgabe annehmen, erwarten wir qualitativ hochwertige Arbeit und pünktliche Lieferung. Die meisten Aufgaben erfordern mindestens 2 Stunden pro Tag oder 10 Stunden pro Woche.
- Geografische Einschränkungen können gelten. Wir können keine Auftragnehmer in Regionen beschäftigen, die internationalen Embargos oder Sanktionen unterliegen.
Bei LILT sind wir bestrebt, einen fairen, inklusiven und transparenten Einstellungsprozess zu gewährleisten. Im Rahmen unserer Rekrutierungsbemühungen können wir künstliche Intelligenz (KI) und automatisierte Tools verwenden, um bei der Bewertung von Bewerbungen zu helfen. Diese Tools sollen die menschliche Entscheidungsfindung unterstützen und uns helfen, qualifizierte Kandidaten effizient und objektiv zu identifizieren. Alle endgültigen Einstellungsentscheidungen werden von Menschen getroffen.
AI Benchmark Engineer | Native Language Specialist - German (Switzerland) - Remote Arbeitgeber: LILT (Production)
Lilt ist ein hervorragender Arbeitgeber, der Ihnen die Freiheit gibt, Ihre Arbeitszeiten selbst zu gestalten und an bedeutenden Projekten im Bereich KI und Sprachtechnologie zu arbeiten. Als unabhängiger Auftragnehmer profitieren Sie von wettbewerbsfähigen Honoraren, schneller Bezahlung und der Möglichkeit, Ihre Fähigkeiten in einem unterstützenden, globalen Netzwerk von Fachleuten weiterzuentwickeln. Genießen Sie die Flexibilität, die Ihnen erlaubt, Ihre Leidenschaft für Sprachen in einer dynamischen und innovativen Umgebung auszuleben.
Jobgipfel Expertenrat🤫
Wir sind der Meinung, dass du so AI Benchmark Engineer | Native Language Specialist - German (Switzerland) - Remote erhalten könntest
✨Zeig deine Projekte!
Wenn du auf der Suche nach einem Freelance-Job in der Software-Entwicklung bist, dann baue ein starkes Portfolio auf. Zeig deine bisherigen Projekte auf Plattformen wie GitHub oder GitLab. Das gibt potenziellen Kunden einen klaren Einblick in deine Fähigkeiten und deinen Stil.
✨Nimm an Meetups und Hackathons teil
Such nach Software-Entwicklungs-Meetups oder Hackathons in deiner Gegend. Diese Events sind super für Networking und um direkte Kontakte zu potenziellen Kunden zu knüpfen, die möglicherweise Projekte brauchen. Zudem kannst du so dein Können live präsentieren und Ideen austauschen.
✨Nutze Freelance-Plattformen
Trete Freelance-Plattformen wie Upwork oder Fiverr bei, um Aufträge zu finden. Diese Plattformen sind voll von Leuten, die aktiv nach Entwicklern suchen. Stell sicher, dass dein Profil professionell aussieht und deine besten Arbeiten zeigt, damit du mehr Aufträge bekommst.
✨Wirf einen Blick auf LILT (Production)
Schau sicher, dass du die Webseite von LILT (Production) besuchst. Sie haben möglicherweise offene Projekte oder Freelance-Möglichkeiten, die nicht überall gepostet werden. Zögere nicht, dich direkt zu bewerben oder eine Anfrage zu stellen – manchmal ist der direkte Kontakt der beste Weg!
Wir glauben, dass du diese Fähigkeiten brauchst, um AI Benchmark Engineer | Native Language Specialist - German (Switzerland) - Remote mit Bravour zu bestehen
Einige Tipps für deine Bewerbung 🫡
Zeig dini Projekte!:Als Freelance-Softwareentwickler wird d'Prüfung vo deinem Portfolio mega wichtig. Bind Projekt-Links oder GitHub-Repositories i, wo du z'zeige cha, was du kännisch. D'Qualität und Vielfalt vo dim Code überzeuget – d'Kunden welle öppis cho, wo si cha nütze.
Nimm Platz für dini Skills:Optimal für die Branche isch es, wenn du dini technologische Skills in klär und prägnanter Art und Wiis ins CV einfüegsch. Erwähne spezifisch d'Software, Programmiersprachen oder Frameworks, wo du beherrschsch, und vergiss nöd, dini Erfahrig mit konkrete Projekte z'unterstütze.
Preis und Verfügbarkeit - wichtig für dich!:Für Freelance-Arbeiten isches wichtig, dini Verfügbarkeit klar z'benennen und vielleicht sogar e préferierte Stundetarif z'enä. Das gibt den Kunden e klares Bild vo dim Offer und hilft dir, potenziell seriöse Anfragen zu chönne priorisiere.
Persönlich bliibe:Wenn du dini Bewerbung schriibscht, vergiss nöd, e persönliche Note i z'füege. E kurzi Einleitung, warum du mit LILT (Production) zämme schaffe wotsch, und was dich an der Stelle als AI Benchmark Engineer | Native Language Specialist - German (Switzerland) - Remote reizt, kann d'Empfänger überzeuget und dinen Antrag hervorhebe.
Wie man sich auf ein Vorstellungsgespräch bei LILT (Production) vorbereitet
✨Zeig dein Portfolio!
Als Freelance Softwareentwickler isch es mega wichtig, dass mir dein Portfolio gsehnd. Bring e paar Beispiel-Projekte mit, wo du us eigener Erfahruung zeigst, wie du komplexe Probleme gelöst hesch. Das hilft uns, din Stil und din Ansatz besser z verstehe.
✨Kenntnis von Tools und Technologien
Mach sicher, dass du gut vorbereitet bisch, um über die Tools und Technologien, wo du chasch verwende, z rede. Frag di selber, welche Frameworks und Programmiersprachen du am liebsten hesch und wie sie in projekte angewendet werde. Das zeigt, dass du fits bisch in dem, was du machsch.
✨Sei bereit für technische Fragen
Echti technische Fragen können im Interview chöme, vor allem bezüglich von Programmierkonzepten oder Algorithmen. Mach dir e paar Gedanken zu möglichr Herausforderungen, wo du zuehn könntsch und wie du sie löse würdest. Das hilft uns, dini Problemlösungsfähigkeiten z bewärte.
✨Selbsständig und kommunikationsstark
Als Freelancer isch es wichtig, dass du zeige chasch, wie du mit verschiedenen Kunden kommunizierisch und zusammenarbitsch. Bring konkrete Beispiele mit, wo du das gschafft hesch. Das zeigt, dass du nicht nur programmieren chasch, sondern au im Team chasch funktioniere.
