Senior Software Engineer (Agentic Search) - Web Access Engineer (opens in a new tab) Zurich in Zürich

Über Nebius: Nebius führt eine neue Ära in der Cloud-Infrastruktur für die globale KI-Wirtschaft an. Wir bauen eine Full-Stack-AI-Cloud-Plattform, die Entwicklern und Unternehmen von der Daten- und Modellschulung bis hin zur Produktionsbereitstellung unterstützt, ohne die Kosten und die Komplexität des Aufbaus großer interner AI/ML-Infrastrukturen. Unser Team von über 1.500 Mitarbeitern umfasst Hunderte von Ingenieuren mit tiefem Fachwissen in Hardware, Software und KI-Forschung und -Entwicklung.

Das Produkt: In einer sich schnell entwickelnden Welt hängt das Vertrauen in KI davon ab, dass KI-Agenten auf frischen, verifizierten Echtzeitdaten basieren. Die Suche ist die Grundlage, die dies ermöglicht. Wir bauen eine agent-native Suchplattform, die speziell für KI-Systeme und nicht für menschliche Benutzer entwickelt wurde. Unser Produkt bietet programmatische, latenzarme und beobachtbare Such-APIs, die KI-Agenten verwenden, um Informationen aus der realen Welt in großem Maßstab abzurufen, zu filtern und zu verarbeiten.

Die Rolle: Wir suchen einen Senior Software Engineer, der an der Webzugriffsinfrastruktur einer neuartigen Suchmaschine arbeitet, die auf den Verbrauch durch agentische KI zugeschnitten ist. In dieser Rolle konzentrieren Sie sich darauf, unseren Zugriff auf öffentliche Webinhalte zuverlässig und effizient zu gestalten. Sie werden untersuchen, wie moderne Websites und Browser über den gesamten Anfragelebenszyklus kommunizieren, die Ursache finden, wenn eine Anfrage fehlschlägt oder etwas Unerwartetes zurückgibt, und die Lösungen in Produktionssysteme integrieren, die im Internetmaßstab arbeiten. Ihre Arbeit stellt sicher, dass qualitativ hochwertige Inhalte kontinuierlich für die nachgelagerten Crawling-, Indexierungs- und Abrufsysteme verfügbar sind.

In dieser Position sind Ihre Verantwortlichkeiten:

• Diagnose fehlgeschlagener oder degradierter Anfragen auf der richtigen Ebene: Netzwerk und IP, TLS und HTTP/2-Verhalten, Header und Sitzungsstatus, clientseitige Skripte oder Browsermerkmale.
• Analyse, wie Websites Clients verifizieren und klassifizieren, einschließlich wie clientseitige Skripte und Protokollverhalten beeinflussen, was eine Website verschiedenen Clients anbietet.
• Erstellung von Clients und Werkzeugen, die konsistent und kompatibel mit Standardbrowsern über all diese Ebenen hinweg funktionieren, wobei ein echter Browser verwendet wird, wenn ein leichtgewichtiger Client nicht ausreicht.
• Überwachung der Zugriffsqualität, während sich Websites ändern: Rückschläge erkennen, die Ursache finden und den Erfolg anhand realer Inhalte messen, anstatt nur anhand von Statuscodes.
• Entwicklung der Werkzeuge, um dies im großen Maßstab zu tun: Verkehrserfassung und Vergleich mit echten Browsern, Erfolgstracking pro Website und pro Methode sowie die Kosten jedes erfolgreichen Abrufs.
• Auswahl der Abrufmethode für jeden Host, von einem leichtgewichtigen HTTP-Client bis zu einem vollständigen Browser, wobei Qualität gegen Kosten abgewogen wird.

Sie könnten gut passen, wenn Sie:

• Über 5 Jahre Erfahrung im Aufbau von Produktionssystemen verfügen und Experte in mehreren der folgenden Bereiche sind:
• Der Anfragelebenszyklus: HTTP/1.1, HTTP/2 und HTTP/3, TLS-Handshakes und TLS-Fingerabdrücke (JA3/JA4) und Headerverhalten.
• Was ein Server bei jedem Schritt einer Anfrage beobachten kann und was ein Client bei jedem Schritt kontrolliert.
• Eine Debugging-Methode, keine Vermutungen: Wiederholung des erfassten Browserverkehrs, Vergleich mit einem echten Browser auf demselben Netzwerkpfad und Änderung eines Variablen gleichzeitig.
• Clientseitige Analyse: Lesen und Analysieren komplexer oder obfuszierter JavaScript-Codes und Beobachtung dessen, was ein Skript misst, indem Browser-APIs gehookt werden.
• Wie Browser-, Geräte- und Netzwerkmerkmale gemessen werden (Canvas, Schriftarten, WebGL, Bildschirm- und Fenstermaße) und wie konsistent sie über die Ebenen hinweg sind.
• Browserinstrumentierung und das Chrome DevTools-Protokoll als Werkzeuge für die Untersuchung verwenden.
• Dies in der Praxis durchgeführt haben und Zahlen liefern können: Anfragen pro Tag, Websites oder Hosts, Erfolgsquote und wie Sie dies gemessen haben.
• Starke Programmierkenntnisse in mindestens einer der Sprachen Go, Python, Rust oder C++ besitzen.

Starke Kandidaten haben möglicherweise auch Erfahrung mit:

• Arbeiten bei einem Webdatenanbieter, einem Browser- oder Websicherheitsunternehmen oder einem Unternehmen, das Daten aus komplexen Quellen sammelt.
• Beiträgen zu browserbezogenen Netzwerken oder Fingerprinting-Open-Source-Tools oder öffentlichen Berichten darüber, wie die Client-Verifizierung funktioniert.
• Dem Aufbau oder der Wartung eines gepatchten Browsers.
• Netzwerken, Proxys und IP-Reputation.
• Verteilten Systemen im Internetmaßstab, Kubernetes und Cloud-Infrastruktur.

Die Art von Problemen, an denen Sie arbeiten werden:

• Eine Website gibt eine andere Antwort an unseren Client zurück als an Chrome auf demselben Netzwerkpfad. Finden Sie heraus, warum, und beheben Sie diese Ursache.
• Eine Website ändert, wie sie Clients verifiziert, und der Erfolg sinkt über eine Gruppe von Websites. Finden Sie heraus, was sich geändert hat, passen Sie sich an und machen Sie die nächste Änderung günstiger zu erfassen.
• Der Wechsel zu einem browserähnlichen Netzwerkprofil verschlechtert die Ergebnisse bei einigen Hosts. Ermitteln Sie, was nicht mehr übereinstimmt.

Wir führen Programmierinterviews als Teil des Prozesses durch.

Vorteile & Vergünstigungen:

• Wettbewerbsfähige Vergütung.
• Karrierewachstum und Lernmöglichkeiten.
• Flexibilität und Eigenverantwortung.
• Kollaborative und innovative Kultur.
• Gelegenheit, an bedeutenden KI-Projekten zu arbeiten.
• Internationales Umfeld und talentierte Teams.

Wie es ist, bei Nebius zu arbeiten: Schnelllebig - Mutiges Denken - Ständige Entwicklung - Bedeutende Auswirkungen - Vertrauen und echte Verantwortung - Gelegenheit, die Zukunft der KI zu gestalten.

Gleichstellungserklärung: Nebius ist ein Arbeitgeber, der Chancengleichheit bietet. Wir setzen uns dafür ein, ein integratives und diverses Arbeitsumfeld zu fördern und Chancengleichheit in allen Aspekten der Beschäftigung zu gewährleisten. Wir diskriminieren nicht aufgrund von Rasse, Farbe, Religion, Geschlecht (einschließlich Schwangerschaft), nationaler Herkunft, Abstammung, Alter, Behinderung, genetischen Informationen, Familienstand, Veteranenstatus, sexueller Orientierung, Geschlechtsidentität oder -ausdruck oder einer anderen durch geltendes Recht geschützten Eigenschaft. Bewerber müssen berechtigt sein, in dem Land zu arbeiten, in dem sie sich bewerben, und müssen einen Nachweis über die Beschäftigungsberechtigung als Bedingung für die Einstellung vorlegen. Wenn Sie während des Bewerbungsprozesses Unterstützung benötigen, lassen Sie es uns bitte wissen.