> Markdown version of [/jobs/ext/1420119-data-engineer-data-platforms-vector-search-hnsw](https://www.wearedevelopers.com/jobs/ext/1420119-data-engineer-data-platforms-vector-search-hnsw). Every page supports `.md` or `Accept: text/markdown`. Links point to the HTML versions so they work for humans too. Agent guide: [/agents.md](https://www.wearedevelopers.com/agents.md).

---

# Data Engineer - Data Platforms (Vector Search, HNSW)

- **Company:** Westhouse Consulting GmbH
- **Location:** Berlin, Germany
- **Contract:** Temporary contract
- **Skills:** Profiling, Shard (Database Architecture), Search Algorithms, Node.Js
- **Published:** July 24, 2026
- **Apply:** https://www.westhouse-group.com/bewerbungsformular/?job-id=179473&post-id=63608

## About the Role

* Fundierte Erfahrung mit Vector Search, insbesondere Approximate Nearest Neighbour (ANN) und HNSW
 * Erfahrung mit Filtered Vector Search
 * Kenntnisse in der Analyse und Optimierung der Search Relevance bei semantischer und hybrider Suche
 * Erfahrung mit der Analyse und Optimierung von Chunking-Strategien und Scoring
 * Fundierte Kenntnisse in der Query-Optimierung, einschließlich Profiling und Rewriting langsamer Queries
 * Erfahrung mit der Optimierung von Suchanfragen zur Reduzierung von Latenzen, z. B. durch den gezielten Einsatz gecachter Filter
 * Erfahrung im Shard- und Cluster-Tuning
 * Kenntnisse in der Optimierung von Node-Workloads und der Auswahl geeigneter Data-Node-Instanzen anhand von Last- und Suchmustern
 * Erfahrung mit Index Lifecycle Management (ILM)
 * Erfahrung mit großskaligen OpenSearch-Projekten, idealerweise mit mehr als 100 Millionen Vektoren und über 200 GB Daten
 * Ausgeprägte analytische und lösungsorientierte Arbeitsweise

## Description

* Konzeption, Optimierung und Weiterentwicklung von Vector-Search-Lösungen auf Basis von OpenSearch
 * Analyse und Verbesserung der Qualität und Performance semantischer und hybrider Suchverfahren
 * Optimierung von Chunking-Strategien, Scoring-Modellen und Suchrelevanz
 * Profiling, Analyse und Überarbeitung langsamer Queries zur Reduzierung der Latenz
 * Optimierung von Queries durch den gezielten Einsatz gecachter Filter
 * Analyse und Optimierung der Shard-Verteilung und Cluster-Performance
 * Ausbalancierung der Node-Workloads sowie Optimierung der Data-Node-Konfiguration
 * Planung und Optimierung des Index Lifecycle Managements
 * Beratung zur Auswahl geeigneter Data-Node-Instanzen auf Basis von Lastprofilen und Suchmustern
 * Performanceoptimierung und nachhaltige Weiterentwicklung einer großskaligen OpenSearch-Plattform


## Related Videos

- [Harry Potter and the Elastic Semantic Search](https://www.wearedevelopers.com/videos/860-harry-potter-and-the-elastic-semantic-search)
- [Stop using Node.js like in 2020! What changed and what you can do today with Node.js](https://www.wearedevelopers.com/videos/100011-stop-using-node-js-like-in-2020-what-changed-and-what-you-can-do-today-with-node-js)
- [Profiling Symfony & PHP apps with Blackfire](https://www.wearedevelopers.com/videos/265-profiling-symfony-php-apps-with-blackfire)
- [Accelerating GenAI Development: Harnessing Astra DB Vector Store and Langflow for LLM-Powered Apps](https://www.wearedevelopers.com/videos/966-accelerating-genai-development-harnessing-astra-db-vector-store-and-langflow-for-llm-powered-apps)
- [WeAreDevelopers LIVE - Vector Similarity Search Patterns for Efficiency and more](https://www.wearedevelopers.com/videos/1709-wearedevelopers-live-vector-similarity-search-patterns-for-efficiency-and-more)
- [Stop Using Node.js Like It’s 2020! - Alfonso Graziano](https://www.wearedevelopers.com/videos/1863-stop-using-node-js-like-it-s-2020-alfonso-graziano)

## Related Articles

- [Finding Jobs in Germany](https://www.wearedevelopers.com/magazine/375-finding-jobs-in-germany)
- [The Biggest German Tech Companies](https://www.wearedevelopers.com/magazine/424-the-biggest-german-tech-companies)
- [Where To Find Software Engineering Jobs](https://www.wearedevelopers.com/magazine/396-where-to-find-software-engineering-jobs)
- [Data Analyst Salary Germany](https://www.wearedevelopers.com/magazine/277-data-analyst-salary-germany)
- [Frontend Developer Salary in Germany [2023]](https://www.wearedevelopers.com/magazine/195-frontend-developer-salary-in-germany-2023)
- [Fullstack developer salary in Germany [2023]](https://www.wearedevelopers.com/magazine/197-fullstack-developer-salary-in-germany-2023)