Elasticsearch nutch hadoopprojekty

...czasu wolnego. Od ponad 10 lat dostarczamy informacje o wydarzeniach oraz lokalach w mieście. Przeprowadzamy fotorelacje z wydarzeń i koncertów. Za naszym pośrednictwem można zakupić bilety lub skorzystać z promocji cenowych w klubach, barach i restauracjach. Aktualnie szukamy firmy bądź freelancera do dłuższej współpracy. Wymagamy: PHP MySQL Symphony2 Doctrine2 Doceniamy znajomość: JS Elasticsearch jquery Organizacja Pracy: Agile management: Scrum Issue tracking tool: Trello Knowledge repository: GitHub Code reviews: Bitbucket, GitLab Version control system: GIT Build server: Tak Profil pracy: New features 60% Maintenance / Bug fixing 30% Client support 5% Meetings 5% Najchętniej nawiążemy współpracę na zasadzie B2B, ale zatrudnienie na umowę o...

Zlecę pracę nad portalem zakupowym stworzonym na oprogramowaniu sylius. Pracę dotyczą rozwijania portalu czyli tworzenie nowych modułów jak również rozwijanie już istniejących. Umiejętności: PHP, Docker, Postgres, elasticsearch

Analiza sentymentu Tweetow przy uzyciu SPARK (PySpark) oraz graficzna reprezentacja analizy. Wiecej szczegolow prywatnie.

Witaj! Stawiam...znajomość platformy kontenerowej Docker dobra organizacja pracy chęć rozwoju szczerość, rzetelność, lojalność gotowość do podróży za granicę Mile widziane: znajomość Kubernetes znajomość nie-relacyjnych (obiektowych, temporalnych) baz danych, jak Chouchbase, MongoDB znajomość serwisów i pracy w otoczeniu AWS (Amazon Web Services) znajomość produktów Apache do przetwarzania danych, jak Hadoop, Spark, Kafka, Hive Oferujemy umowę o pracę (pełny etat) lub zlecenie (160 godz./ miesiąc) możliwość pracy zdalnej udział w światowych projektach z dużymi możliwościami rozwoju samodzielną pracę z możliwością wprowadzenia własnych pomysłów wolne godziny pracy prywatną opiekę medyczną Wynagrodzenie Od 7000 do 12000 PLN

Miejsce pracy: Lublin/Warszawa/Zdalnie Nowy projekt, który realizujemy ma na celu stworzenie aplikacji webowej (backend: Java, frontend: Angular) służącej do analizy danych, ekstrakcji wiedzy oraz tworzenia profili semantycznych z wykorzystaniem technologii BigData (Apache Spark, Hadoop) oraz elementów sztucznej inteligencji. W związku z rozpoczęciem nowego projektu poszukujemy zespołu programistów Java. Szukamy ludzi z pasją, którzy nie boją się nowych wyzwań. Stanowisko: BigData Developer Zadania: - współpraca z innymi członkami zespołu w zakresie realizowanego projektu, - projektowanie architektury systemu wraz z doborem odpowiednich technologii, - projektowanie algorytmów wykorzystywanych w systemie, - aktywne poszukiwani...

Witaj kluczyn, Twój profil przyciągnął moją uwagę, w związku z czym mam przyje...dla platformy transakcyjnej i do zarządzania ryzykiem - Optymalizacja przetwarzania danych pochodzących od zewnętrznych dostawców - Praca z użyciem najnowszych technologii w zaawansowanym technologicznie zespole Oczekiwania wobec kandydatów: - Znajomość języka: Python (Flask, Django, Celery) - Znajomość nierelacyjnych baz danych (Redis, MongoDB) - Znajomość relacyjnych baz danych - Znajomość Elasticsearch będzie dodatkowym atutem - Doświadczenie w towrzeniu REST API Oferujemy: - Współpraca B2B - Atrakcyjne wynagrodzenie 10000-15000 netto - Bogaty pakiet socjalny - Praca w biurze w Łodzi, Warszawie lub Białymstoku Zgrany, młody i ambitny zespół CV proszę wysyłać na ...

Witaj linaxjkee, Twój profil przyciągnął moją uwagę, w związku z czym mam przy...dla platformy transakcyjnej i do zarządzania ryzykiem - Optymalizacja przetwarzania danych pochodzących od zewnętrznych dostawców - Praca z użyciem najnowszych technologii w zaawansowanym technologicznie zespole Oczekiwania wobec kandydatów: - Znajomość języka: Python (Flask, Django, Celery) - Znajomość nierelacyjnych baz danych (Redis, MongoDB) - Znajomość relacyjnych baz danych - Znajomość Elasticsearch będzie dodatkowym atutem - Doświadczenie w towrzeniu REST API Oferujemy: - Współpraca B2B - Atrakcyjne wynagrodzenie 10000-15000 netto - Bogaty pakiet socjalny - Praca w biurze w Łodzi, Warszawie lub Białymstoku Zgrany, młody i ambitny zespół CV proszę wysyłać na ...

Witaj lukaszoz, Twój profil przyciągnął moją uwagę, w związku ...dla platformy transakcyjnej i do zarządzania ryzykiem - Optymalizacja przetwarzania danych pochodzących od zewnętrznych dostawców - Praca z użyciem najnowszych technologii w zaawansowanym technologicznie zespole Oczekiwania wobec kandydatów: - Znajomość języka: Python (Flask, Django, Celery) - Znajomość nierelacyjnych baz danych (Redis, MongoDB) - Znajomość relacyjnych baz danych - Znajomość Elasticsearch będzie dodatkowym atutem - Doświadczenie w towrzeniu REST API Oferujemy: - Współpraca B2B - Atrakcyjne wynagrodzenie 10000-15000 netto - Bogaty pakiet socjalny - Praca w biurze w Łodzi, Warszawie lub Białymstoku Zgrany, młody i ambitny zespół Proszę o zwrotną informacje... Pozdr...

Lider w produkcji nowoczesnych systemów do zarządzania ryzykiem i obsługi internetowych zakładów sportowy...platformy transakcyjnej i do zarządzania ryzykiem - Optymalizacja przetwarzania danych pochodzących od zewnętrznych dostawców - Praca z użyciem najnowszych technologii w zaawansowanym technologicznie zespole Oczekiwania wobec kandydatów: - Znajomość języka: Python (Flask, Django, Celery) - Znajomość nierelacyjnych baz danych (Redis, MongoDB) - Znajomość relacyjnych baz danych - Znajomość Elasticsearch będzie dodatkowym atutem - Doświadczenie w towrzeniu REST API Oferujemy: - Współpraca B2B - Atrakcyjne wynagrodzenie 10000-15000 netto - Bogaty pakiet socjalny - Praca w biurze w Łodzi, Warszawie lub Białymstoku Zgrany, młody...

Szukam programisty z Polski do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów mark...marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP Symfony - SQL (najlepiej MySQL) - Css Znajomość poniższych mile widziana: - Handlebars - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolej...

Szukam programisty z Polski do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów mark...marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP Symfony - SQL (najlepiej MySQL) - Css Znajomość poniższych mile widziana: - Handlebars - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolej...

Webnalist jest start-upem mediowym, który jako jeden z 7 projektów z Polski zyskał dofinansowanie z należącego do Google funduszu DNI. Ten projekt został zrodzony z frustracji jakością mediów w P...projektu, który ma na celu odrodzenie prawdziwego dziennikarstwa w sieci, to ogłoszenie jest dla Ciebie. Informacje: Szukamy programisty w trybie projektowym, na dwa miesiące na pełen etat, następnie przez pół roku wsparcie developerskie w niepełnym wymiarze godzin. Praca zdalna z możliwymi spotkaniami w Warszawie Wymagamy doświadczenia z zakresu: PHP 5.6, Symfony 2 MySQL, REDIS, Elasticsearch AWS Elastic Beanstalk Bitbucket, JIRA Oferujemy: 7000 - 9000 netto / miesiąc B2B lub UOD Elastyczne godziny pracy Nowoczesne środowisko dew...

Szukam programisty z Polski do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów mark...marketing automation - narzędzie wspomagające automatyczną wysyłkę dedykowanych listów marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP Symfony - SQL (najlepiej MySQL) - Css Znajomość poniższych mile widziana: - Handlebars - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolej...

Szukam programisty z Polski do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automati...marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP (najlepiej Symfony) - Java + spring - SQL (najlepiej MySQL) - JavaScript - Css Znajomość poniższych mile widziana: - Handlebars - JavaScript (Jquery, twitter bootstrap) - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolejkowania - Zagadnienia związane z hostingiem i utrzymaniem infrastruktury serwer&oacu...

Szukam programisty do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automation - narzęd...dedykowanych listów marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP (najlepiej Symfony) - Java + spring - SQL (najlepiej MySQL) - JavaScript - Css Znajomość poniższych mile widziana: - Handlebars - JavaScript (Jquery, twitter bootstrap) - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolejkowania - Zagadnienia związane z hostingiem i utrzymaniem infrastruktury serwe...

Szukam programisty do rozwoju istniejącego sklepu internetowego. Sklep istnieje od 10lat. Praca stała 20-40 godzin miesięcznie. Przykładowe projekty w ramach rozwoju sklepu: - budowa programu lojalnościowego - marketing automation - narzęd...dedykowanych listów marketingowych - dobudowanie do istniejącego systemu fakturowania automatu obsługującego faktury proforma oraz faktury korygujące Znajomość poniższych jest niezbędna: - PHP (najlepiej Symfony) - Java + spring - SQL (najlepiej MySQL) - JavaScript - Css Znajomość poniższych mile widziana: - Handlebars - JavaScript (Jquery, twitter bootstrap) - Sass - Linux + Bash - Elasticsearch - Redis - RabbitMQ albo inny system kolejkowania - Zagadnienia związane z hostingiem i utrzymaniem infrastruktury serwe...

do 9.01.2015 należny wykonać: Przygotować funkcje map i reduce, które: wyszukają wszystkie anagramy w pliku wyszukają najczęściej występujące słowa z Wikipedia data PL aktualny plik z artykułami, ok. 1.3 GB Zamiast bazy MongoDB, można przygotować przykłady lub wtyczki lub agregacje dla bazy Elasticsearch. Na początek należy się przyjrzeć narzędziu Kibana, następnie poczytać o wtyczkach a na koniec o agregacjach. Więcej info na ebay (a t )

do 9.01.2015 należny wykonać: Przygotować funkcje map i reduce, które: wyszukają wszystkie anagramy w pliku wyszukają najczęściej występujące słowa z Wikipedia data PL aktualny plik z artykułami, ok. 1.3 GB Zamiast bazy MongoDB, można przygotować przykłady lub wtyczki lub agregacje dla bazy Elasticsearch. Na początek należy się przyjrzeć narzędziu Kibana, następnie poczytać o wtyczkach a na koniec o agregacjach. Więcej info na ebay (a t )

Witam, Posiadamy do wykonania kilka optymalizacji dla stron internetowych, a dokładniej: a) zabezpieczenie stron wykonanych w WordPress i Magento b) optymalizacje objętości ( fotografii, skryptów, etc.. ) i czasu otwierania się stron, aby w rankingu Yslow posiadały minimum A93-A95 c) implementacje SSL, DNSSEC, SPHINKS, HADOOP Będzie niezbędna także pomoc w implementacji serwisu wideo - podobnego jak w - a dokładniej idealna kopia, aby było wykorzystywane te same oprogramowanie ( middleware, access control, cloud encoding i enkapsulacja ) Skontaktujemy sie z osobami wybranymi dla bliżych informacji. Czas realizacji punktu a) - 1 dzień. Wdrozenie punktu a bedzie uwarunkowaniem do wykonania nastepnych implementacji..

== 1. Moduł Płatności Paypal == ===Do zrobienia=== Dodanie opcji platności przez paypal do platnosci już istniejacych w serwisie ===Funkcjnalnosci=== Backend Moduł łaczący się z api paypal Zintegrowanie paypal z intniejacymi platnoscimi yeti pay Zmia...uzyciu php moze byc latwiej(istniejący obsługujący platności jest napisany w PHP) 2. Wyświetlanie czasu przejazdu z Map Google - Wykorzystanie API googla do szacowania czasu przejazdu na stronie ===Do zrobienia=== Frontend Integracja z API googla przy zapytaniach pomiędzy miastami Dodanie nowej wyszukiwarki Backend Podłączenie bazy danych do Elastic Search/SOLR Konfiguracja ElasticSearch/SOLR ===Implementacja=== Frontend - AngularJS Backend - Elastic Search/SOLR, eksport/denormalizacja danych - Python/P...

Poszukujemy doświadczonego programisty na stanowisko Python Developer. Miejsce pracy: Kraków (ok. ronda mogilskiego) Czego oczekujemy: - bardzo dobrej znajomości języka Python (min. 2 lata doświadczenia komercyjnego) - zna...rozwiązań i doświadczenia w projektowaniu aplikacji o dużym natężeniu ruchu - znajomości relacyjnych baz danych (PostgreSQL) - doświadczenia z technologiami kontroli wersji (Git,Svn) - obycia z systemami Linux/Unix - znajomości języka angielskiego przynajmniej na poziomie rozumienia dokumentacji technicznej Mile widziane: - znajomość nierelacyjnych baz danych (MongoDB) - doświadczenie Elasticsearch/Solr Oferujemy: - konkurencyjne wynagrodzenie - elastyczną formę zatrudnienia (umowa o pracę, fvat) - dobrą atmosferę pracy w młodym zespole

Witam, Szukam kogos kto pomoze nam wdrozyc AH w naszej firmie. na poczatek moze na VBoxie do potestowania, jezeli okazie sie, ze to jest to czego potrzebujemy, to pozniej na sprzecie do producji. W ofercie prosze napisac o swoim doswiadzczeniu. pTomek

...Środowisko działania: wyszukiwarka będzie funkcjonował w środowisku UNIX; podczas projektowania od razu należy nastawić się, że skrypt będzie dość mocno obciążony. Front End będzie stał za loadbalancerem + klaster WWW, oddzielny klaster dla bazy danych, nielimitowaną ilość samodzielnych nodów pod Crawler 4. Możliwość wykorzystania istniejących komponentów dostępnych na wolnych licencjach crawlerów (Nutch/Lucene/Crawler4j/YaCy/inne), frameworków lub template engine'ów (musimy zostać o takim fakcie poinformowani) III. Opis funkcjonalności: 1. Front End: 1.1 Założenia: - Wszystkie linki mają być SEO Friendly kluczem jest, aby całość była perfekcyjnie indeksowana przez Google (jedno z najistotniejszych założeń) - Ma...

I am seeking a seasoned Data Engineer with over 4 years of experience. The ideal candidate should possess strong skills in ETL processes, Data warehousing, and Big data technologies. Proficiency in tools like Apache Spark, Hadoop, and SQL is a must. Key Requirements: - Extensive experience in ETL processes, Data warehousing and Big data technologies - Proficient in Apache Spark, Hadoop and SQL - Seeking for a Full-time employment Skills and Experience: - 4+ years in Data Engineering - Mastery of relevant tools and technologies - Ready for Full-time commitment If you're a dedicated professional with the required skills and experience, I look forward to your application.

Looking to create an adult (porn) aggregator from multiple porn tube sites. We aren't hosting videos or playback. Partners will provide CSV/XML feeds of content which we aggregage into categories / models / tags and display on our site. Thumbnails of content should have a CTR algo in place. Site needs to be extremely fast, golang, sphinx/elasticsearch, node.js, caching etc. Should be able to handle 100s of millions of videos, users and a partner who can work quickly, understand this is pornography and be ok with that and great english skills. Ideally looking for a team to get this task completed as soon as possible.

...Module Purpose: To manage user preferences and settings. Components: View and edit user profile Settings for notifications, theme (dark/light mode), etc. Libraries: SharedPreferences, SQLite for local storage 9. Search and Filters Module Purpose: To allow users to search and filter blog posts easily. Components: Search bar for keywords Filters based on categories, tags, date, etc. Libraries: Elasticsearch, Retrofit for search queries 10. Offline Mode and Cache Management Module Purpose: To allow users to access content even without an active internet connection. Components: Caching blog posts and images Offline storage of articles for reading later Libraries: Room Database, Retrofit with Cache, Stetho (for debugging) 11. Analytics and Tracking Module Purpose: To collect data on u...

...Module Purpose: To manage user preferences and settings. Components: View and edit user profile Settings for notifications, theme (dark/light mode), etc. Libraries: SharedPreferences, SQLite for local storage 9. Search and Filters Module Purpose: To allow users to search and filter blog posts easily. Components: Search bar for keywords Filters based on categories, tags, date, etc. Libraries: Elasticsearch, Retrofit for search queries 10. Offline Mode and Cache Management Module Purpose: To allow users to access content even without an active internet connection. Components: Caching blog posts and images Offline storage of articles for reading later Libraries: Room Database, Retrofit with Cache, Stetho (for debugging) 11. Analytics and Tracking Module Purpose: To collect data on u...

...looking for an experienced freelancer to set up, optimize, and secure the ELK (Elasticsearch, Logstash, Kibana) stack on an Ubuntu 24 server. The project involves creating a pipeline to connect to multiple databases (db1, db2, db3, ..., dbn), all with similar structures but different connection credentials. Additionally, the freelancer will be responsible for optimizing the ELK stack, creating indexes, implementing search queries for one use case that will be provided, ensuring secure access, and setting up performance monitoring. Key Tasks:  1.⁠ ⁠ELK Stack Setup: Install and configure Elasticsearch, Logstash, and Kibana on an Ubuntu 24 server. Set up proper communication and integration between Elasticsearch, Logstash, and Kibana.  2.⁠ ⁠Database Connection Pip...

...experiencing an issue with our Elasticsearch search system after a server upgrade. The upgrade required us to update the version of Elasticsearch, and while most functionality is intact, there are specific problems with category browsing and search filtering. We are looking for an experienced developer familiar with Elasticsearch and PHP to diagnose and resolve these issues. Currently, clicking on a category shows "no results," even though the correct data is present in Elasticsearch. Additionally, the search results page does not allow filtering by parameters such as "new/used" state, location, or other options. This suggests there may be a problem with the mapping for these fields on the search pages. Searches on the site return correc...

I'm looking for a professional who can help me configure SearxNG to work with my existing Elasticsearch setup. The goal is to enhance the search performance, particularly aiming for a faster query response time. Key Tasks: - Configure SearxNG to integrate with Elasticsearch - Optimize the setup for improved query response times Ideal Skills: - Experience with SearxNG and Elasticsearch - Strong understanding of search performance optimization - Ability to work with existing setups Please get in touch if you can assist with this project.

Build & Secure a Scalable 5-Node Hadoop Cluster on AWS/Azure Job Description: We are looking for an experienced freelancer to design, deploy, and secure a scalable 5-node Hadoop cluster on either AWS or Azure. This project requires expertise in Hadoop architecture, cloud infrastructure, and implementing best practices for performance and security. Key Responsibilities: Cluster Deployment: Set up a Hadoop cluster with 1 master node and 4 worker nodes. Install and configure Hadoop 3.x, including HDFS, YARN, and MapReduce. Integrate cloud storage (e.g., S3 or Azure Blob Storage) with the cluster. Scalability & Optimization: Configure the cluster to scale seamlessly with auto-scaling for worker nodes. Optimize Hadoop performance for data ...

I'm in urgent need of an AI/Data Science expert for a crucial project involving quantum secur...on finalizing an AI-driven anomaly detection system designed to protect financial networks from quantum computing threats. Key Responsibilities: - Completing model training and evaluation pipelines - Troubleshooting and ensuring all program components operate smoothly Ideal Candidate: - Extensive experience with AI-driven anomaly detection systems - Proficient in Python, TensorFlow, and Elasticsearch - Familiar with adversarial testing frameworks - Able to work under pressure to meet tight deadlines Your expertise will directly contribute to the security of critical financial networks. If you have a strong background in this field and can assist me in finishing the program, pleas...

...Development: Create an interactive and user-friendly dashboard (preferably customized) to display alerts, logs, and analytics using the Elasticsearch database. Data Security: Ensure robust data encryption during transmission and scalable architecture for future extensions. Product Deployment: Deliver the software in an OVA file format, deployable on physical and cloud platforms such as AWS, GCP, and Azure, with a size limit of 5GB. Deliverables: Fully functional software. Test cases, test results, and internal/external documentation. Video demos and presentations. Requirements: Expertise in AI/ML, cybersecurity, and network analysis tools. Experience with Elasticsearch, Zeek, Suricata, and custom dashboard development. Familiarity with deployment pipelines and ...

...Enhanced features from cryptographic operations. Adaptations to evolving data/testing conditions. Fine-tune the LSTM model for sequential anomaly detection in SWIFT-like transaction flows and optimize the Isolation Forest model for detecting cryptographic anomalies. 2. Simplifying Program Workflow: Address non-essential components: Disable/remove visualizations (e.g., ) and Elasticsearch integration to streamline functionality. Simplify program structure: Ensure scripts such as , , and can be executed independently in sequence. Remove reliance on , focusing on a modular execution approach. Clearly define script dependencies and execution order. Requirements: Proficiency in Python and AI/ML model development. Experience with

I'm seeking a Data Analyst proficient in Hadoop, Hive, and Flume to analyze Movielens data. The primary objective is to uncover trends and patterns within the dataset. Key Requirements: - Experience with Big Data tools, specifically Hadoop, Hive, and Flume - Strong data analysis skills - Ability to identify trends and patterns from complex data sets - Previous experience with Movielens data is a plus The ideal freelancer for this project will have a solid understanding of the Movielens dataset, with the ability to use Big Data tools to generate significant insights. Please provide examples of similar projects you've completed in your proposal.

...Senior Data Engineer to join our team. The ideal candidate should have a strong background in data engineering, particularly with the following skills and experiences: - 5+ years in data engineering or related roles. - Master’s degree in Computer Science, Engineering, or a related field is preferred. - Proficiency in Apache Airflow for workflow scheduling and management. - Strong experience with Hadoop ecosystems, including HDFS, MapReduce, and Hive. - Expertise in Apache Spark/Scala for large-scale data processing. - Proficient in Python. - Advanced SQL skills for data analysis and reporting. - Experience with AWS cloud platform is a must. The selected candidate will be responsible for developing data pipelines, managing data warehousing and performing data analysis and...

I'm looking for a Big Data expert well-versed in Hadoop, Hive, and Flume to assist with some fundamental-level problems. Your tasks will include: - Data ingestion, storage, and processing - Solving queries over a dataset for analysis - Performing basic-level data analysis Skills and experience that would be ideal for this job include: - Proficiency in Hadoop, Hive, and Flume - Experience with data ingestion, storage, and processing - Strong problem-solving skills for basic data analysis - Ability to troubleshoot errors and optimize performance

...Implementation: The solution must be implemented on our server, ensuring optimal performance and security. Advanced Search: Capability for semantic search and retrieval of documents based on content. Additional Details: The freelancer should provide a scalable solution that allows for easy addition of new documents and users. Expertise in setting up a RAG system using tools like Elasticsearch, LangChain, or similar is a plus. Integration with AI tools for enhanced document search and retrieval is desirable but not mandatory. Comprehensive documentation and basic training for our team should be included. If you have experience with RAG databases and can deliver a scalable, user-friendly solution, please send us: 1. Your portfolio or previous similar pro...

We are seeking a highly skilled Elasticsearch Developer with a strong background in AI-powered search technologies to help us enhance and optimize our search capabilities. The ideal candidate will have hands-on experience with Elasticsearch and integrating Artificial Intelligence (AI) and Machine Learning (ML) techniques for improving search relevance, accuracy, and performance. Key Responsibilities: -Prior experience with AI-based search systems. - Implementing NLP techniques into our Elasticsearch framework. - Aiming to improve our system's response automation and content generation abilities. Ideal Skills: - Extensive experience with Elasticsearch. - Proficient in Natural Language Processing. - Previous work with user-generated content preferred.

...expertise. - Create a mobile-friendly query input interface. - Integrate various retrieval systems like FAISS, Pinecone, or ElasticSearch. - Use LLMs (e.g., GPT-3, GPT-4) for generating answers. - Implement the app using a framework of your choice, such as Flutter or React Native. Essential Skills: - Proficiency in mobile development, particularly with Flutter and React Native. Knowledge in Kotlin and Swift is a plus. - Strong backend development skills in Python, preferably using FastAPI or Flask. Experience with LLM APIs like OpenAI and Hugging Face is crucial. - Competence in database management (PostgreSQL, MongoDB) and search & retrieval systems (FAISS, Pinecone, ElasticSearch). - Experience in deploying applications on cloud platforms (AWS, GCP, Azure). - Unders...

...files for me. These files should execute trained machine learning models on new data, generate visualizations of model performance, and compare and report on the performance of different models. The main tasks involve: - Creating Python files for executing machine learning models, generating visualizations, and comparing model performances - Troubleshooting and optimizing data ingestion into Elasticsearch - Configuring and verifying Kibana visualizations I use TensorFlow and PyTorch for my machine learning frameworks, so experience with these is crucial. The visualizations needed for model performance include Confusion matrices, ROC curves, and Precision-recall curves. The ultimate goal is to integrate these new functionalities into my existing program workflow, ensuring it ...

3. Data Engineer Responsibilities: Collect, process, and organize audio data. Set up data pipelines, create preprocessing workflows, and ensure data quality to feed the model. Skills: Python, SQL, big data tools (Hadoop, Spark), ETL (Extraction, Transformation, and Loading), and handling large volumes of data. Ideal Profile: Someone with experience handling large volumes of audio data (multi-track) who can build scalable and efficient data pipelines. 4. Software Developer / Backend Engineer Responsibilities: Integrate the model into a functional application, build APIs for the model, or even develop an interface if the project requires a standalone application. Skills: Backend development (Node.js, Python, Django), API creation and implementation, microservices, cloud experience (AW...

I'm in urgent need of a professional to help finalize my Elasticsearch/Kibana setup. The system is already configured but I require assistance with the following: - Data Logging Points: I need help identifying and setting up the data logging points to capture system performance data correctly. - Backup Visuals: I need additional visuals created within the program using Matplotlib and Seaborn. Most of the code is written, I just need help pulling everything together. The system performance data is currently in JSON format. Ideally, you should have extensive experience with Elasticsearch, Kibana and data visualization, as well as strong coding skills, particularly with Python and its libraries.

...as Node.js, Component-based UI frameworks, Elasticsearch, and cloud-based infrastructure. The system will be designed to be highly scalable, reliable, and performant to meet the requirements of a meta-search engine. The main components (Microservices) of the system will include: - Web App - Management Portal: UI with information about the system, search statistics, and other relevant data and potential system controls. - Queue Management Service: will manage tasks and queues for the system, including web scraping tasks, indexing tasks, etc. and gracefully processes them. - Web Scraper & Aggregator: The service that will scrapes data from different sources, aggregates the results, and sends them to the search service for indexing. - Elasticsearch Service: Provides the...

Looking to create an adult (porn) aggregator from multiple porn tube sites. We aren't hosting videos or playback. Partners will provide CSV/XML feeds of content which we aggregage into categories / models / tags and display on our site. Thumbnails of content should have a CTR algo in place. Site needs to be extremely fast, golang, sphinx/elasticsearch, node.js, caching etc. Should be able to handle 100s of millions of videos, users and a partner who can work quickly, understand this is pornography and be ok with that and great english skills. Ideally looking for a team to get this task completed as soon as possible.

AI Expert Needed to Enhance Elasticsearch in ASP.NET MVC Project We are seeking an experienced AI expert to help enhance the search functionality in our ASP.NET MVC project, which currently uses Elasticsearch for searching large datasets. While Elasticsearch is integrated, we are facing challenges in retrieving the most relevant data and ensuring that the search results meet our users' needs effectively. Scope of Work: Review Current Elasticsearch Implementation: Analyze the existing Elasticsearch integration within our ASP.NET MVC project to identify gaps and areas where AI can improve the relevance and performance of search results. AI Integration for Better Search Results: Implement AI techniques, such as machine learning models or natural lan...

I'm looking for an expert-level interviewer who can assess a candidate's technical skills in the Big Data domain. The ideal interviewer should have a deep understanding of various Big Data technologies and tools. Key Areas of Focus: - Assessing the candidate's proficiency in key Big Data technologies, including Hadoop, Spark, Hive, HBase, and Kafka. - Evaluating the candidate's understanding and ability to work with data processing techniques, distributed computing, and Big Data architecture and design patterns. - The interview is solely focused on technical skill assessment. Ideal Skills: - Extensive experience with data processing, storage, and distributed computing. - In-depth understanding of Big Data best practices, architecture, and design patterns. Pl...

I'm looking for an expert-level interviewer who can assess a candidate's technical skills in the Big Data domain. The ideal interviewer should have a deep understanding of various Big Data technologies and tools. Key Areas of Focus: - Assessing the candidate's proficiency in key Big Data technologies, including Hadoop, Spark, Hive, HBase, and Kafka. - Evaluating the candidate's understanding and ability to work with data processing techniques, distributed computing, and Big Data architecture and design patterns. - The interview is solely focused on technical skill assessment. Ideal Skills: - Extensive experience with data processing, storage, and distributed computing. - In-depth understanding of Big Data best practices, architecture, and design patterns. Pl...

I'm looking for an expert-level interviewer who can assess a candidate's technical skills in the Big Data domain. The ideal interviewer should have a deep understanding of various Big Data technologies and tools. Key Areas of Focus: - Assessing the candidate's proficiency in key Big Data technologies, including Hadoop, Spark, Hive, HBase, and Kafka. - Evaluating the candidate's understanding and ability to work with data processing techniques, distributed computing, and Big Data architecture and design patterns. - The interview is solely focused on technical skill assessment. Ideal Skills: - Extensive experience with data processing, storage, and distributed computing. - In-depth understanding of Big Data best practices, architecture, and design patterns. Pl...

...settings for high throughput and low latency. 5. Security: Setting up user authentication (e.g., LDAP, Kerberos, or NiFi user authentication). Implementing role-based access controls (RBAC). Configuring secure connections (HTTPS, secure processors, etc.). Additional Skills (Preferred): Familiarity with cloud platforms (AWS, Azure, GCP) for deploying NiFi. Knowledge of complementary tools like Kafka, Hadoop, or Spark. Proficiency in scripting (e.g., Python, Bash) for automation and data handling. Experience with data serialization formats like JSON, XML, Avro, or Parquet. Steps for Setting Up Apache NiFi for Managing and Distributing Data Feed: Here’s how a specialist would approach the task: 1. Planning and Design: Understand the data sources, volume, and frequency. Ident...