Find Jobs
Hire Freelancers

Procesar millones de datos de mongodb y generar un txt

$750-1500 USD

Cerrado
Publicado hace alrededor de 6 años

$750-1500 USD

Pagado a la entrega
Tenemos una consola que obtiene registros desde mongodb , cada registro tiene un peso entre 5k a 20kb, y el maximo de registros es de 1.5 millones, una vez que lo tenemos en memoria, procesamos estos registos con algunass condiciones de "contains", "remove", comando de cadenas, y finalmente lo escribimos en un archivo txt. Este proceso actualmente demora 5 horas, y necesitamos reducirlo a 1 hora, la tecnologia que utilizamos es: c#, .net framework 4.5,mongodb 3.4. Necesitamos una solucion con personas que hayan tenido experiencias de gran procesamiento de datos, abstenerse personas que no tengan esta experiencia.
ID del proyecto: 16677645

Información sobre el proyecto

10 propuestas
Proyecto remoto
Activo hace 6 años

¿Buscas ganar dinero?

Beneficios de presentar ofertas en Freelancer

Fija tu plazo y presupuesto
Cobra por tu trabajo
Describe tu propuesta
Es gratis registrarse y presentar ofertas en los trabajos
10 freelancers están ofertando un promedio de $1.226 USD por este trabajo
Avatar del usuario
Saludos, somos compañia de Software y Microsoft Registered Partners, me gustaría hacer algunas pruebas usando paralelismo. No necesito el awarding del proyecto, me encantan este tipo de desafios que ademas son cuantificables porque podemos comparar de manera objetiva el performance de la solucion vieja, con la solucion que yo les pueda hacer. Si logro una mejora de 5X pasariamos a formalizar el awarding y yo gustosamente entregare el codigo fuente de la solucion. Gracias Felice
$1.111 USD en 10 días
5,0 (10 comentarios)
6,1
6,1
Avatar del usuario
Hello there. I have seen your job posting. I will like to ask some questions. Please come over the chat so we can discuss things. Some intro about me. I am an enthusiastic developer/implementer who does not stop until or unless i fulfill all of your project's requirements. I don't call myself a GEEK as pride consumes the weak but i don't put up a break till the finish line. Let's talk over the chat and start this project right away. You've found your perfect fit for this work as you're are seeing the proposal of a right guy. I am waiting anxiously for you to come over the chat-- so we can fill in some missing pieces of puzzles in the requirements you've mentioned here.
$1.250 USD en 20 días
5,0 (3 comentarios)
5,7
5,7
Avatar del usuario
Muy buen requisito de ajuste del rendimiento. Solo pregunta si es posible cambiar el método de carga a otro idioma para hacerlo más rápido.
$1.400 USD en 7 días
5,0 (8 comentarios)
4,7
4,7
Avatar del usuario
Tengo experiencia con PostgreSQL integrado con otras bases de datos. Puedo implementar para ti utilizar el PostgreSQL como un medio de leer el MongoDB y generar el txt con solo herramientas nativas de PostgreSQL. Podemos hacer una Prueba de Concepto si así lo deseas. Por favor, contactame y hablaremos sobre mi experiencia y solución. Pudiésemos hacerlo con SQL Server también.
$1.388 USD en 5 días
4,9 (9 comentarios)
5,0
5,0
Avatar del usuario
Hola, soy un desarrollador experto en .NET y me interesa este proyecto ya que tengo experiencia optimizando procesos de larga duración con gran cantidad de datos. Me gustaría platicar en mas detalles acerca del proceso y colaborar en la optimización de este. Estoy disponible para conversar cuando sea. Muchas gracias, José Cruz
$1.000 USD en 10 días
5,0 (2 comentarios)
3,6
3,6
Avatar del usuario
Buen día, hace poco tuve un proceso contable, la de obtener un Balance General con datos desde el 2009 al 2017, con mas de 2,3 millones de registros, no se si conozca algo de Contabilidad, pero los procesos deben ejecutarse año a año ya que se debe obtener primeramente el Estado de Pérdidas y Ganancias. Este proceso se lo realizaba de un día para otro, usando técnicas propias del motor de Base de Datos (Store Procedure) se logró condensar la información en tablas con menos registros al punto de reducir el tiempo a 2 horas. Usando técnicas parecidas podríamos reducir el tiempo en sus procesos, se lo puede hacer mediante C# o VB.Net o directamente desde el motor de Base de Datos, eso depende de los requerimientos de ustedes
$1.250 USD en 10 días
0,0 (0 comentarios)
0,0
0,0
Avatar del usuario
Hola, soy un desarrollador profesional de Java desde 2012 cuando terminé mi maestría en Análisis de Programas en Brasil. Lo siento, acabo de mudarme a España pero aún necesito aprender a escribir en español, pero puedo entenderlo bien. En su proyecto, si no le importa, me gustaría volver a escribir la aplicación en Java antes de comenzar la optimización. La mayor parte de mi carrera se basó en la creación de software para el análisis de crédito y la gestión de riesgos, por lo que se requiere una gran presentación de datos :). >> Hi I am a java professional developer since 2012 when I finished my master degree in Program Analysis in Brazil. Sorry I just moved to spain but still need to learn how to write in spanish, but I am able to understand well. In your project if you don't mind I would like to rewrite the application in java before start the optimization. Most of my career was based on building software for credit analysis and risk management so big data presentment is a required :).
$1.111 USD en 10 días
0,0 (0 comentarios)
0,0
0,0

Sobre este cliente

Bandera de PERU
lima, Peru
5,0
1
Forma de pago verificada
Miembro desde jul 17, 2013

Verificación del cliente

¡Gracias! Te hemos enviado un enlace para reclamar tu crédito gratuito.
Algo salió mal al enviar tu correo electrónico. Por favor, intenta de nuevo.
Usuarios registrados Total de empleos publicados
Freelancer ® is a registered Trademark of Freelancer Technology Pty Limited (ACN 142 189 759)
Copyright © 2024 Freelancer Technology Pty Limited (ACN 142 189 759)
Cargando visualización previa
Permiso concedido para Geolocalización.
Tu sesión de acceso ha expirado y has sido desconectado. Por favor, inica sesión nuevamente.