Data scraping linuxtrabajos
Hola. Una web publica unos 60 datos por hora y día. Dan API. Quiero hacer una base datos de los 2-3 años a los que da acceso la web. en excel o csv pero no soy informatico y no soy capaz. He intentado hacerlo con excel pero no me carga nada. Necesito ayuda o soporte para hacerlo. Un saludo.
Me llamo Ronald. Soy de Ecuador. Manejo un ISP. Tengo un servicio donde mis clientes miran camaras de seguridad barriales. Yo vendo internet pero es un valor agregado que les entrego para competir en el saturado mercado del internet GPON. Este servidor de camaras se llama WISENET WAVE (no se si lo hayas escuchado, lo tengo montado aparte en un Linux). Actualmente en el mismo servidor creo un usuario y un password y el cliente accede a ese servidor y mira las camaras que yo he determinado que el mire. Las camaras las tengo separadas por CONJUNTOS y yo decido en que conjunto lo pongo y el solo vera ese conjunto. Por cuestiones de privacidad el cliente no puede ver todas las que tenemos. Sucede que si NO ME PAGA mi cliente entonces tengo que cortarle el acceso a las camaras manualmente...
...Participar en la elaboración de requisitos funcionales y no funcionales para el proyecto. Utilizar herramientas y metodologías para crear representaciones de flujos de trabajo, interfaces de usuario, esquemas de datos, etc. Requerimientos Conocimientos en Backend: Node.js, Python Flask, Ruby on Rails, PHP Laravel y Java Spring. Golang, Rust, etc. (Al menos un Lenguaje y Framework) Conocimiento en Linux Conocimiento en sistemas de gestión de bases de datos (DBMS) como MySQL, PostgreSQL, MongoDB, entre otros. Diseñar y crear esquemas de bases de datos y consultas SQL eficientes Protocolos y estándares: HTTP, TCP/IP, RESTful, entre otros. Servidores web: Apache, Nginx, IIS, entre otros. Control de versiones: Git & GitHub Portafolio para Evalua...
...Participar en la elaboración de requisitos funcionales y no funcionales para el proyecto. Utilizar herramientas y metodologías para crear representaciones de flujos de trabajo, interfaces de usuario, esquemas de datos, etc. Requerimientos Conocimientos en Backend: Node.js, Python Flask, Ruby on Rails, PHP Laravel y Java Spring. Golang, Rust, etc. (Al menos un Lenguaje y Framework) Conocimiento en Linux Conocimiento en sistemas de gestión de bases de datos (DBMS) como MySQL, PostgreSQL, MongoDB, entre otros. Diseñar y crear esquemas de bases de datos y consultas SQL eficientes Protocolos y estándares: HTTP, TCP/IP, RESTful, entre otros. Servidores web: Apache, Nginx, IIS, entre otros. Control de versiones: Git & GitHub Portafolio para Evalua...
...el equipo. -Liderar el desarrollo del proyecto desde cero hasta un producto viable. Requerimientos Conocimientos en Tecnologías Frontend: HTML,JS,CSS ,JSON, AJAX,. TypeScript(Deseable) Herramientas Frontend: , React, Angular o Vue.js, Algún framework CSS. Conocimientos en Backend: Node.js, Python Flask, Ruby on Rails, PHP Laravel y Java Spring. (Al menos un Lenguaje y Framework) Conocimiento en Linux Conocimiento en Base De Datos: MySQL, PostgreSQL o MongoDB. Control de versiones: Git & GitHub Portafolio para Evaluación de Proyectos Habilidades Configuración de Servidores Curiosidad y Capacidad de Aprendizaje. Trabajo en Equipo. Pensamiento y Resolución de Problemas Programación Orientada a Objetos Programación Modular Patrones...
Hola Matias Gaston P., Los certificados Letsencrypt están configurados a través de VirtualMin pero no se renuevan automáticamente en mi servidor linux (VPS). Alcance del proyecto: Reinstalar Letsencrypt en 2 dominios Configurar la renovación automática para 2 dominios. Saludos John F.
Extracción de un ecommerce de: imágenes de productos, sku, precio y nombre. Entregar un archivo con las imágenes y un Excel con el resto de los datos y el nombre de las imágenes de esos productos.
Se requiere una persona con conocimientos en linux que tenga experiencia con servidores WHM y maneje bien los módulos para servidor de correos, seguridad, antivirus, exim, spamd, cphulk de manera que pueda resolver problemas con mi servidor de correos. ya que en varias ocasiones he caído en listas negras, los correos de mis dominios se van a spam, mis correos reciben mucho spam, tardan en recibir sus correos y en ocasiones no pueden enviar correos ni entre ellos mismos
...interactúan con una cuenta o Hashtag Comentar a todos los usuarios que siguen a la cuenta Comentar a todos los usuarios que sigue la cuenta BulkMessage Sender Mensaje masivo a todos los usuarios que interactúan con una cuenta o Hashtag Mensaje masivo los usuarios que siguen a la cuenta Mensaje masivo a todos los usuarios que sigue la cuenta Mensaje masivo a los usuarios que siguen la cuenta master Scraping: Scrapear email y numero de telefono de todos los usuarios que interactúan con una cuenta o Hashtag Scrapear email y numero de telefono de los usuarios que siguen a la cuenta Scrapear email y numero de telefono que sigue la cuenta Scrapear email con el numero de teléfono proporcionado en .cvc Scrapear numero de telefono con el email proporcionado ...
Estoy buscando un profesional experimentado en el desarrollo de daemon en Linux para que pueda subir datos desde una base de datos local a una base de datos en PhpMyAdmin. La tarea principal del daemon es automatizar la transferencia de datos de una base de datos local a una base de datos en PhpMyAdmin en tiempo real. La funcionalidad principal que necesito del daemon es que haga consultas en la base local y complete las tablas correpondientes en PhpMyAdmin donde los datos deben ser cargados en el host. El daemon debe ser capaz de leer los datos de la base de datos local en tiempo real y cargarlos en la base de datos de PhpMyAdmin, con la minima demora, ademas en un panel de configuracion se podra definir la ruta del host y la ubicacion de la Base de datos Requisitos del proyecto:...
se ha desarrollado para un cliente una plataforma en la que actualmente ya estan en produccion 2 proyectos grandes proveyendo a la plataforma de muchas mecanicas com...manejo de roles y permisos, algunas librerias de uso como para importar y exportar archivos CSV, PDF, IMAGENES entre otros tantos procesos, UI y UX ya definida de la cual reutilizar codigo con ese contexto puntualmente estoy necesitando desarrolladores con las sgtes habilidades - mas de 3 años de experiencia usando Laravel - vuejs - mysql - conocimiento almenos basico de API, servidores, deploy en linux, trabajo con Git y Docker para desarrollar nuevos módulos que se irán acoplando a esa misma plataforma, se cotizaría el trabajo por proyecto completo ó trabajo en colaboració...
tenemos una necesidad puntual con dos servidores linux que alojan un software llamado KOHA En uno de ellos hemos montado el certificado de seguridad (wildcard *.) pero necesitamos que pueda resolver en el mismo servidor distintos nombres de dominio. Tanto en producción como en test, 1 servidor en cada caso.
Actualmente tenemos un proyecto desarrollado con Python y Scrapy en el que tenemos una serie de actividades de las que hay que extraer cierta información en una página web haciendo scraping. Para ello primero se detecta el nº de registros totales en la primera página y posteriormente el nº de paginas. De cada página se obtiene un determinado nº de enlaces fijo, excepto en la última página que puede tener ese nº o menos. Esto es lo que llamo nivel 1. El nivel 1 hay que ejecutarlo varias veces ya que la página web en cuestión va rotando los enlaces en cada página, y después de una rotación no tiene porque haberse obtenido todos los enlaces. En el nivel 2 con todos los enlaces obtenidos obt...
...interfaces de usuario atractivas utilizando HTML, CSS y JavaScript. Trabajo en equipo con otros desarrolladores y miembros del equipo para asegurar la calidad y el rendimiento de las aplicaciones desarrolladas. Mantenimiento y mejora de aplicaciones existentes. - Requisitos: Experiencia +1 año en desarrollo de SW; programación en Odoo. Buen conocimiento de PostgretSQL Conocimientos en Git-Linux Conocimientos y experiencia en el desarrollo de aplicaciones web y bases de datos.(HTML, CSS y JS.) Capacidad para trabajar en equipo y colaborar con otros desarrolladores. Buena comunicación y habilidades de resolución de problemas. Capacidad para aprender y adaptarse a nuevas tecnologías y herramientas. Conocimientos básicos de sis...
Necesito scrapear paginas de Ecommerce de empresas de retailing. Extraer datos de productos, precios, promociones stocks por sucursales. Es para residentes en Argentina que puedan cobrar en ARS.
Hola! Tengo un software montado en un servidor en Digital Ocena, el cual debo dejarlo corriendo en un servidor local. Necesito cotización para dicho trabajo
Actualmente tenemos un proyecto desarrollado con Python y Scrapy en el que tenemos una serie de actividades de las que hay que extraer cierta información en una página web haciendo scraping. Para ello primero se detecta el nº de registros totales en la primera página y posteriormente el nº de paginas. De cada página se obtiene un determinado nº de enlaces fijo, excepto en la última página que puede tener ese nº o menos. Esto es lo que llamo nivel 1. El nivel 1 hay que ejecutarlo varias veces ya que la página web en cuestión va rotando los enlaces en cada página, y después de una rotación no tiene porque haberse obtenido todos los enlaces. En el nivel 2 con todos los enlaces obtenidos obt...
Proyecto de larga duración y estable. Modelo híbrido con cierta presencialidad (60%), Madrid centro. Perfil con experiencia de dos años mínim...ingesta en el grafo • Análisis funcional y definición de procesos. Análisis del alcance. Toma de requerimientos, diseño y documentación de la solución a implementar • Conocimiento de SO Linux • Interlocución directa con el cliente Tareas relativas a Java: • Despliegues y/o desarrollos en entornos de integración y producción de aplicaciones en JAVA • Desarrollo de la arquitectura en aplicaciones JAVA • Conocimiento y uso de Spring Framework • Creación de operaciones CRUD en JAVA • Tratamiento de datos c...
Queremos contratar a una persona que maneje programación con Linux y Laravel para páginas web para implementar el rediseño y redesarrollo de la página web de la ONG CEDAPP:
Buscamos una persona que sea entusiasta de Linux sobre diferentes distribuciones y aplicaciones. Entre otras funciones, deberá revisar el contenido generado por otras personas del equipo, así como crear screencasts mostrando diferentes funciones y/o aplicaciones. La dedicación inicial será de 4-8h por semana, teniendo en cuenta las tareas semanales. Esta irá aumentando junto al crecimiento del proyecto. Este es un proyecto de larga duración. Idioma: Español de España o Español Neutro. Responsabilidades - Trabajar en entorno Linux. - Identificar noticias y novedades. - Definir la importancia de las mismas. - Revisar el contenido generado por el equipo. - Crear screencasts Full HD de aplicaciones. - Utilizar m&a...
Necesitamos experto en manejo de sotware vmware. Hay que unir 2 archivos extensión vmdk para convertirlos en uno solo. Tenemos 3 archivos: 2 con extensión vmdk y 1 con extensión ovf. Estos archivos se generaron desde un server en Linux Debian.
Diseño y desarrollo de una aplicación Aplicación móvil OTT Windows – Linux – Android (todas la posibles versiones) -IOS, iphone, - IPN(las diferentes versiones) con las siguientes funcionalidades: - Cliente SIP para VoIP, con la opción de elegir entre servidores SIP - Cliente de chat (REST API), el chat debe ser capaz de enviar y recibir Audios, texto, emojis, imágenes, vídeos, ubicación y archivos - Soporte de videoconferencia - Notificaciones PUSH - Soporte de cliente VPN
...para el puesto) - Base de datos PostgresSQL (No Limitativo para el puesto) - Debe tener capacidad de Manejar nuevos proyectos de desarrollo y llevarlos a termino. - Capacidad para contrartar desarrolladoros en las distintas plataformas de freelance y velar por el cumplimiento de las tareas asignadas a cada freelancer contratado. - Conocimiento de Gitlab para el control de versiones. - Manejo de Linux Ubuntu. - Nginx - Comunicativo, eficaz, resposable, honesto, dedicado y con capacidad de respuesta....
Se requiere una persona para soporte técnico con horarios extendidos. Requisitos: 100% freelancer (indispensable) Idioma Español (Indispensable) Conocimiento en Linux, Windows, cpanel, virtualización (indispensable) Conocimientos en bases de datos MySQL, postgreSQL, SQL (deseable no indispensable) Conocimientos php y java (deseable no indispensable)
Necesito un ingeniero que sepa de scraping para un proyecto de analisis de cuotas en varias casas de apuestas
...infraestructura y arquitectura. me solicitaron separar en 3 tipos de servicio: servidor de lógica base de datos storage requiero que estos tres servicios funcionen de forma optima y seleccionar las mejores máquinas para hacer andar el software el sistema tiene un gran numero de consultas a la base de datos, interactúan al menos 25 usuarios alojado en web, el consultor debe tener conocimientos: Linux, DigitalOcean, Centos/Ubuntu, infraestructura de servidores y servicios cloud, manejo y configuración de servidor de correo, integración con mailgun, manejo de cloudflare, DNS, y otros relacionados con servidores Categoría: Programación y Tecnología Subcategoría: Otros Tamaño del proyecto: Pequeño &ique...
Hola, necesito una clase de java para recuperar información que genera un sitio al consultar reportes por día. Al sitio se ingresa con usuario y clave las cuales se dispone. Lo ideal es recuperar la información mediante peticiones POST.
Se requiere desarrollar modulo contabilidad desde cero con microservicios de la parte del banckend con java , spring y de la parte del frontend con angular 9, bd postgres, con docker, ubuntu en linux. Se requiere que el programador tenga experiencia en desarrollo de este tipo de sistemas para que sea mas practico el explicar las funcionalidades que debe tener dicho sistema. Ademas la persona que aplique debe dominar el idioma español para asi mantener comunicacion efectiva
Quiero hacer un puente entre windows server y Linux mediante Putty
Necesitamos la creación una aplicación para hacer web-scraping online y realizar consultas de enlaces a páginas.
Desarrollo de aplicacion en Python para hacer web scraping
Necesito un bot que haga web scraping a casas de apuestas, para posteriormente compararlas con las cuotas del mercado más altas y dicha información publicarla en una página web, necesito cotizar el proyecto si el ingeniero es colombiano mejor
Buscamos una persona que sea entusiasta de Linux sobre diferentes distribuciones y aplicaciones. Entre otras funciones, deberá revisar el contenido generado por otras personas del equipo, así como crear screencasts mostrando diferentes funciones y/o aplicaciones. La dedicación inicial será de 4-8h por semana, teniendo en cuenta las tareas semanales. Esta irá aumentando junto al crecimiento del proyecto. Este es un proyecto de larga duración. Idioma: Español de España o Español Neutro. Responsabilidades - Trabajar en entorno Linux. - Identificar noticias y novedades. - Definir la importancia de las mismas. - Revisar el contenido generado por el equipo. - Crear screencasts Full HD de aplicaciones. - Utilizar m&a...
Buenas Noches Freelancer, En esta oportunidad estoy buscando la extracción de los números de teléfono y nombres de los asesores inmobiliarios de cada una de las propiedades que se encuentra en esta página: En la vista interna de cada propiedad se encuentra el nombre y el teléfono de cada asesor: El formato en el que necesito esta información es en Excel. Saludos,
Extracción de datos de 2 directorios de empresas. Comparto 2 enlaces como ejemplo de las 2 web, son 2 web de directorios de empresas (infocif y einforma): 1) 2) Imprescindible hablar idioma español. Objetivo de fecha: 10-15 de Enero.
Necesito una herramienta para raspar la informacion de una web, guardarla y e...salida con la info raspada. La herramienta tendrá que hacer un loguin en la pagina web para después raspar la informacion de los productos. La informacion a raspar es la siguiente: Titulo producto Referencia Fotos de productos Precio Descripción en html Descripción sin html Datos técnicos Atributos ID de compatibilidades Requisitos del FreeLancer: Habla Español o Frances nativo. Experto en scraping y que no tenga ninguna limitación. Buena disponibilidad Necesito muchos otros scrapers asi que busco a alguien con buena disponibilidad para poder poder trabajar de forma regular con esa persona, por esta razón buscamos una persona que hable espa&ntil...
Hola, necesito un técnico que pueda instalarme un actor con exito pues yo lo tengo pero no lo he conseguido. He instalado python y he descargado el script con las instrucciones pero no consigo meter los comandos con éxito... (Budget: €8 - €30 EUR, Jobs: Linux, Mathematics, PHP, Python, Software Architecture)
Tengo una aplicación realizada den VB.NET y me gustaría saber si es posible que funcione correctamente en un sistema Linux tipo PI raspberry o alguna similar como podría ser alguna SBC tipo Pine 64 PA642GB (LO PREFIERO) Puedo enviar la aplicación para pruebas, con el instalador para Windows o los archivos que incluyen el instalador. La aplicación incluye el EXE y 3 o 4 librerias realizadas en C. Se trata de una aplicación que visualiza el Video de una cámara. Saludos.
Hola! Necesito lo siguiente: Quiero un bot que me busque "x" termino de busqueda en google y que entre a las primeras 200 paginas y me extraiga los numeros de whatsapp y/o email (obligatorio el whatsapp) y me los exporte en un excel . En Conclusión: Quiero un "programa" que yo le "diga": Busque en google méxico la palabra clave " lavado de alfombras" y que se vaya a la 3 pagina de resultados y me extraiga los telefonos de esas paginas. Y lo mismo con otras palabras clave en distintos paises ( google chile, google colombia, etc )
Se tiene la siguiente infraestructura: Sistema Operativo Linux Ubuntu 20.04 Maria DB 10.3 4GB RAM Se tiene acceso a la base de datos en el servidor de pruebas donde esta corriendo la aplicación y se desea ejecutar la actualización Al ejecutar un script de actualización de versiones de una aplicación se obtiene el siguiente mensaje: "The total number of locks exceeds the lock table size" Este mensaje se obtiene al ejecutar la actualización hacia la versión 17.12.00 el proceso de esta actualización se documenta en el siguiente enlace, se nos ocurre que se podria ejecutar los procesos de esa actualización de forma manual y luego proseguir con el script tal vez: y se tiene acceso al archivo de
Necesito alguien experto en Bases de Datos así como en LInux para trasladar todo un proyecto ya instalado en un servidor a otro servidor Linux (Debian). Lo importante es la base de datos. Todos los archivos ya han sido movidos, pero aún así está con problemas en el nuevo servidor.
Busco realizar web scraping a tres páginas webs de neumáticos. Una de ellas es: La idea es obtener información de todos los neumáticos de cada una de las páginas y poder extraerlo a Excel.
Amplio conocimiento y experiencia en desarrollo de sistemas y aplicaciones web, RIA, móviles y de escritorio. Uso de más de 8 tecnologías para el desarrollo como HTML5, C#, Python, PHP OO, Action Script, Flex, Xojo Script, PHP Zend, MS SQL, MySQL, Store Procedures, entre otros. Experiencia en servidores Linux, Windows y Mac OS.
Hola Martin Maximiliano Roberto M., me gustaría ofrecerte la posibilidad de darme unas lecciones sobre gestión de VPSs. Los comandos básicos y gestión de screens y demás. No se si estarías interesado. Saludos!!!
Tengo un Vps en digital ocean (este es un FreePbx), he aumentado el el tamano de su disco duro pero no se actualiza en mi FreePbx, necesito alguien experto para ampliar la particion de mi servidor sin perder la informacion que tengo en esa particion
Se requiere crear un sistema para facturacion electronica en web con la estructura de microservicios, docker, angular, java, spring, postgress, en servidor vps linux, ubuntu, para ello se inciara el desarrollo desde cero, la persona que aplique que tenga la experiencia necesario para este tipo de desarrollos y que ademas domine el idioma español para poder mantener una comunicacion efectiva.
Busco experto en servidores que trabaje por horas. Manejo de linux, ubuntu, plesk
Tenemos 2 APPs WEB desarrolladas en Scriptcase por un programador que ya no esta y queremos contratar programador que le de mantenimiento a las mismas, la principal queremos que se monte en un VPS Linux, se pueda hacer funcionar (actualmente funciona en una Web pero no podemos replicarla en otras), se le solucione unos bugs, se le documente y se le de mantenimiento en el tiempo, tengo todos los fuentes en PHP, las tablas que usa en MySQL y explicacion operativa de como funciona el software, tambien el reporte de lo que se debe solucionar, solo personas que hablen Castellano por favor