Crawl databasecông việc

cần crawl data về web, dữ liệu bao gồm hình ảnh, tiêu đề, ......

Chúng tôi có những trang web ghi tên công ty nhưng thiếu phần website, email, số điện thoại công ty. Nếu phải nhập và tìm kiếm từng tên công ty thì sẽ rất là lâu, sử dụng AI cũng không mang đến độ chính xác cao

Tool crawl sản phẩm từ wayfair

Cần thuê người viết tool để crawl data theo yêu cầu trên website TMĐT có thể sử dụng lâu dài Data có thể trích xuất ra dạng .csv hoặc .xlsx

Crawl website chạy bằng Javascript, yêu cầu sử dụng python(ưu tiên) or javascript

Chúng tôi cần kiếm 1 developer người Việt viết Python script để scrap/crawl thông tin. Vui lòng viết “VN HCM” ở đầu application nhằm tránh spammers. Cám ơn nhiều!

- Hiện web của mình đang dùng là yii2 và mongo db, chạy trên 3 VPS, Web của mình thuộc dạng mạng xã hội, thương mại điện tử crawl hàng triệu bản ghi nên cần xử lý tìm kiếm trên db lớn. - Tuy vậy tìm kiếm của web đang rất chậm, dev hiện tại không giải quyết được vấn đề này. Nên mình cần tìm dev hoặc team có kinh nghiệm khắc phục vấn đề cho mình. Lưu ý, mình cần dev đã làm được, chạy được rồi, chứ không phải là chỉ có giải pháp, hoặc đang chạy thử - Dự án của mình xây dựng dài hơi nhiều năm rồi nên sau khi hoàn thành tính năng này th&ig...

- Hiện web của mình đang dùng là yii2 và mongodb, chạy trên 3 VPS, Web của mình thuộc dạng mạng xã hội, thương mại điện tử crawl hàng triệu bản ghi nên cần xử lý tìm kiếm trên db lớn. - Tuy vậy tìm kiếm của web đang rất chậm, dev hiện tại không giải quyết được vấn đề này. Nên mình cần tìm dev hoặc team có kinh nghiệm khắc phục vấn đề cho mình. - Dự án của mình xây dựng dài hơi nhiều năm rồi nên sau khi hoàn thành tính năng này thì có thể hợp tác phát triển tiếp - Các bạn có thể đưa ra mức phí của các bạn cho mỗi giờ làm việc ...

Mình có ý tưởng crawl sản phẩm từ SHOPEE như website này: ai có khả năng báo giá giúp em với ạ

Mình có một web novel tiếng anh cần viết plugin crawl để tự động cập nhật những truyện có sẵn trên web.

- Dã có template, model, css, form sẵn. Chỉ cần giúp mình upfile lên được database

Mình có application connect với db hosting server Mà để chuỗi connect trong app thì bị lộ Nên 1 bạn giúp

Mình muốn xử lý trang HTML chuyển vào database(kiểu xử lý chuỗi or mảng rồi lưu vào database real time) bạn nào hứng thú liên hệ mình sẽ trao đổi cụ thể.

Mình cần bạn giúp mình code tool crawl ảnh của store website, sau đó lọc những lựa chọn, màu sắc không mong muốn rồi sắp xếp những link ảnh đó vào theo template cho sẵn. Ví dụ: Link sản phẩm của web store có 10 màu (đi kèm là 10 ảnh sản phẩm tương ứng với 10 lựa chọn đấy. Nhưng sau khi crawl mình chỉ muốn giữ lại 3 màu: Black, White, Blue. Thì code ghi vào template excel 3 link ảnh tương ứng với 3 màu đó thôi, những ảnh của các màu khác sẽ k cần ghi lại. Đầu vào: File excel gồm 1 cột có các link của các sản phẩm. Đầu ra mình cần là 1 file excel/csv: mỗi link sản phẩm từ đầu v...

Mình muốn load database của 1 website về dạng bảng excel để tiện tra cứu, trang đó có đuôi dạng như này Pages/admin/report/

Mình cần lấy dữ liệu của website này: Cụ thể là lấy thông tin của tất cả các khu công nghiệp trang này có (420 khu) Thông tin mỗi khu bao gồm: -Hình của khu công nghiệp -Miêu tả tổng quan về khu công nghiệp -Thông tin chi tiết khu công nghiệp Xem qua hình (file đính kèm) để biết các data cần thu thập (vùng khoang đỏ)

Team mình ở Huế cần tuyển: 01 Database Engineer * Yêu cầu: - Phân tích và thiết kế cơ sở dữ liệu. - Có kiến thức với các hệ thống: Oracle, SQL Server, chủ yếu làm việc với MySQL. - Có kinh nghiệm viết procedures, functions, views. - Biết cách tối ưu SQL & dùng indexes hay partitioning. - Có kinh nghiệm cài đặt, quản lý, nâng cấp, sao lưu hệ thống cơ sở dữ liệu lớn. - Có kinh nghiệm làm việc với Linux và shell scripting. Công việc lâu dài, tính bằng năm, có thể full-time hoặc part-time Rate mong muốn: $5-$7/h

1. Viết WEB api đơn giản cho phép nhập URL, phân tích để lấy dữ liệu (crawl / Parse data) một số field đã định nghĩa sẵn. Lưu về DB riêng nếu chưa có hoặc cập nhật. VD: Gọi API truyền tham số đường dẫn trang sp trên tiki API se load DOM, đọc và trả về tên SP, giá, discount nếu có 2. Viết 1 trang admin đơn giản cho phép định nghĩa các domain cùng các trường cần lấy dữ liệu tưng ứng trên mục 1. Các field gồm: - URL - product name - Price - Discount - Discount code - Free Shipping ----------------------------------------------------- Sẽ có design hỗ trợ các màn hình. Cắt html nếu cần.

- Web crawl certain ecommerce websites - Obtain data on certain products, which can be filtered by categories such as supplier, price range...

Sử dụng SQlite3, có hình ảnh mô tả

...giây. Website dùng VPS như sau: CentOS 6.8 + nginx + mysql (mariadb), 1-2 cores CPU, 2-4 GB RAM, ổ cứng SSD Mã nguồn website: Wordpress + tool quét tin WP Content Crawler Qua tìm kiếm trên google mình thấy nhiều nơi khuyên website dữ liệu lớn cần tách database làm 2 phần: đọc và ghi riêng Vậy, theo mình công việc sẽ là tách database thành 2 phần riêng: phần đọc và ghi riêng để tăng tốc độ tải trang Hoặc bạn có thể đề xuất phương án xử lý dữ liệu và mã nguồn kiểu khác để tăng tốc độ tải trang xuống dưới 3 giây, giữ nguyên cấu hình vps do ngân sách của khách...

Như title, mình cần 1 bạn viết game như Yêu cầu: + Có giao diện (như tiki, hoặc tùy chỉnh bắt mắt thì tốt) + Có tương tác API cho ra kết quả (random hoặc control bằng database càng tốt) + Viết bằng asp.net MVC

Tôi cần sửa một trang web Mình đang cần thu thập thông tin một vài website thương mại điện tử Ai có khả năng crawl dữ liệu tốt thì pm mình nhé Mình ở Hà nội

hiện mình cần một người code giỏi về web lấy dữ liệu về cho mình theo yêu cầu, ai làm được pm nhé mình ở times city [Removed by Freelancer.com Admin]

Mình cần lấy dữ liệu bảng kèo bóng đá của trang , Cần tuyển bạn nào có kinh nghiệm về curl , crawl...

Mình cần lấy dữ liệu bảng kèo bóng đá của trang , Cần tuyển bạn nào có kinh nghiệm về curl , crawl...

Mình cần tìm 1 freelancer tay nghề cứng và làm việc chuyên nghiệp (Làm việc tốc độ, chuyên tâm vào dự án, đúng deadline Demo : - Yêu cầu : + Thành thạo Curl scan/get dữ liệu, Crawl....

#1: #2:

...CÓ GÌ LÀ KHÔNG THỂ BÁN ĐƯỢC -- LƯU Ý: Bất kỳ Chi nhánh ngân hàng nào cũng rất cần Diamond Database này vì 2 mục đích: 1. Tăng số lượng khách hàng sử dụng nhiều sản phẩm dịch vụ ngân hàng và tăng Lợi nhuận + 2.. Tự bản thân ngân hàng check Credit Scoring cho mỗi khách hàng vay tiền để giảm thiểu TỐI ĐA Rủi ro cho vay để được ĐÁNH GIÁ TỐT VÀO KẾT QUẢ KINH DOANH CUỐI NĂM VÌ ĐIỀU NÀY ẢNH HƯỞNG ĐẾN THƯỞNG KẾT QUẢ KINH DOANH CỦA CẢ CHI NHÁNH. -- Bạn hãy đề cập tới 2 vấn đề này với người bạn trực tiếp tư vấn với tính thuyết phục cao, và nhớ rằng đây là V...

Xây dựng website mạng xã hội tương tự như zing, hoclamgiau, facebook,.. bao gồm các tính năng chính: - Thanh toán online - Đánh giá thành viên - Crawl dữ liệu - Tạo nhóm - Admin - Quảng cáo - Đăng ký / Đăng nhập - Chat giữa các thành viên - Bảng điều khiển - Tìm kiếm - Lưu cache - Một số tính năng khác Yêu cầu xử lý được bài toán db lớn (1 - 2 triệu bản ghi ), người vào nhiều (10.000 người trong năm đầu), và tìm kiếm - trả kết quả nhanh - Lưu lại lịch sử tìm kiếm

Phân thích thiết kế website theo ý tưởng đề ra Hỗ trợ viết tài liệu cho dự án

I'm looking for a freelancer to assist me with data input tasks. The data to be inputted is sourced online, and it must be accurately and efficiently inputted into our system. Following data entry, the data will be used to update our database. Data Type: - Images - Text Requirements: - Min. 200 Full Described Entities per Week - Proficient in data input, especially sourcing from online databases - Skilled in database updating - Attention to detail to ensure data accuracy - Efficient and timely completion of tasks - Previous experience in similar roles would be beneficial

Application code to implement Roomio as a web application in python. You will use the table definition posted at the end of this document.

I'm looking for a proficient developer who can add a page to my website that interfaces smoothly with my MySQL database. The website already has formatting etc, so I'm not looking for that. The database stores a variety of exercise data, and the webpage needs to display this data in an intuitive and user-friendly manner. Key webpage features include: - Display of exercise data: Each exercise's description and its difficulty level should be displayed. There's also a column in the database containing YouTube URL links, so another important feature the webpage needs is the ability to watch these exercise videos directly from the webpage. It is a simple database with only one table. - Users should be able to select the exercise they want from ...

I'm in need of an experienced backend developer to create a mail parser with the following specifications: - **Email Protocol:** The mail parser should support SMTP, so proficiency in this area is a must. - **Primary Goal:** The primary function of this mail parser should be storing emails in a MySQL database. If you have experience with database integration, this would be a big plus. This project requires expertise in backend development, specifically with an understanding of how SMTP works. You should also be familiar with MySQL and have experience in integrating databases into applications. Please provide examples of similar projects you've worked on in your proposal. Thank you.

I need a VA with Wix store experience, a keen eye for detail, and proficiency in spreadsheet management. You'll be tasked with: - Keyword Optimization: Adjust the product titles on my Wix store to ensure they are optimized for search engines. Experience with SEO would be beneficial for this. - Database Creation: Develop a comprehensive database for all my products. This will include attributes like Product names, Product prices, and Product URLs. - Formatting: The database should contain separate columns for each product attribute. Strong organizational skills and experience with data entry would be ideal. Ultimately, the goal is to streamline the management of my product listings for a smoother business operation. Prior experience with Wix and creating pro...

I'm looking for a skilled individual who has a good understanding of Mechanical Engineering and Data Science to help me set up a database that records the live feed of on-board sensors in a car. Key Responsibilities: - Utilizing an On-Board Diagnostic Tool and an app to record the data - Implementing a database to store the collected sensor data - Analyzing the data primarily for predictive maintenance using statistical analysis Ideal Skills: - Mechanical Engineering background - Proficiency in working with On-Board Diagnostic Tools - Strong experience in statistical analysis - Knowledge of database management systems and data analysis tools - Experience in predictive maintenance is a plus This project requires attention to detail, analytical thinking, and the...

I am searching for a Product Analyst who can apply their knowledge towards data analysis, market research, and performance monitoring. Its a small assignment This assignment involves diving into a snowflake database to explore how customers behave. The goal is to find useful information that can help the Product team make decisions to make the business grow. After you uncover insights, you'll suggest changes to the product, like adding new features, making current features better, or even getting rid of features that aren't working well. You need to do the analysis, create graphs to show your findings, share all the code you used, and also come up with a plan for an A/B test to try out one of your suggested changes. Note: Its a short assignment, not spend more than tw...

...performing poorly with slow website loading times and database slowdowns, which is unacceptable as I regularly have more than 500 concurrent visitors. The primary focus of this project will be optimizing the server's Plesk settings, Postgres and MariaDB databases, and PHP 8.2 configuration. Key tasks will include, but are not limited to: - Configuring Plesk for optimal performance, including adjusting server pool size - Identifying and implementing improvements to Postgres and MariaDB settings to reduce slowdowns - Tuning PHP 8.2 to enhance website speed and performance Ideal candidates for this project will have: - Proven experience in optimizing dedicated servers, particularly with Plesk and Almalinux - A solid understanding of database optimization, including ...

I am seeking a detail-oriented freelancer who can expertly transfer text data from PDF files into a database. The ideal candidate should possess the following skills and experience: - Proficiency in working with PDF files - Expertise in data entry tasks - Experience in formatting and structuring databases - Excellent attention to detail Suitable candidates need to handle copious amounts of text data, accurately convert the text-containing PDF files into a structured and organized database. This includes careful validation to ensure no data is lost or misrepresented during the data entry process.

Hi Ashish, this is for the tasks I emailed about.

We have a website where the homepage currently loads slowly due to multiple API calls. Despite implementing asynchronous API calls, the page load time is still not meeting our target. We are looking for a skilled developer to optimize the homepage to load within 1 second. we need some one who can : Optimized homepage that loads within 1 second. Cron job implementation for fetching and updating api data of tokens price/5%/24%//etc basically - i want to load data everything from DB only , rather than multiple api calls. thakns

I am looking for...Oracle DBA with experience in both Oracle RAC (Real Application Clusters) and standalone Oracle databases. The primary goal of this project is performance tuning. Ideal Skills and Experience: - Proven experience with Oracle RAC - Proven experience with standalone Oracle databases - Specialization in performance tuning - Familiarity with Oracle Database 19c Key Responsibilities: - Implementing performance tuning strategies - Monitoring and optimizing database performance - Troubleshooting issues related to performance - Ensuring the smooth operation of both RAC and standalone Oracle databases The ideal candidate should have a deep understanding of Oracle databases and be able to provide tailored solutions for enhancing performance on both Oracle RAC and s...

...skilled developer who can build a customized matchmaking database for my internal use. The database will primarily focus on matching investors to investment opportunities. Key Features: - Storing Match Preferences: The database should be able to store various match preferences including minimum/maximum investment, minimum/maximum funding amount, geographical preference, and the type of funding. - User Authentication: As this database will be for internal use only, the user authentication should be secure and limited to specific staff members. No external user authentication is required. - Search Criteria: The database should have search functionality based on the geographic location. Ideal Skills: - Proficiency in database management ...

I'm seeking a proficient individual for constructing an Access database for my project. The principal requirements include: - Experience with Access, as that's the selected database management system. - Expertise in data storage and retrieval is essential. - The database will be storing textual and numerical data. Experience in handling these types of data is crucial. Ideal skills would include an in-depth understanding of Access, database design, data storage/retrieval techniques and knowledge in handling both textual and numerical data. This should make for a streamlined and efficient process. I'm excited for us to kickstart this project together!

The database is on the National Environmental Agency's website, and it includes all of the applications submitted for environmental permits. Here is a link to the database: Please go over all of the records, and filter ones that match all criteria: 1. EIA Screening Application/Statement or EIA Scoping Application/Statement and 2. The application is for an activity in the sea Start a new spreadsheet, and for every such record, meeting the above criteria, add a row to the spreadsheet including: date of the record, screening/scoping, title of the application (translated to English), a url linking to the application on the NEA website. In addition, download the screening/scoping report document, translate it to English with Google translate

We would like to hire a freelancer expert in development of Postgres Database and Synchronization of Data from our Headquarter to our Multiple Area Office (10 No.) and to Multiple Local PC (Around 300 Nos.) locations available in Network.

We have attached the details we need to sync our data from Headquarter to Area Office and than to local PCs and back again. for RFID based application.

i have a form created with HTML and PHP. user has to fill in information and when press submit, it should insert infos in database. But sometimes it doesn't it just clear or keep loading. maybe connection is not good everytime. So i need someone to adjust it to upload data in realtime. as soon as user finished typing in 1 field, it should store data. when uploading, it should show loading icon near input field. if succeed, green vink icon. if not, red cross icon. when user finish, user can click submit button which will echo all data stored in mysql database on same page in lightbox. image attached. Budget is $35. if you want more, please do NOT bid. budget is $35

My WordPress site hosted on AWS is currently down due to a database connection issue. Key requirements: - **Database Connection Issue**: The site is throwing an 'Error establishing a database connection' message. I believe this is related to database connection details in the WordPress configuration file. If you are experienced with AWS and WordPress, this could be a quick fix. - **Backup Restoration**: I have a recent backup of the site. However, I'm not confident about the database connection details in the configuration file. Restoring the backup and ensuring the database connection works correctly is crucial. - **AWS and WordPress Expertise**: Ideal candidates should have experience with both AWS and WordPress. Familiarity wi...