Octoparse vs. Content Grabber comparison: which is better for web scraping?

As there are different web scrapers, a problem appeared: which one is the best custom scraper focused on our specific needs and scrape everything? Most off-the-shelf web scrapers are often quite generic and  mostly designed  to perform common and simple task  (refer to Top 5 Web Scraping Tools Review for more information). That’s to say, they may not appear to be as flexible and universal as you’d expect. So in this post, I will compare the web scraper Octoparse and Content Grabber to give you some insights before choosing the web scraping service that will serve you for a long time for data extraction. 

Features Comparison

Here is a form of the features comparison between Octoparse and Content Grabber:

So what could Octoparse and Content Grabber both do for you?

Octoparse offers most of the web scraping power and scale of Content Grabber in a much easier-to-use package. Content Grabber is designed to work at a higher level in which most of the features of Octoparse are bundled together. 

Both Octoparse and Content Grabber stand for the new visual web scraper on the market. They both have the simple-and-click UI where users browse the website and click on the data elements in the order of collecting them. 

Like a bot, they could follow the links to go into the deeper web pages by clicking the items and extracting the data on the other pages. They both offer API options, IP rotation and services to schedule extractors running in real time. Also, they are able to get data in CSV format and transform data by manually modifying Regular expression.

What’s more, they can be instructed to do more than just extract data. They have a variety of options to choose from, making it possible to get data from interactive websites. You can instruct them to scrape data from very complex and dynamic sites, because they can:

• Sign in to accounts
• Select choices from dropdown menus, pop-ups, hovers
• Search with a search bar
• Go to a new page simply by clicking on a "next" button
• Get data from infinitely scrolling pages and other dynamic webpages
• ...

This means that these two web scrapers can be as flexible and universal as you’d expect. They could deal with:

• Difficult tables, like merged tables, tables with indefinite number of columns, missing values and so on. 
• Difficult blocks layouts, especially those in which there is no direct HTML association among the data presented on a screen, like extracting all the products skipping advertisements, scraping discounted products only.
• Test list, when the HTML DOM structure is plain.
• Invalid HTML: unescaped characters, non-HTML tags, unclosed tags, unmatched quotes, missed spaces, invalid tag nesting.
• Scrape behind a login. Both scraper could submit a login form via POST, HTTP 302 Redirect outwork and cookie storing performance.
• CAPTCHA solving.

Both data extraction tools actually have a lot of functionality to extract all kinds of websites if you could fully explore their functionality. And as a fan of Content Grabber, I will recommend Content Grabber for a few situations:  

• Tight integration with existing python codebase and infrastructure via API
• Advanced debugging tool
• Third-party Captcha solution

We are working on solving the second issue to make Octoparse more humane. 

However, if you are starting out, we encourage you to try Octoparse which will get you up and running much faster and for free or with a much cheaper cost.

Cost Comparison

At first glance, the main difference between the two services appears to be their pricing. Octoparse packages capabilities into conventional software-as-a-service (SaaS) plans Free, Standard ($89) and Professional ($189). 

Content Grabber is a paid service. There are two purchasing methods for Content Grabber users, buying license and monthly subscription. The license version (three editions) outright gives you a perpetual license, pricing from $449 to $2495. The monthly subscription will charge upfront each month. There are also three editions pricing from $69 to $299. 

The big difference between Octoparse and Content Grabber premium plans is that there’s no limited license and users for Octoparse. That’s to say, more than one user could use Octoparse at different computers with the same premium account. Content Grabber is licensed per user per computer. This means you need a license for each computer where Content Grabber is installed, and if the computer is accessed by more than one user, you need a license for each user using the software on the computer. Also, one license does not cover both your desktop computer and your laptop, or both your office computer and your home computer. 

More details:

Octoparse Pricing

Content Grabber Pricing

You could see Octoparse free plan grants powerful functionality without defining how many web pages you could extract for one task. The higher version mainly offer more tasks and faster speed for more money and IP rotation. Also, only the premium plans enable you to schedule the crawlers and run the crawlers at a regular basis.

For Content Grabber, versions are different from different functionality: export function, API, self-contained agents, etc. The charging is also different for maintenance and support. 

If you don't want to learn how to use a tool and just want your data on demand, both Octoparse and Content Grabber provide data service extracting data for you. Just contact the sales of both companies and they will scrape data from the website you want.

Web Scraping Example

The video below would show you how to make a cralwer/agent in the web scraper Octoparse and Content Grabber. These two projects are both used to scrape the US yellowpages. Just click the link to dig out more details. 

Octoparse Project: https://www.youtube.com/watch?v=hSVjxElKIUc

Content Grabber Project: https://www.youtube.com/watch?v=vr-IggETB5Q

Conclusion: Octoparse and Content Grabber

Like the earlier comparison, Octoparse vs Content Grabber is somewhat of an apples-to-oranges comparison. Content Grabber is designed to work at a higher level in which most of the features of Scrapinghub are bundled together. If you are just starting out, we encourage you to try Octoparse which will easily get you up with free version or at a much lower cost. 

As a final note, if there’s something wrong with the information above, just contact me here.

More resources for web scraping reviews:

Octoparse vs. Import.io comparison: which is best for web scraping?

Web Scraping Service vs. Automatic Web Scraper: Which is the best option for web scraping?