应用程序自动搜索和抓取网站
问题描述:
我应该使用哪个应用程序自动访问网站以收集信息?应用程序自动搜索和抓取网站
基本上我有一个数据库,为我完成计算;但是我必须手动从网站收集参数并将这些参数输入到我的数据库中。
我想什么是有一个应用程序,将做到以下几点:
- 我进入一个产品的名称,
- 应用程序访问网站,使用网站的搜索功能来查找的信息产物,
- 应用程序会下载在该产品的某些信息,
- 它该信息执行计算,然后
- 显示那些CALCULAT的结果离子对我
这是有点超出我的深度,但我愿意学习,无论多么复杂的软件。
答
你不是在寻找一个数据库。您需要编写一个将从网页获取数据的应用程序,然后将这些数据填充到数据库中。 即您需要构建“爬虫”或“刮板”,然后将结果放入某些数据库(如MySQL)中。
+0
嗨Chris 构建“爬虫/刮板”应用程序应考虑哪些软件? – Alec 2010-05-03 15:46:30
此网站是关于软件开发,不一定选择/使用软件。你可能最好在[su]问这个问题。 – BryanH 2012-11-27 21:31:31