一位朋友想开始为他希望我尝试构建的数据量大的网站抓取数据。我是一名(相对较新的)Rails 开发人员,对这一切的数据方面知之甚少。如果他将抓取外包出去,是否知道一旦我启动了站点,我可以/应该以哪种格式获取数据以便轻松地将其导入 PostgreSQL 数据库?
希望这不是一个太模糊的问题。我不知道从哪里开始寻找这个。
一位朋友想开始为他希望我尝试构建的数据量大的网站抓取数据。我是一名(相对较新的)Rails 开发人员,对这一切的数据方面知之甚少。如果他将抓取外包出去,是否知道一旦我启动了站点,我可以/应该以哪种格式获取数据以便轻松地将其导入 PostgreSQL 数据库?
希望这不是一个太模糊的问题。我不知道从哪里开始寻找这个。