我注意到 Google 删除了 Google App Engine 的 Finance API。我想要的只是一份他们在 Google 财经投资组合中的股票代码清单。鉴于 API 已被删除，有什么方法可以从最终用户的投资组合中提取这些数据？鉴于我知道登录名和密码（例如，它是我自己的），我正在尝试手动检索它。
有没有办法通过curl手动检索它，通过登录谷歌服务？似乎应该可以登录并转到我的投资组合页面，检索源。
我尝试了以下代码：
#!/bin/bash
function ClientLogin() {
read -p 'Email> ' email
read -p 'Password> ' -s password
local service=$1
curl -s -d Email=$email -d Passwd=$password -d service=$service https://www.google.com/accounts/ClientLogin | tr ' ' \n | grep Auth= | sed -e 's/Auth=//'
}
function GetFinance() {
curl -L -s -H "Authorization: GoogleLogin auth=$(ClientLogin finance)" "http://www.google.com/finance/portfolio?action=view&pid=1" &> output.html
}
GetFinance
但是，这段代码只检索一个告诉我登录的页面。解决方案不需要使用 curl，但它必须是使用某种脚本语言的自动检索。
感谢 x4avier，我了解了 casperjs，并且能够编写一个快速脚本来加载 Google 服务登录页面，输入用户名和密码，然后获取 Google Finance 投资组合。我确信这适用于任何其他谷歌服务和页面。我将投资组合的html保存到portfolio.html。希望这对其他人也有帮助。
var fs = require('fs');
var failed = [];
var links = [
"https://www.google.com/finance/portfolio?action=view&pid=13"
];
var casper = require('casper').create({
verbose: true,
logLevel: 'debug',
pageSettings: {
loadImages: false, // The WebPage instance used by Casper will
loadPlugins: false, // use these settings
userAgent: 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_5) AppleWebKit/537.4 (KHTML, like Gecko) Chrome/22.0.1229.94 Safari/537
}
});
// print out all the messages in the headless browser context
casper.on('remote.message', function(msg) {
this.echo('remote message caught: ' + msg);
});
// print out all the messages in the headless browser context
casper.on("page.error", function(msg, trace) {
this.echo("Page Error: " + msg, "ERROR");
});
var url = 'https://accounts.google.com/ServiceLogin?service=finance';
casper.start(url, function() {
// search for 'casperjs' from google form
console.log("page loaded");
this.test.assertExists('form#gaia_loginform', 'form is found');
this.fill('form#gaia_loginform', {
Email: 'youraccount@gmail.com',
Passwd: 'yourpass'
}, true);
});
casper.each(links, function(casper, link) {
this.then(function() {
this.test.comment("Loading " + link);
start = new Date();
this.open(link);
});
this.then(function() {
var message = this.requestUrl + " loaded";
if (failed.indexOf(this.requestUrl) === -1) {
this.test.pass(message);
fs.write('portfolio.html',this.getPageContent(),'w');
}
});
});
casper.run();