Big Sky Tags::google app engine

2009/04/16

無料ではてなブックマークとdeliciousを同期する方法

はてなブックマークをdeliciousに同期する場合、どうやってますか？

同時ポストツール？
Plagger？
まさか、手作業？

同時ポストツールの場合、確かにその場で同時にポスト出来て便利ですね。でも携帯ではてなブックマークから登録した場合、同期されませんよね。 Plaggerだと、cronで動き続けるPCが要りますよね。家に24時間稼動可能なPC無いよ！なんて人いるかもしれません。
手作業？問題外！

先日、Google App Engineにcronが導入されました。

Google App Engine Blog: Seriously this time, the new language on App Engine: Java™

Cron support: schedule tasks like report generation or DB clean-up at an interval of your choosing.
http://googleappengine.blogspot.com/2009/04/seriously-this-time-new-language-on-app.html

つまり...

cronでイベント発生
はてなブックマークからRSS取得
内部のデータベースから既にポスト済みでないか確認
deliciousにポストする
モテモテ

って事で作ってみました。

mattn's hatenabookmark-meets-delicious at master - GitHub

post hatenabookmark to delicious periodically using google app engine
http://github.com/mattn/hatenabookmark-meets-delicious/tree/master

Google App Engineのアカウントを作成後アプリケーションを作成します。
app.yamlの

application: your_app_name
version: 1
runtime: python
api_version: 1

handlers:
  - url: /tasks/sbm-sync
    script: sbm-sync.py

  - url: /
    script: sbm-sync.py

  - url: /favicon.ico
    static_files: static/images/favicon.ico
    upload: static/images/favicon.ico
    mime_type: image/x-icon

  - url: /static
    static_dir: static

your_app_nameの部分を作成したアプリケーションIDに書き換えて下さい。次にmy-config.yaml.exampleをmy-config.yamlにコピーし

hatena_user : your_hatena_user
delicious_user : your_delicious_user
delicious_pass : your_delicious_password
timezone: JST
timeoffset: 9

あなたの、はてなブックマークIDとdeliciousユーザID/パスワードに書き換えて下さい。
あとはサーバにアップロードすれば10分毎に、はてなブックマークのRSSを取得してdeliciousに同期されます。

よろしければ使ってみて下さい。ソースはgithubにあるのでpatch welcomeです。

Posted at 14:09 in ソフトウェア::lang::python | WriteBacks (0)
Tagged as: google app engine, plagger
Bookmarks:

2009/04/08

Java on Google App Engine きたー！

きたー！

Google App Engine Blog: Seriously this time, the new language on App Engine: Java™
Today, we're very excited to announce the availability of a new programming language for Google App Engine. Please welcome the Java runtime!
http://googleappengine.blogspot.com/2009/04/seriously-this-time-new-language-on-app.html

で、最初はEarly Lockというサーバを更新出来ない状態だったけど何故かさっき「Lock解除したよ」のメールが来た。

<%@ page language="java" contentType="text/html; charset=utf-8" pageEncoding="utf-8" %>
<html>
    <head>
    <meta http-equiv="Content-Type" content="text/html; charset=utf-8" />
    </head>
    <body>
        Hello JSP!<br />
    </body>
</html>

ここで動いてます。

ちなみに、上の記事によるとGAEでCronが動かせる様になった。こっちの方が嬉しい人いるんじゃないかな？

Posted at 15:05 in web | WriteBacks (0)
Tagged as: google, google app engine, java
Bookmarks:

2009/02/16

Google App EngineでHigh CPUのエラーは出なくなる

さらに朗報は続く

Google App Engine Blog: The sky's (almost) the limit! "High CPU" is no more.

We're very excited today to announce that we've raised limits on several App Engine operations:

No more "High CPU Requests"! App Engine Apps were once allowed no more than 2 CPU-intensive requests per minute. We've made some adjustments to the way we handle requests, and have eliminated this limitation altogether. To learn more about how this works and the implications for your app, see our documentation.

Response deadline raised to 30 seconds. The amount of time an App Engine app can take to respond to an incoming request has been raised from 10 to 30 seconds! There are limits on the number of simultaneous active requests an application can process at any given moment--see our docs to learn more.

Size limits on code files, static files, and requests/responses raised to 10MB! App Engine apps can now receive requests and send responses of up to 10MB in size, and users can upload 10MB code and static files as well. Note that API requests (e.g. memcache.set(), db.put()) are still limited to 1MB in size.

http://googleappengine.blogspot.com/2009/02/skys-almost-limit-high-cpu-is-no-more.html

Google App Engineに1分あたり2CPU以上負荷を掛ける様なリクエストが許される事になりました。
またレスポンスのデッドラインが10秒から30秒にまで引き上げられました。
さらにコード、静的ファイル、および要求/応答におけるサイズ制限が10MBに引き上げられました(但しmemcache.set()、db.put()はまだ1MBに制限されています)。

これで例えば、デカいクエリを投げる様な処理でもエラーで落ちるって事が少なくなるんじゃないですかね。
もうすぐすると、Google App Engineでタイマ発動処理をサポートするという噂もあるので、よりインタラクティブな処理が作れるんじゃないですかね。

Posted at 10:44 in ソフトウェア::lang::python | WriteBacks (0)
Tagged as: appengine, google app engine
Bookmarks:

2009/02/10

Google App Engineでurllib,urllib2,httplibが使える様になった。

これは朗報。

Google App Engine Blog: SDK version 1.1.9 Released

You can now use the Python standard libraries urllib, urllib2 or httplib to make HTTP requests. This has been a frequent request on our issue tracker.

We've been working on a set of tools that will make the process of uploading and downloading data from App Engine applications easier. Today we're excited to announce an early release of our new bulk uploading client. You can try it out here. Let us know what you think in our Google Group!

Several updates to our datastore, including the automatic generation of single property indexes and the addition of IN and != operators to db.Query. See the Datastore API docs for more details.

A bunch of additional bugfixes and enhancements, listed in our Release Notes.

http://googleappengine.blogspot.com/2009/02/sdk-version-119-released.html

試しに以下の様なコードを書いて