投稿者: sho

前回のAPIを利用して、Yahoo ! Japan の「ビジネスと経済」配下のカテゴリID、カテゴリ名を取得しました。全部で９、０５７カテゴリとなりました。（あってるかな？）約１時間かかりました。
プログラムは、PHPで、関数を再帰呼び出しにして、GETしたのですが、カテゴリLINKを参照した時、再度、同じカテゴリLINKが存在することがあり、結局無限LOOPでおバカなことをやってしまった。。
カテゴリLINK配下は探索しないようにしてOKとなった。現在生データのままで、カテゴリID階層とカテゴリ名の紐付けを作成中。
その後、ODPのビジネスディレクトリとのカテゴリ自動リンクを作成するかもしれない。（未定）

さて、昨日も、http://stest01.dev.yahoo.co.jp:10080/cmtool/workingtable.
php?command=Update&page=4&status=109&code_ｘｘｘｘｘｘｘｘ=100&…以下IDが２０個ほど続くリファラーが残っていた。
ｘｘｘｘｘｘｘｘは、カテゴリIDだと思われるのですが、これをカテゴリ名にAPIで変換してみて調べてみても、www.picolix.jpとは何の接点もございません。Yahooさん、なんなのでしょうか？

Yahoo! Japanから「Yahoo!カテゴリWebサービス」なのが2/28にリリースされていたのですね、知らなかった。
yahooからいろんなAPIが出ていますが、過去、特に使って見たいとは思わなかったのですが、「このYahoo!カテゴリWebサービス」はComSearch企業検索で利用価値がありそうかも。
現在、ComSearch企業検索は、Google map APIを使って、上場企業住所からMAPを生成しています。
例）
ヤフーのGoogle MAP
で、この「Yahoo!カテゴリWebサービス」に気づいたのは、http://stest01.dev.yahoo.co.jp:
10080/cmtool/workingtable.php?command=Update&page=4&status=109&code_2078361141=
100&code_2078308363=101&code_2075127796=100&……
というような、アクセスログが残っており、何かなと思って調べ回っていたのですが、（結局不明）
http://developer.yahoo.co.jp/category/browse/V1/browse.htmlを見ると、
code_以下の数字は、YahooのカテゴリIDだということがわかりました。
このIDから実際のYahooディレクトリを導くには、
http://api.dir.yahoo.co.jp/Category/V1/Category?appid=100010001&id=2077241654
というようにします。
（appid=100010001は、自分の登録IDです。）
そこで、自分のwww.picolix.jpは、いつYahoo! Japanのカテゴリに登録されたかを調べてみると、
http://api.dir.yahoo.co.jp/Category/V1/Category?appid=100010001&path=/Computers_and_Internet
/Software/Internet_and_Networking/Internet/Picolix/
↑のレスポンスは、
<Item>
<Type>site</Type>
<Title>PicoLixホームページ</Title>
<JTitle>PicoLixほーむぺーじ</JTitle>
<Url>https://www.picolix.jp/</Url>
<ClickUrl>http://srd.yahoo.co.jp/API/appid=100010001
/SS=2078426751/SIG=10rtde58h/*-http%3A//www.picolix.jp/</ClickUrl>
<Summary>Webページの画像キャプチャー、送信専用メーラー、Pingユーティリティ等の配布。</Summary>
<Created>19980210</Created>
<New>0</New>
<Cool>0</Cool>
</Item>
で、1998年2月10です。（当時は、プロバイダーのURLで、後でwww.picolix.jpに移転しました。）
1998年ってもう６年も前ですね。

ComSearchプレスリリースを始めました。
アート関連・芸術関連～IT関連まで各種発表のプレスリリースにお使い下さい。無料記載致します。
団体、SOHO、企業、個人の方でもご利用いただけます。
http://search.picolix.jp/release/

http://img.simpleapi.net/
よくできています。
フラッシュとかも取れますし、フレームも大丈夫なようです。別枠で、ポップアップ、ダイアログＢＯＸが表示されるであろうサイトもちゃんととれています。（サーバ側はどうなっているのか興味があるところですが。。）サーバはＬｉｎｕｘ系で、Geckoエンジンでしょうか？
当方は、Windowsでコマンドラインで、Crenahtml2jpgを作成してこれを、perlスクリプトで動かして、スケジュールに組み込んで、月１回、３万サイトのサムネイルを自動取得しているのですが、負荷と時間がかかりますので、同時複数処理しています。
Ｌｉｎｕｘ系での作成も考えたのですが、Ｘ関連が必要で、また正しく全てのサイトが取れるか自信がなかったので、Windows系＆コマンドライン対応で作成しています。
このようなサーバＡＰＩはだれしも検討したことがあると思うのですが、人気サイトになるととてつもない負荷がかかり、私個人のレベルでは、到底対応できなのであきらめていたのですが。。
がんばっていただきたいところです。

プログラマーな人なら、このＡＰＩを利用して一気に数万サイトのサムネイル取得したいと思う筈ですし。（現に許されるのなら、スクリプトを組んで取得してみたいです。）

コンテンツマッチ広告のブレイナーを利用してみました。
登録申請して、３０分ぐらいで許可メールがきました。(早いです！）
早速ComSearchトップに貼って見たのですが、ビジネス系ではマッチした広告は出ません。情報商材関連ばかりの広告で、過激なタイトルの広告もあります。
やめようかなと思いましたが、コンテンツマッチ広告をXMLで取得できるAPIが公開されており、これを利用すると必要とするキーワードで、ＸＭＬで広告データを取得できます。
早速、キーワードツールを自作し、どんなデータがあるか探し、広告を表示させるようにしました。
レイアウト自由で結構いいです。
難点は、私が欲しいと思うキーワード（ビジネス関連）でヒットする広告主が少ないということです。
この点、広告主が増えて、キーワードも増えれば、十分使えそうなので、期待したいです。
広告単価は、Google adsenseには及びませんが、まずまずです。

googleの検索結果を記載した方法のリファラースパムがやたらにくるようになった。
リファラーが、http://www.google……&q=xxxxxでxxxxxに該当の商品（アダルト）が記載されているもので、これを検索して、そのTOP1がアダルトサイトというわけです。アクセスログに残るだけなら放置するのですが、当方、検索キーワードをログから毎日収集し、その結果を配信しているので非常に困りものです。
http://search.picolix.jp/index.rdfで、アダルトキーワードを弾いても、またあらたな商品（ビデオのタイトル？）
が発表され新たなキーワードが発生し、いたちごっこになり、しょうがないので、その検索パターン全部を弾くようにしました。今のところ有効。

「コンテンツの量が少ないページに Google 広告が掲載されている」の修正対応結果の返信メールが、本日14:04に来ていました。
「Google のポリシーに従って、お客様のアカウントに必要な変更を加えていただきありがとうございました。」
とのことで、修正は受け入れられたようです。やれやれ、修正方針は合っていたようでほっとしました。
プログラムで、基準に達しなかったページはAdsenseを貼らないようにしたのですが、どれだけのページで剥がれたのか当人も不明です。。
剥がす前と後でクリック率や収益の差はそれほどないようなので、無駄に貼っていたということですね。
前回の修正以外に、ついでにwww.picolix.jpのBBSとか、本ブログでは収益がほとんどないのでAdsenseは外しました。
当方のように自動生成すると、コンテンツ量不足のところにAdsenseを貼ってしまうということは多々あります。（Adsenseのプレミアムでない有名なサイトでも同様なことが発生しています。）
またブログでも、１行のリンク紹介だけに終わっているところにAdsenseを自動挿入すると、
その個別のエントリーでは、コンテンツがないところにAdsenseを貼ってしまうということになってしまい
注意が必要です。

以下、コンテンツ量の不足していると思われるページとOKなページの一例です。
コンテンツ量不足ページ

＝＞Adsneseは貼らない
コンテンツ量OK
＝＞Adsenseは貼る

Googleさんから本日１８：５０、Adsenseの規約違反
「お客様のアカウントを確認しましたところ、Google 広告の掲載方法が、次のプ
ログラム ポリシーに違反していることが確認されました。」とメールが着ました。（；_；）
まじですか？？？
違反内容は、
「コンテンツの量が少ないページに Google 広告が掲載されていること」　とのこと。
ん~、どの管理サイトのどのページなのか。すぐに思いあたったのは、ＣｏｍＳｅａｒｃｈのhttp://search.picolix.jp/dmoz/に貼っているページですが、この配下のカテゴリーは１０００ページ以上あり、コンテンツが乏しくリンク形式だけになっているところが少々あり、それらをすべて探しだし、手動で外すとなると大変なことになります。。。
幸い、このページは、内部的にはＰＨＰで動作させているので、各ページで、サイトデータがない場合＝コンテンツが少ないと判断して、Ａｄｓｅｎｓｅを表示しないようにプログラムを修正し、修正完了メールをGoogleに出しました。（結果待ちです。）
これでもだめなときは、サイトデータが２つ以下の場合も表示しないように修正するつもりです。

２年とちょっとAdsenseをやってきたのですが、GoogleからAdsense「プログラム ポリシー違反」が着たのは初めてです。メールには、定期的に審査していると記載されていました。
たぶんコンテンツ量は、プログラムで自動判断しているのでしょう。メールが着たらまた報告します。
アカウント停止だけは避けたいです。

楽天が運営する楽天広場は、ソーシャルネットワークサービス（SNS）「楽天広場リンクス」を3月27日より開始する。利用は無料だが、既存ユーザーからの招待が必要。 [BroadBand watch]
個人SNS～大きなところまでどこもかしこもSNSですね。ユーザの囲い込みにはもってこいか？
楽天
楽天 http://search.picolix.jp/search/4755.html
楽天所在地
楽天って

ＮＥＣが「ＢＩＧＬＯＢＥ」を分社化へ、通販など展開
　ＮＥＣが、自社で運営しているインターネット接続サービス「ＢＩＧＬＯＢＥ」（ビッグローブ）を分社化することで最終調整していることが２３日、明らかになった。
　新会社はＮＥＣの子会社として設立するが、住友商事や大和証券、広告代理店など５社も約１３０億円を出資する予定だ。[Yahoo ! Japan News]
NEC
BIGLOBE
NEC http://search.picolix.jp/search/6701.html
NEC所在地
BIGLOBEって