Search apiでurlを含むツイートが取得できなくなっています

[h_oshiro]

search apiを利用してurlを含むツイートが取得できなくなっております。
確認できた日付は12/14からです。

例えば、Twitterのwebページにて
#テストurl含む
で検索すると、urlが含まれるツイートが検索されておりますが、
api（https://api.twitter.com/1.1/search/tweets.json?q=%23テストurl含む）で取得しても
urlが含まれるツイートはレスポンスに含まれておりません。

これまで通り、urlが含まれるツイートを取得する手段はないでしょうか？
ご教示いただけますと幸いです。

[JBabichJapan]

@h_oshiro さん、お問い合わせありがとうございます。普段広告API周りを担当してるものですが答えさせていただきます。

twurlっていうツールでこの問題を再現できますか？今こういう風に叩いてみたら、一応結果が返ってきます：

twurl -H api.twitter.com "/1.1/search/tweets.json?q=https://www.twitter.com&result_type=recent" ｜jsonpretty

このエンドポイントの結果は、基本的にそのresult_typeを合わせてサイトの検索機能と同じ結果が返ってきますので「前結果ありましたが、今はありません」っていうクエリがあればその観点でも検討できます。

[h_oshiro]

回答ありがとうございます。

再度確認いたしました。
こちらのハッシュタグ（#テストurl含む）で検索するとwebでは取得できますがAPIでは取得できません。
twurlでは以下で試してみました。

twurl -H api.twitter.com “/1.1/search/tweets.json?q=%23テストurl含む” ｜jsonpretty

ツイート内容にurlが含まれているものは取得できないようなのですが、
リクエストの仕方に問題あるのでしょうか？

[JBabichJapan]

@h_oshiro さん、返事が遅れて申し訳ありません・・これちょっと調べてみましたが、ハッシュタグの%23がtwurlだとダブルエンコードされてるようです。それを確認するように、twurlに「-t」っていうオプションで呼ぶとリクエストの中に%2523みたいになります。現在は、テスト用のページが返ってこないけど、別の日本語のハッシュタグに変えてみたら結果が返ってきますので直近のツイートしか返ってこないっていう理由で返っていないと思います。

[h_oshiro]

回答ありがとうございます。

再度同じハッシュタグ（#テストurl含む）にて投稿してみました。

shiroihito (hitoshi19)

ハッシュタグマークがダブルエンコードとのことでしたので以下に変更して試してみましたが、
やはり取得できませんでした。
twurl -H api.twitter.com -t “/1.1/search/tweets.json?q=#テストurl含む”

御社で取得が確認できたハッシュタグがあれば教えていただいてもよろしいでしょうか？

[JBabichJapan]

@h_oshiro さん、このエンドポイントの仕組みでは残念ながら全てのツイートが入ったインデックスではなくて一部のみとなります。その理由で絞れるはずのキーワードで検索しても、インデックスに入っていないためにヒットしないと思いますが、「#テスト」とか他のキーワードに変えたらいろんなツイートが返ってきました。

どういう基準によってなどは公開してる情報もあまりないかと思いますがテスト用みたいなツイートは入る可能性が低くなりますね・・全量データの話になりますと、エンタープライズのAPIのご紹介になります。

もしかして、ユーザーさんのあるツイートをピックパップしたいっていうニーズであれば、指定のハッシュタグをStreaming APIでずっと聞き取ることができると思います。それも全量ではないんですが、特に数が多くない時はちゃんと入ってくる認識です。

[h_oshiro]

早速のお返事ありがとうございます。

「#テスト」とか他のキーワードに変えたらいろんなツイートが返ってきました。

そうではなくて、私が困っているのはツイートの中にURLが含まれている場合、
対象ツイートが取得できないという問題です。

例えば、以下のようにツイートすると取得できますが、

#テストurl含む
これならいける

以下のようにすると取得できません。

#テストurl含む

Google

これは利用しているAPIに問題があるのでしょうか？

お手数ですが、ご回答をよろしくお願いします。

[JBabichJapan]

@h_oshiro さん、なるほどです・・二つのテスト用のツイートのうち、片方しか返っていない状態ですね・・（ウェブサイトから検索すると、二つ以上ですね・・）ちょっと改めて検討させていただきます。