1

Customer Review Data at Rakuten Ichiba

Rakuten Institute of Technology

Rakuten, Inc. http://rit.rakuten.co.jp/rdr/index.html

2

Rakuten Data Release

Open Innovation� Contribute to the academia by releasing data

� Obtain new ideas from various point of views

3

Rakuten Data Release

• Released in 2010

– Ichiba product data (about 50 million products)

– Travel facility data (11,468 facilities)

– Travel customer review data (350,000 reviews)

– Gora facility data (1,669 golf facilities)

– Gora customer review data (320,000 reviews)

• Released in 2011

– Customer review data (16 million reviews)

http://rit.rakuten.co.jp/rdr/index.html

4

Current Status

• Acquisition

– Open to universities and public research organizations

– Applied and acquired via NII and ALAGIN

• Affiliation, position, research purpose are required

• Application and Publication

– 62 applications from universities and public research

organizations (October 11, 2011)

– 14 papers has been written (April 19, 2011)

– 10 poster presentation at Rakuten Data Challenge

(the 3rd Rakuten R&D Symposium, 2010)

5

Customer Review at Rakuten Ichiba

Write product review

Write Shop review

6

Data Specification

• Collected period

– Jan 2010 ~ Dec 2010

• Data Size

• Additional information

– Can be obtained by Rakuten API

• http://webservice.rakuten.co.jp/api/

• Genre ID

• Product Ranking

• …

# of reviews # of product page # of unique user # of shops # of genres

16,606,181 3,855,021 2,872,874 39,885 30,879

7

Data Format

Field Name Field in Japanese Value type

User id 投稿者ID Integer (Masked)

Price 商品価額 Integer

Buy_flag 購入 0:購入していない｜1:購入済

rating 評価ポイント 1|2|3|4|5

Open_flag 公開有無 0:プロフィル公開｜1:プロフィル非公開

Age 年齢 Integer

Gender 性別 0:Male | 1:Female | 2: Unknown

Use 商品の使いみち イベント|おもたせ・ギフト|ビジネス|プレゼント| 実用品・普段使い|

趣味

Object code 商品を使う人 家族へ|仕事関係へ|子供へ|自分用|女性（彼女、妻）へ|親戚へ|

男性（彼、夫）へ|友人へ

Frequency 購入した回数 初めて｜リピート

Genre id 商品ジャンルID Integer

Product name 商品名 String

Product page URL 商品URL String

Shop name 店舗名 String

Review title レビュータイトル String

Review contents レビュー内容 String

Registered time レビュー登録日時 yyyy-mm-dd h:m:s

8

Review vs. Reviewers, Products, Shops

Review - Reviewer Review - Shop Review - Product

All distributions obey power-law

Some abnormal distributions appeared

9

Review vs. Rating

60% of reviews have a rating of 5

(Same as Amazon.com review [Jindal and Liu, WSDM08])

Rating # of Review %

1 280,337 1.69%

2 315,617 1.90%

3 1,373,792 8.27%

4 5,007,154 30.15%

5 9,629,281 57.99%

Total 16,606,181 100.00%

10

~20's

3%

20's

22%

30's

40%

40's

24%

50's

8%

60's~

3%

male

39%

female

61%

unknown

0%

Reviewers vs. Users

male

67%

female

33%

~20's

7%

20's

25%

30's

30%

40's

20%

50's

12%

60's~

6%

Ge

nd

er

Ag

es

Reviewers Ichiba Users

Distribution of

Reviewers and users

are different

11

Open Problem: Aspect Extraction

程程程程よいよいよいよい硬硬硬硬さでしっかりしていてさでしっかりしていてさでしっかりしていてさでしっかりしていて安定感安定感安定感安定感ありありありあり寝心地良寝心地良寝心地良寝心地良いですいですいですいです....

迅速迅速迅速迅速にににに配送配送配送配送してしてしてして頂頂頂頂いたいたいたいた点点点点もももも満足満足満足満足してますしてますしてますしてます....

迅速迅速迅速迅速にににに配送配送配送配送してしてしてして頂頂頂頂いたいたいたいた点点点点もももも

満足満足満足満足してますしてますしてますしてます

Comment on the shop

Extract comments on various aspects from one review

程程程程よいよいよいよい硬硬硬硬さでしっかりしてさでしっかりしてさでしっかりしてさでしっかりしていていていていて安定感安定感安定感安定感

ありありありあり寝心地良寝心地良寝心地良寝心地良いですいですいですいです

Comment on the item

12

Open Problem: Word Sense Disambiguation

以前グレーとオートミールオートミールオートミールオートミールを

購入して部屋着＆防寒によさ

そうだったので、ブラックをリピ

しました。

オートミールオートミールオートミールオートミール

ブラックブラックブラックブラック

グレーグレーグレーグレー Color

Categorize the same word into various categories

あさごはん、ひるごはんに

薄切りにしたりんごとレーズン、

牛乳、はちみつとオートミールオートミールオートミールオートミール

をボールに入れて、レンジで数

分。

オートミールオートミールオートミールオートミール

レーズンレーズンレーズンレーズン

牛乳牛乳牛乳牛乳

はちみつはちみつはちみつはちみつ

Food

13

Open Problem: Causality Extraction

みなさんのおすすめを読んでこち

らに決めました。三番目の子供

ではじめてネットで購入してみまし

た。

みなさんのおすすめをみなさんのおすすめをみなさんのおすすめをみなさんのおすすめを読読読読んでんでんでんで

Purchase reason

安価なので、購入しましたが…底

は２つ折りにされて跡がついたま

ま、角はポロボロにはげていて、しわ

による生地の浮きが目立ち…赤い

ペンのしみもあります

底底底底はははは２２２２つつつつ折折折折りりりり

跡跡跡跡

角角角角ははははポロボロポロボロポロボロポロボロ

赤赤赤赤いいいいペンペンペンペンのしみのしみのしみのしみ

Dissatisfaction reason

Find reasons of purchase and customer satisfaction

14

Open problem: Quality Evaluation

Product1

Product2

生地がさくさくしてとても

おいしかったです。

甘すぎず、子とものため

にもよさそうでした

Reviewer 1

Product1 おいしかったです。

Product2 おいしかったです。

Product3 おいしかったです。

Highly credible reviewer Lowly credible reviewer

Evaluate quality of reviews and reviewers

Product Review Product Review

レビューをみて

買いましたが

レビューをみて

購入しました

レビューが良かっ

たので購入High quality review

Time elapsed

Reviewer 2

15

Challenges

BigScalability for various services

Scalability for distributed servers

MessyRobustness to ambiguous expression

Robustness to noisy data

DiverseSensitivity to context

Sensitivity to time

16

Thank you!For more information of Rakuten research

Please join R&D Symposium & Tech-Conference

2011.11.19 (SAT)

http://tech.rakuten.co.jp/rtc2011/

http://rit.rakuten.co.jp/conf/rrds4/

17

18

Reviewers

0

200000

400000

600000

800000

1000000

1200000

~20 20 30 40 50~

Nu

mb

er

of

Re

vie

ws

AGE

Unknown

Female

Male

19

User Behavior Analysis

PurchaseUser , Product Review

Review Purchase

Review

Purchase

User , Product

User , Product

User , Product

Analyze purchase-review behavior model

20

Open Problem: Review Credibility

黒とナチュラルブラウンを購入しました。

ケースも保管に便利そうだし商品は長す

ぎず短すぎず使いやすい感じです。

こういうのって、なんだかとってもお

得感ありますよね。

Contains much information

Lowly credible Review

Product1

Product2

Evaluate credibility of reviews and reviewers

Highly credible Review

Contains little information

生地がさくさくしててとて

もおいしかったです。

甘すぎず、子とものため

にもよさそうでした

User1

Product1

User2

おいしかったです。

Product2 おいしかったです。

Product3 おいしかったです。

Various reviews by one user Same reviews by one user