SREチームの那須です。
3/7に開催されたピクスタさんの 大規模プラットフォームを支えるエンジニアの技術と工夫〜Web現場Meetup #3〜 で登壇させていただきました。そのときにお話ししたgrpc-gatewayを使った管理画面の構築について改めてまとめてみます
続きを読むSREチームの那須です。
3/7に開催されたピクスタさんの 大規模プラットフォームを支えるエンジニアの技術と工夫〜Web現場Meetup #3〜 で登壇させていただきました。そのときにお話ししたgrpc-gatewayを使った管理画面の構築について改めてまとめてみます
続きを読むこの記事は CrowdWorks Advent Calendar 2017 の21日目の記事です。
0. キックオフで年間アワードをいただきました!
1. クラウドワークスのユーザーサポートで困っていたこと
2. 人力の限界
3. 機械学習と教師データ
4. 効果効能
5. まとめ
ユーザーサポートとしては珍しく、弊社キックオフミーティングで年間アワードグランプリをいただきました。
(※キックオフ:年に一度の全社ミーティングです)
(※年間アワードグランプリ:その年の最優秀チームに送られる表彰制度です)
開発チームとユーザーサポートの融合について何かの参考になればと思い投稿します。
↓社内に掲載されたポスター
↓キックオフで表彰されたときの記念撮影
ユーザーサポートやカスタマーサービスのイメージといえば、
・クレーム対応
・問合せ対応
が一般的なイメージだと思われます。
ユーザーサポート業務をご存知の方は、上記に加えて、
・改善活動
・品質向上
もあるよ!という方もいるかもしれません。
うちのサービスでは更に、
・悪質案件の取り締まりと浄化作戦
が追加されます。
クラウドワークスのような多くのユーザを抱えるマッチングサービスでは、
一部の悪質ユーザーの標的にされ、悪質案件が手を変え品を変え投稿されるのを完全に防ぐことは困難です
(※悪質案件の定義は利用規約や仕事依頼ガイドラインに違反している仕事掲載)
直近一年の流行は、MLMです。
MLMはそれらの最新版でうちのサービスには今年の1月くらいから掲載され始め、
最盛期はGW前後でした。
1月から3月までは、人の目と、人の手で、悪質案件撲滅対応をしていました。
具体的には、目視でサービス上に悪質案件が無いか確認して削除をしていました。
が、4月には1月比5.7倍の件数で泣きながら必死で対応していましたが、
5月には1月比32倍、4月比5.6倍ともはや人力では無理なレベルになってしまいました。
↓大人の事情により件数は伏せますが、こんな伸びでした。
12月7日のアドベントカレンダーにもある通り、(下記URL参照)
ユーザーサポートでは開発チームにお知恵を拝借することにしました。
サポメンA:最近よく聞くAIだったら自動で悪質案件を取り締まれるんですかねー?
サポメンB:ちょっと開発メンバーに相談してみよ!
開発メンA:AIてのは無くて、機械学習を活用すればできるイメージですね。
開発メンB:ちなみに教師データありますか?
サポメンA&B:ポカーン
ご想像の通り、よくある文系のサポートと理系の開発メンバーの会話ですw
サポートメンバーもググって僅かな理解をし、これまで人力で悪質案件対応を行てっきた
実績データを教師データにすれば、なんとかなりそう!という理解ができました。
「AI」って言うと自動でなんでもできそうなイメージですが、そんなに世の中甘くないです。
ユーザーサポートにて人力で行っていた作業を「教師データ」にして、
悪質案件の自動検出をベイジアンフィルタで行うことが可能になりました。
具体的な内容は、 「うちのサービスに人工知能を使って何か面白いことやってよと言われた時に考えるべきこと」を参照ください。
この施策の目的ゴールは、「悪質案件をユーザーに見られないようにすること」すなわち、
「悪質案件PV数を減少させる」ことです。
結果、PV数は最盛期の12%まで減少できました。
↓いろいろな事情で数字は伏せますが、こんな減少グラフです。
ユーザーサポートに限らずサービスを運用しているチームは、
「運用でカバーしなきゃ」とか
「人力で改善してやる」とか
思っていますので、ぜひぜひ開発視点から
「こうやったら楽になるよー」とか
「自動化のアイデア事例でこんなんあるかもー」とか
言ってもらえると、ユーザーの「笑顔」を実現できると思います。
SREチームの那須です。好きな鉱物はダイヤモンドです。宝石の国は今期イチオシのアニメです。ダイヤモンドかわいい。
最近のことですがCrowdWorksにもSREチームというものが誕生しました。CrowdWorks の最近の取り組みについての記事でも取り上げています。
SRE とは Site Reliability Engineer の略でGoogleが提唱している概念です。主にサイトの信頼性向上や運用の自動化などインフラの仕事を、ソフトウェアエンジニア的な問題解決手法で行っていく人たちのことを指すようです。
そんなSREのチームが CrowdWorks にも誕生しました。自分はインフラの知見があまりないのですが、チャレンジとしてSREチームに加わり現在 CrowdWorks のインフラ周りと格闘しています。今回はそんなSREチームの背景や最近の仕事について書いていきたいと思います。
続きを読むこんにちは。クラウドワークス CTO の@akiray03です。 あっという間に年末が近づいてきて、いよいよ明日から12月になり、アドベントカレンダーが始まります。
CrowdWorksはサービス提供開始から約5年が経過し、2017年9月期の一年間で53億円超の報酬をユーザの皆様に届ける規模のサービスにまで成長しました。この10月からは、新たな技術方針を打ち出し、各チームが動いています。その中で出てきたトピックも今年のアドベントカレンダーでは垣間見えるのではないでしょうか。
本記事では、クラウドワークスのエンジニアが今期どのような領域に対して技術的挑戦をしているのか、代表的なものをご紹介したいと思います。
こんにちは。クラウドワークスの八木です。
今回は、ActiveRecord のパフォーマンス改善に関する gem を作ったので、それについて紹介したいと思います。先にオチを書いちゃいますが、この Gem を入れるだけで必ずパフォーマンスよくなるとか、そこまでのものではありません(仮に、そんな銀の弾丸があれば、 Rails 本体にリクエストを出すべきですし....)。特定のケースにおいて改善が期待される、というタイプのものです。
ActiveRecordのpreloadを使う際、アプリケーションの仕様上不必要なSQLのクエリの発行を避けることができるようになる active_record_association_query_economizer という gemです。
例をあげて説明します。
続きを読む© 2016 CrowdWorks, Inc., All rights reserved.