爬虫之获取抖音粉丝数(非授权)

￡神魔★判官ぃ 2022-12-22 04:41 58阅读 0赞

抖音有开放平台，可以走oauth授权。

[抖音开放平台][Link 1]

不过由于微信小程序封杀了抖音，所以微信小程序要走抖音官方这条路就行不通了。不多说，直接上源码

DyUtils

package com.zengp.demo.util;
    
    import org.springframework.http.HttpEntity;
    import org.springframework.http.HttpHeaders;
    import org.springframework.http.MediaType;
    import org.springframework.http.ResponseEntity;
    import org.springframework.util.LinkedMultiValueMap;
    import org.springframework.util.MultiValueMap;
    import org.springframework.web.client.RestTemplate;
    
    import com.zengp.demo.constant.CommConstants;
    import com.zengp.demo.model.DyUser;
    /**
      * 获取抖音粉丝等相关信息(不走官方授权)
      * 此工具类可直接使用，也可根据其逻辑自行优化
     * @author zengp
     * 
     */
    public class DyUtils {
    	// 短链转长链，目的是将短链解析出来拿到sec_uid，可自行优化
    	private static String shortchainUrl = "https://duanwangzhihuanyuan.51240.com/web_system/51240_com_www/system/file/duanwangzhihuanyuan/get/";
    	// 抖音官方接口(未开放)
    	private static String dyUrl = "https://www.iesdouyin.com/web/api/v2/user/info/";
    	
    	public static DyUser dyFans (String link) {
    		link = clearDyHomeLink(link);
    		RestTemplate restT = new RestTemplate();
    		HttpHeaders headers = new HttpHeaders();
    		headers.setContentType(MediaType.APPLICATION_FORM_URLENCODED);
    		MultiValueMap<String,String> map = new LinkedMultiValueMap<>();
    		map.add("turl", link);
    		HttpEntity<MultiValueMap<String,String>> request = new HttpEntity<>(map,headers);
    		ResponseEntity<String> response = restT.postForEntity(shortchainUrl, request, String.class);
    		String dyResult = response.getBody();
    		String secUid = getSecUid(dyResult);
    		DyUser dyUser = getDyFans(secUid);
    		return dyUser;
    	}
    	
    	/**
    	  * 获取抖音的sec_uid
    	 * @param str
    	 * @return
    	 */
    	private static String getSecUid (String str) {
    		String result = "";
    		StringBuffer sb = new StringBuffer(str);
    		int start = sb.indexOf(CommConstants.secUid) + CommConstants.secUid.length() + CommConstants.cursor;
    		int end = start + CommConstants.uidLength;
    		result = sb.substring(start, end);
    		return result;
    	}
    	/**
    	  *  获取抖音相关信息
    	 * @param secUid
    	 * @return
    	 */
    	private static DyUser getDyFans (String secUid) {
    		RestTemplate restT = new RestTemplate();
    		String url = dyUrl + CommConstants.secUidUrl + secUid;
    		ResponseEntity<DyUser> response = restT.getForEntity(url, DyUser.class);
    		DyUser dyUser = response.getBody();
    		return dyUser;
    	}
    	
    	/**
    	  *  纯净化抖音主页分享链接
    	  * 保险起见建议还是让用户自行去掉中文
    	 * @param link
    	 * @return
    	 */
    	private static String clearDyHomeLink (String link) {
    		String result = "";
    		// 这里可以优化
    		result = link.replaceAll(CommConstants.REGEX_CHINESE, "");
    		result = result.replaceAll(CommConstants.REGEX_COMMA, "");
    		result = result.replaceAll(CommConstants.REGEX_EXCLAMATORY_MARK, "");
    		result = result.trim();
    		return result;
    	}
    }

主要是通过抖音的分享链接短链解析长链拿到secuid，然后通过抖音非官方接口请求到数据。所以就做到了通过用户主页链接就能拿到该用户的所有公开资料，可以自行选取自己要的字段，我主要是要粉丝数、点赞数和关注数。

使用示例

用雷军的抖音主页分享链接

![20201117165245725.png][]

运行结果

![2020111716530012.png][]

实际对比

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM1NTQyNjg5_size_16_color_FFFFFF_t_70][]

源码中涉及到的接口，如有侵权，请联系博主。

原创不易，转载请标明出处。

本文仅供学习使用，请勿商业使用。

完整源码

[https://github.com/Zeng49487/MediaFans][https_github.com_Zeng49487_MediaFans]

[Link 1]: https://open.douyin.com/platform
[20201117165245725.png]: /images/20221120/f798854d0c4741d5baa30dbeda684dd5.png
[2020111716530012.png]: /images/20221120/1555431846e146fdba9f2dfffe75da84.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzM1NTQyNjg5_size_16_color_FFFFFF_t_70]: /images/20221120/78df2663c6d9483b9d0c8033407c8404.png
[https_github.com_Zeng49487_MediaFans]: https://github.com/Zeng49487/MediaFans