python爬蟲（4）——scrapy框架

来源:https://www.cnblogs.com/mcq1999/archive/2019/08/30/11437168.html
-Advertisement-
Play Games

安裝 urllib庫更適合寫爬蟲文件，scrapy更適合做爬蟲項目。 步驟： 1. 先更改pip源，國外的太慢了，參考：https://www.jb51.net/article/159167.htm 2. 升級pip：python m pip install upgrade pip 3. pip i ...


安裝

urllib庫更適合寫爬蟲文件，scrapy更適合做爬蟲項目。

步驟：

  1. 先更改pip源，國外的太慢了，參考：https://www.jb51.net/article/159167.htm
  2. 升級pip：python -m pip install --upgrade pip
  3. pip install wheel
  4. pip install lxml
  5. pip install Twisted
  6. pip install scrapy

常用命令

核心目錄

  1. 新建項目：scrapy startproject mcq
  2. 運行獨立的爬蟲文件（不是項目）：比如

然後輸入命令scrapy runspider gg.py

  1. 獲取設置信息：cd到項目，比如scrapy settings --get BOT_NAME

  2. 互動式爬取：scrapy shell http://www.baidu.com，可以使用python代碼

  3. scrapy版本信息：scrapy version

  4. 爬取並且在瀏覽器顯示：scrapy view http://news.1152.com，將網頁下載到本地打開

  5. 測試本地硬體性能：scrapy bench ,每分鐘可以爬取多少頁面

  6. 依據模板創建爬蟲文件：scrapy genspider -l ,有以下模板

    選擇basic，scrapy genspider -t basic haha baidu.com （註意：這裡填可爬取的功能變數名稱，功能變數名稱是不以www、edu……開頭的）

  1. 測試爬蟲文件是否合規：scrapy check haha

  2. 運行爬蟲項目下的文件：scrapy crawl haha
    不顯示中間的日誌信息：scrapy crawl haha --nolog

  3. 查看當前項目下可用的爬蟲文件：scrapy list

  4. 指定某個爬蟲文件獲取url：
    F:\scrapy項目\mcq>scrapy parse --spider=haha http://www.baidu.com

XPath表達式

XPath與正則簡單對比：

  1. XPath表達式效率會高一點
  2. 正則表達式功能強一點
  3. 一般來說，優先選擇XPath，但是XPath解決不了的問題我們就選正則去解決

/：逐層提取

text()提取標簽下麵的文本

如要提取標題:/html/head/title/text()

//標簽名：提取所有名為……的標簽

如提取所有的div標簽：//div

//標簽名[@屬性='屬性值']：提取屬性為……的標簽

@屬性表示取某個屬性值

使用scrapy做噹噹網商品爬蟲

新建爬蟲項目：F:\scrapy項目>scrapy startproject dangdang

F:\scrapy項目>cd dangdang

F:\scrapy項目\dangdang>scrapy genspider -t basic dd dangdang.com

修改items.py：

# -*- coding: utf-8 -*-

# Define here the models for your scraped items
#
# See documentation in:
# https://docs.scrapy.org/en/latest/topics/items.html

import scrapy


class DangdangItem(scrapy.Item):
    # define the fields for your item here like:
    # name = scrapy.Field()
    title=scrapy.Field() #商品標題
    link=scrapy.Field() #商品鏈接
    comment=scrapy.Field() #商品評論

我們翻一下頁，分析兩個鏈接：

http://category.dangdang.com/pg2-cid4008154.html

http://category.dangdang.com/pg3-cid4008154.html

可以找到初始鏈接：http://category.dangdang.com/pg1-cid4008154.html

分析頁面源碼，可以從name="itemlist-title" 下手，因為這個正好有48個結果，即一頁商品的數量。

ctrl+f 條評論，可以發現正好有48條記錄。

dd.py：

# -*- coding: utf-8 -*-
import scrapy
from dangdang.items import DangdangItem
from scrapy.http import Request
class DdSpider(scrapy.Spider):
    name = 'dd'
    allowed_domains = ['dangdang.com']
    start_urls = ['http://category.dangdang.com/pg1-cid4008154.html']

    def parse(self, response):
        item=DangdangItem()
        item["title"]=response.xpath("//a[@name='itemlist-title']/@title").extract()
        item["link"]=response.xpath("//a[@name='itemlist-title']/@href").extract()
        item["comment"]=response.xpath("//a[@name='itemlist-review']/text()").extract()
        # print(item["title"])
        yield item
        for i in range(2,11): #爬取2~10頁
            url='http://category.dangdang.com/pg'+str(i)+'-cid4008154.html'
            yield Request(url, callback=self.parse)

對於dd里的Request：

url: 就是需要請求，併進行下一步處理的url
callback: 指定該請求返回的Response，由那個函數來處理。

先把settings.py的robots改為False:

settings.py:

# -*- coding: utf-8 -*-

# Scrapy settings for dangdang project
#
# For simplicity, this file contains only settings considered important or
# commonly used. You can find more settings consulting the documentation:
#
#     https://docs.scrapy.org/en/latest/topics/settings.html
#     https://docs.scrapy.org/en/latest/topics/downloader-middleware.html
#     https://docs.scrapy.org/en/latest/topics/spider-middleware.html

BOT_NAME = 'dangdang'

SPIDER_MODULES = ['dangdang.spiders']
NEWSPIDER_MODULE = 'dangdang.spiders'


# Crawl responsibly by identifying yourself (and your website) on the user-agent
#USER_AGENT = 'dangdang (+http://www.yourdomain.com)'

# Obey robots.txt rules
ROBOTSTXT_OBEY = False

# Configure maximum concurrent requests performed by Scrapy (default: 16)
#CONCURRENT_REQUESTS = 32

# Configure a delay for requests for the same website (default: 0)
# See https://docs.scrapy.org/en/latest/topics/settings.html#download-delay
# See also autothrottle settings and docs
#DOWNLOAD_DELAY = 3
# The download delay setting will honor only one of:
#CONCURRENT_REQUESTS_PER_DOMAIN = 16
#CONCURRENT_REQUESTS_PER_IP = 16

# Disable cookies (enabled by default)
#COOKIES_ENABLED = False

# Disable Telnet Console (enabled by default)
#TELNETCONSOLE_ENABLED = False

# Override the default request headers:
#DEFAULT_REQUEST_HEADERS = {
#   'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8',
#   'Accept-Language': 'en',
#}

# Enable or disable spider middlewares
# See https://docs.scrapy.org/en/latest/topics/spider-middleware.html
#SPIDER_MIDDLEWARES = {
#    'dangdang.middlewares.DangdangSpiderMiddleware': 543,
#}

# Enable or disable downloader middlewares
# See https://docs.scrapy.org/en/latest/topics/downloader-middleware.html
#DOWNLOADER_MIDDLEWARES = {
#    'dangdang.middlewares.DangdangDownloaderMiddleware': 543,
#}

# Enable or disable extensions
# See https://docs.scrapy.org/en/latest/topics/extensions.html
#EXTENSIONS = {
#    'scrapy.extensions.telnet.TelnetConsole': None,
#}

# Configure item pipelines
# See https://docs.scrapy.org/en/latest/topics/item-pipeline.html

ITEM_PIPELINES = {
   'dangdang.pipelines.DangdangPipeline': 300,
}
# Enable and configure the AutoThrottle extension (disabled by default)
# See https://docs.scrapy.org/en/latest/topics/autothrottle.html
#AUTOTHROTTLE_ENABLED = True
# The initial download delay
#AUTOTHROTTLE_START_DELAY = 5
# The maximum download delay to be set in case of high latencies
#AUTOTHROTTLE_MAX_DELAY = 60
# The average number of requests Scrapy should be sending in parallel to
# each remote server
#AUTOTHROTTLE_TARGET_CONCURRENCY = 1.0
# Enable showing throttling stats for every response received:
#AUTOTHROTTLE_DEBUG = False

# Enable and configure HTTP caching (disabled by default)
# See https://docs.scrapy.org/en/latest/topics/downloader-middleware.html#httpcache-middleware-settings
#HTTPCACHE_ENABLED = True
#HTTPCACHE_EXPIRATION_SECS = 0
#HTTPCACHE_DIR = 'httpcache'
#HTTPCACHE_IGNORE_HTTP_CODES = []
#HTTPCACHE_STORAGE = 'scrapy.extensions.httpcache.FilesystemCacheStorage'

運行：F:\scrapy項目\dangdang>scrapy crawl dd --nolog

去settings.py將pipeline開啟：

pipelines.py:

# -*- coding: utf-8 -*-
import pymysql
# Define your item pipelines here
#
# Don't forget to add your pipeline to the ITEM_PIPELINES setting
# See: https://docs.scrapy.org/en/latest/topics/item-pipeline.html


class DangdangPipeline(object):
    def process_item(self, item, spider):
        conn=pymysql.connect(host='127.0.0.1',user="root",passwd="123456",db="dangdang")
        cursor = conn.cursor()
        for i in range(len(item["title"])):
            title=item["title"][i]
            link=item["link"][i]
            comment=item["comment"][i]
            # print(title+":"+link+":"+comment)
            sql="insert into goods(title,link,comment) values('%s','%s','%s')"%(title,link,comment)
            # print(sql)
            try:
                cursor.execute(sql)
                conn.commit()
            except Exception as e:
                print(e)
        conn.close()
        return item

登錄mysql，創建一個資料庫：mysql> create database dangdang;

mysql> use dangdang

mysql> create table goods(id int(32) auto_increment primary key,title varchar(100),link varchar(100) unique,comment varchar(100));

最後運行 scrapy crawl dd --nolog

每頁48條，48*10=480，爬取成功！

完整項目源代碼參考我的github

scrapy模擬登陸實戰

以這個網站為例http://edu.iqianyue.com/，我們不爬取內容，只模擬登陸，所以不需要寫item.py

點擊登陸，用fiddler查看真正的登陸網址：http://edu.iqianyue.com/index_user_login

修改login.py：

# -*- coding: utf-8 -*-
import scrapy
from scrapy.http import FormRequest, Request


class LoginSpider(scrapy.Spider):
    name = 'login'
    allowed_domains = ['iqianyue.com']
    start_urls = ['http://iqianyue.com/']
    header={"User-Agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:68.0) Gecko/20100101 Firefox/68.0"}
    #編寫start_request()方法，第一次會預設調取該方法中的請求
    def start_requests(self):
        #首先爬一次登錄頁，然後進入回調函數parse()
        return [Request("http://edu.iqianyue.com/index_user_login",meta={"cookiejar":1},callback=self.parse)]
    def parse(self, response):
        #設置要傳遞的post信息，此時沒有驗證碼欄位
        data={
            "number":"swineherd",
            "passwd":"123",
        }
        print("登錄中……")
        #通過ForRequest.from_response()進行登錄
        return FormRequest.from_response(response,
                                          #設置cookie信息
                                          meta={"cookiejar":response.meta["cookiejar"]},
                                          #設置headers信息模擬成瀏覽器
                                          headers=self.header,
                                          #設置post表單中的數據
                                          formdata=data,
                                          #設置回調函數
                                          callback=self.next,
                                          )
    def next(self,response):
        data=response.body
        fp=open("a.html","wb")
        fp.write(data)
        fp.close()
        print(response.xpath("/html/head/title/text()").extract())
        #登錄後訪問
        yield Request("http://edu.iqianyue.com/index_user_index",callback=self.next2,meta={"cookiejar":1})
    def next2(self,response):
        data=response.body
        fp=open("b.html","wb")
        fp.write(data)
        fp.close()
        print(response.xpath("/html/head/title/text()").extract())

scrapy新聞爬蟲實戰

目標：爬取百度新聞首頁所有新聞

F:>cd scrapy項目

F:\scrapy項目>scrapy startproject baidunews

F:\scrapy項目>cd baidunews

F:\scrapy項目\baidunews>scrapy genspider -t basic n1 baidu.com

抓包分析

找到json文件：

idle查看一下

首頁ctrl+f:

在首頁往下拖觸發所有新聞，在fiddler中找到存儲url、title等等的js文件（並不是每一個js文件都有用）

發現不止js文件有新聞信息，還有別的，要細心在fiddler找！

http://news.baidu.com/widget?id=LocalNews&ajax=json&t=1566824493194

http://news.baidu.com/widget?id=civilnews&t=1566824634139

http://news.baidu.com/widget?id=InternationalNews&t=1566824931323

http://news.baidu.com/widget?id=EnterNews&t=1566824931341

http://news.baidu.com/widget?id=SportNews&t=1566824931358

http://news.baidu.com/widget?id=FinanceNews&t=1566824931376

http://news.baidu.com/widget?id=TechNews&t=1566824931407

http://news.baidu.com/widget?id=MilitaryNews&t=1566824931439

http://news.baidu.com/widget?id=InternetNews&t=1566824931456

http://news.baidu.com/widget?id=DiscoveryNews&t=1566824931473

http://news.baidu.com/widget?id=LadyNews&t=1566824931490

http://news.baidu.com/widget?id=HealthNews&t=1566824931506

http://news.baidu.com/widget?id=PicWall&t=1566824931522

我們可以發現真正影響新聞信息的是widget?後面的id值

寫個腳本把id提取出來：

兩種不同的鏈接的源代碼的url也不同：

items.py:

# -*- coding: utf-8 -*-

# Define here the models for your scraped items
#
# See documentation in:
# https://docs.scrapy.org/en/latest/topics/items.html

import scrapy


class BaidunewsItem(scrapy.Item):
    # define the fields for your item here like:
    # name = scrapy.Field()
    title=scrapy.Field()
    link=scrapy.Field()
    content=scrapy.Field()

n1.py:

# -*- coding: utf-8 -*-
import scrapy
from baidunews.items import BaidunewsItem #從核心目錄
from scrapy.http import Request
import re
import time
class N1Spider(scrapy.Spider):
    name = 'n1'
    allowed_domains = ['baidu.com']
    start_urls = ["http://news.baidu.com/widget?id=LocalNews&ajax=json"]
    allid=['LocalNews', 'civilnews', 'InternationalNews', 'EnterNews', 'SportNews', 'FinanceNews', 'TechNews', 'MilitaryNews', 'InternetNews', 'DiscoveryNews', 'LadyNews', 'HealthNews', 'PicWall']
    allurl=[]
    for k in range(len(allid)):
        thisurl="http://news.baidu.com/widget?id="+allid[k]+"&ajax=json"
        allurl.append(thisurl)

    def parse(self, response):
        while True: #每隔5分鐘爬一次
            for m in range(len(self.allurl)):
                yield Request(self.allurl[m], callback=self.next)
                time.sleep(300) #單位為秒
    cnt=0
    def next(self,response):
        print("第" + str(self.cnt) + "個欄目")
        self.cnt+=1
        data=response.body.decode("utf-8","ignore")
        pat1='"m_url":"(.*?)"'
        pat2='"url":"(.*?)"'
        url1=re.compile(pat1,re.S).findall(data)
        url2=re.compile(pat2,re.S).findall(data)
        if(len(url1)!=0):
            url=url1
        else :
            url=url2
        for i in range(len(url)):
            thisurl=re.sub("\\\/","/",url[i])
            print(thisurl)
            yield Request(thisurl,callback=self.next2)
    def next2(self,response):
        item=BaidunewsItem()
        item["link"]=response.url
        item["title"]=response.xpath("/html/head/title/text()")
        item["content"]=response.body
        print(item)
        yield item

將settings的pipeline開啟：

將robots改為False，scrapy crawl n1 --nolog即可運行

scrapy豆瓣網登錄爬蟲

要在settings裡加上：

USER_AGENT = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_8_3) AppleWebKit/536.5 (KHTML, like Gecko) Chrome/19.0.1084.54 Safari/536.5'

關於scrapy.http.FormRequest和scrapy.http.FormRequest.from_response的用法區別參考這篇博客：https://blog.csdn.net/qq_33472765/article/details/80958820

d1.py:

# -*- coding: utf-8 -*-
import scrapy
from scrapy.http import Request, FormRequest


class D1Spider(scrapy.Spider):
    name = 'd1'
    allowed_domains = ['douban.com']
    # start_urls = ['http://douban.com/']
    headers = {"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:68.0) Gecko/20100101 Firefox/68.0"}

    def start_requests(self):
        # 首先爬一次登錄頁，然後進入回調函數parse()
        print("開始：")
        return [Request("https://accounts.douban.com/passport/login",meta={"cookiejar":1},callback=self.login)]

    def login(self, response):
        #判斷驗證碼
        captcha=response.xpath("//")
        data = {
            "ck": "",
            "name": "***",
            "password": "***",
            "remember": "false",
            "ticket": ""
        }
        print("登陸中……")
        return FormRequest(url="https://accounts.douban.com/j/mobile/login/basic",
                                         # 設置cookie信息
                                         meta={"cookiejar": response.meta["cookiejar"]},
                                         # 設置headers信息模擬成瀏覽器
                                         headers=self.headers,
                                         # 設置post表單中的數據
                                         formdata=data,
                                         # 設置回調函數
                                         callback=self.next,
                                         )
    def next(self,response):
        #跳轉到個人中心
        yield Request("https://www.douban.com/people/202921494/",meta={"cookiejar":1},callback=self.next2)
    def next2(self, response):
        title = response.xpath("/html/head/title/text()").extract()
        print(title)

現在的豆瓣是滑塊驗證碼，對於現在的我這個菜雞還不會處理。

在urllib中使用XPath表達式

先安裝lxml模塊：pip install lxml，然後將網頁數據通過lxml下的etree轉化為treedata的形式。

import urllib.request
from lxml import etree
data=urllib.request.urlopen("http://www.baidu.com").read().decode("utf-8","ignore")
treedata=etree.HTML(data)
title=treedata.xpath("//title/text()")
print(title)

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • python記憶體分析
    安裝 首先安裝memory_profiler和psutil 在需要分析的函數前面添加裝飾器@profile 運行call後的輸出： Line Mem usage Increment Line Contents ============================================= ...
  • 指令重排令提升程式執行效率提升20%！
    java代碼是否一定按順序執行？ 這個問題聽起來有點蠢，串列的代碼確實會按代碼語意正確的執行，但是編譯器對於代碼本身的優化卻並不一定會按實際的代碼一步一步的執行。 比如： r1=a; r2=r1.x; r3=r1.x; 編譯器則可能會進行優化，將r3=r1.x這條指令替換成r3=r2，這就是指令的重 ...
  • python關鍵字global和nonlocal總結
    函數中使用全局變數 執行fun()後返回值為:500 a, b使用的是全局變數的值。 函數中覆蓋全局變數 執行fun()後返回值為:50 a, b使用的是局部變數的值。 函數中修改改全局變數 執行fun()後返回值為:110 a使用的是全局變數a=100的值, b使用的是函數func修改後b的值10 ...
  • 02-css的選擇器
    一、基本選擇器 1.標簽選擇器 標簽選擇器會選中所有的標簽元素，是“共性”，而不是“特性”。 2.id選擇器 由於同一個頁面中id不能重覆，所以id選中的是特性，而不是共性。 3.類選擇器 由於同一個頁面中類名可以重覆，所以選中的是共性。 重點：公共類 到底是使用id還是class? 儘可能使用cl ...
  • JavaWeb Listener之HttpSessionActivationListener ，session鈍化、活化
    HttpSessionActivationListener 監聽HttpSession對象的活化、鈍化 鈍化：將HttpSession對象從記憶體中轉移至硬碟，存儲為.session文件。 活化：把HttpSession對象從持久化狀態轉變為運行狀態（從硬碟載入到記憶體，恢複原樣）。 HttpSessi ...
  • python 之 Django框架(Django框架簡介、視圖裝飾器、request對象、Response對象)
    12.33 Django框架簡介： MVC，全名是Model View Controller，是軟體工程中的一種軟體架構模式，把軟體系統分為三個基本部分：模型(Model)、視圖(View)和控制器(Controller)，具有耦合性低、重用性高、生命周期成本低等優點 Django框架的設計模式借鑒 ...
  • IDLE添加行號
    1.下載idlex-1.18.zip 網址：https://zh.osdn.net/projects/sfnet_idlex/ 2.解壓idlex-1.18.zip 2.解壓idlex-1.18.zip （1）將LineNumbers.py(idlex-1.18\idlexlib\extension ...
  • 緩存內功心法：緩存基礎整理
    緩存雪崩 緩存雪崩是由於原有緩存失效(過期)，新緩存未到期間。所有請求都去查詢資料庫，而對資料庫CPU和記憶體造成巨大壓力，嚴重的會造成資料庫宕機。從而形成一系列連鎖反應，造成整個系統崩潰。 解決方法： 一般併發量不是特別多的時候，使用最多的解決方案是加鎖排隊。 給每一個緩存數據增加相應的緩存標記，記 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類