Skip to content
biukop.com 1800 181 522

This document is intended for communication between Biukop and Supertraderfx, all contents are considered confidential.

以下内容描述了抓取网页,解码,存储,然后再生,无缝嵌入新网站的工作内容和流程,末尾是相关报价,仅供参考,有效期 2周。

任务1:抓取浅黄色区域的新闻内容

https://www.fx678.com/kx

抓取的范围

  • 从网站拷贝所有新闻数据到新网站数据库
  • 移除所有链接,防止用户点击回调 fx678
  • 重新格式化数据,在新网站展示新闻数据,包括:
    • 时间戳 time
    • 内容
    • 图片
    • 回调 fx678 内容
    • fx678 动态 内容

是否选择分页功能?

支持动态分页

  • 用户可浏览所有历史数据
  • 只要点击页码

不支持动态分页

  • 只显示有限个数, 比如4条
  • 格式采用标准新闻表格,时间+内容,如下

是否支持动态更新?

动态更新:是在用户访问第一页(如果分页)的前提下,如果网页没有任何操作,新的信息会推送至前台,并且下动态插入信息顶端。

任务2:拷贝FX财务日历

https://www.fx678.com/kx

抓取范围

  • 从网页拷贝以下类别的数据:
    • 财经新闻
    • 财经大事件
    • 央行动态数据
  • 移除所有链接,防止用户点击回调 fx678
  • 解码数据,分类,存储
  • 重新格式化显示解码之后的数据
    • 财经新闻: 时间,区域(仅文字,无图),指标,前值,预测值,公布值,重要性,利多,利空。不包括 解读
    • 财经大事件:时间,国家地区(文字),地点,重要性(星标生成),时间,文字。
    • 央行动态数据:央行,利率名称,当前值,前次值,最近非0变动基点,历史峰值,历史最低,下次预测值,CPI最新值
  • 不包括动态折叠:  查看完整交易日大事,查看完整交易日数据。
  • 历史数据管理:
    • Supertrader 新网站的管理,不返回原网站。
    • 存档每日的链接文件

抓取网页流程示意图

系统框图

标记 的部件与抓取网页和重新合成信息有关。

仅抓取数据
$1900 + GST
  • 抓取外汇资讯 https://www.fx678.com/kx
  • 抓取财经数据  https://rl.fx678.com/
  • 抓取财经大事件 https://rl.fx678.com/
  • 抓取央行动态数据 https://rl.fx678.com/
  • 反向工程/转化成数据库
标准后端
$2300 + GST
  • 抓取外汇资讯 https://www.fx678.com/kx
  • 抓取财经数据  https://rl.fx678.com/
  • 抓取财经大事件 https://rl.fx678.com/
  • 抓取央行动态数据 https://rl.fx678.com/
  • 反向工程/转化成数据库
  • ————————-
  • WordPress Plugin
  • 提供Json 数据格式
  • 提供Ajax Call
注意: 如果fx678网页出现变更,抓取程序将必须更新如果对方网站加入反截取功能,则需要评估是否能成功获得数据更改难度由fx678网页的复杂程度而定,本次报价根据目前的抓取内容,不包括将来的更新如果数据变化过大,后台数据库格式,也会有相应调整,也需要修改新网站的网页设计。

End

Back To Top