SSH port forwarding và ứng dụng c# nhỏ thực hiện lấy dữ liệu trang web chặn theo quốc gia

Bài đăng này đã không được cập nhật trong 6 năm

SSH port forwarding

Có 3 loại SSH port forwarding

Local port forwarding: là dạng kết nối từ phía SSH client được chuyển tiếp qua SSH server, rồi đi đến host/server đích. ---> Thường sử dụng khi server có chặn chỉ cho phép ip nào đó access hoặc proxy
Remote port forwarding: kết nối từ phía SSH server được chuyển tiếp qua SSH client, rồi đi đến host/server đích. ---> Nếu bạn hay làm việc với RDS aws mà cần debug code, thì cần sử dụng cái này để mở kết nối
Dynamic port forwarding: tương tự “local port forwarding”, kết nối từ phía SSH client được chuyển tiếp qua SSH server, rồi đến đích tuỳ ý không định trước. ---> Dùng để fake ip address cho browser or pc

Trong bài viết này mình sẽ giới thiệu về ** Dynamic port forwarding** Mở kết nối ssh tới ssh server với tuỳ chọn “-D port” với port ở đây là cổng ở phía ssh client được bật lên như socket của SOCKS server. Thông qua SOCKS này chúng ta có thể đi tới bất kỳ đâu mà ở phía ứng dụng đích đó chỉ biết chúng ta đi ra từ server B, chứ không hề biết thực sự kết nối được khởi tạo từ A.

ssh -D 1080 username@103.89.91.8

Sau khi tạo xong kết nối, chúng ta có thể sử dụng SOCKS này để ra Internet an toàn, ví dụ có thể cấu hình vào Firefox như hình bên dưới.

Ứng dụng c# lấy dữ liệu trang web có chặn ip

Các thư viện sẽ sử dụng

Tạo ForwardedPortDynamic với SSH.NET

private void btnConnect_Click(object sender, EventArgs e)
        {
            btnConnect.Enabled = false;

            _client = new SshClient(txip.Text.Trim(), txusername.Text.Trim(), txpwd.Text.Trim());
            _client.Connect();
            ForwardedPortDynamic port = new ForwardedPortDynamic("127.0.0.1", 1080);
            _client.AddForwardedPort(port);
            if (_client.IsConnected)
            {
                port.Start();
            }
        }

=>> Rất đơn giản, chỉ cần tạo ForwardedPortDynamic như trên thì firefox đã setting như trên sẽ đi qua địa chỉ IP của ssh được sử dụng

Source ví dụ get html

public void getHtml()
        {
            try
            {
                var ffService = FirefoxDriverService.CreateDefaultService(Directory.GetCurrentDirectory(), "geckodriver.exe");
                ffService.HideCommandPromptWindow = true;
                FirefoxOptions ffOptions = new FirefoxOptions();
                _driver = new FirefoxDriver(ffService, ffOptions, TimeSpan.FromSeconds(6));
                _driver.Navigate().GoToUrl(txUrl.Text.Trim());
                textHtml.Text = _driver.PageSource;
            }
            catch(Exception ex)
            {
                Console.WriteLine(ex);
            }
            finally
            {
                _driver.Quit();
            }
        }

===> Sử dụng selenium + firefox để lấy html